AI News HubLIVE
站内改写

开放模型落后闭源模型4个月

根据Epoch的内部能力指标(ECI),开放权重模型通常需要平均4个月才能达到闭源模型的先进性能。ECI是一种综合衡量标准,涵盖了多个基准测试的表现。

来源Hacker News AI作者: intelkishan

Epoch的研究采用其内部能力指标——Epoch能力指数(ECI)来比较开放权重模型与闭源模型的性能。ECI是一个综合衡量标准,融合了多个基准测试的评分。研究发现,开放权重模型通常需要约4个月的时间才能达到闭源模型的最先进水平。这一差距表明,尽管开放模型发展迅速,但在性能追赶上仍存在时间滞后。Epoch的工作在Creative Commons BY许可下免费使用和分发,用户只需注明来源和作者。