当前位置:   article > 正文

人工智能基准(Benchmarking)再思考

ai benchmarking是什么


来源:专知

本文多图,建议阅读5分钟

本文介绍我们在人工智能(特别是在自然语言处理)中进行基准测试的方式时所做的工作。

当前人工智能中的基准测试范式存在许多问题:基准很快饱和,容易过度拟合,包含可利用的注释器工件,评估指标不清晰或不完善,并且不能衡量我们真正关心的东西。我将谈谈我在尝试重新思考我们在人工智能(特别是在自然语言处理)中进行基准测试的方式时所做的工作,包括对抗性的NLI和模因数据集,以及最近推出的Dynabench平台。

https://nlp.stanford.edu/seminar/details/douwekiela.shtml

声明:本文内容由网友自发贡献,不代表【wpsshop博客】立场,版权归原作者所有,本站不承担相应法律责任。如您发现有侵权的内容,请联系我们。转载请注明出处:https://www.wpsshop.cn/w/笔触狂放9/article/detail/621871
推荐阅读
相关标签
  

闽ICP备14008679号