软件工程中的机器学习方法

← 返回到实验室

Evaluation of performance metrics for code generation models

该项目旨在了解如何正确评估代码生成模型，比较现有的性能指标，并引入一个与人类判断更好地相关的新指标。

参与者

Mikhail Evtikheev
Egor Bogomolov

出版物

年 8 月 2022 日
Mikhail Evtikhiev, Egor Bogomolov, Yaroslav Sokolov, Timofey Bryksin

Out of the BLEU: How Should We Assess Quality of the Code Generation Models?

arXiv pre-print