岗位描述
1、洞察业界模型评测体系,结合用户使用场景,构建AI能力相关算法模型的评测标准、业务体验评估标准、测试设计,测试策略等,完成AI模型的性能评测和效果验证,以及场景化验证; 2、负责构建AI关键测试能力,包括构建高质量测试数据集、自动标注能力、自动化测试能力等;协助搭建和维护模型评测平台,推动评测流程的自动化; 3、分析评测数据,协助定位模型问题,提出改进建议; 协助算法工程师和数据团队完成模型优化; 4、跟踪行业和竞品发展情况,跟踪完成AI相关特性的竞品横向洞察,牵引模型能力优化与竞争力提升。