岗位要求：

1、硕士学历，可应届毕业生，中药学+中医药信息学专业优先考虑；
2、具备扎实的中医药理论基础，包括对中药药性、功效、配伍等方面的深入了解。熟悉中医药的辩证思维，能够从整体出发，综合考虑多方面因素进行评测。
3、掌握大模型评测的基本原理和方法，包括但不限于模型效果评估体系的构建、测试方案的设计、评测标准的制定等。
4、熟悉如何结合业务需求，构建合理且置信的评测标准，并能够洞察业界发展方向，持续更新及优化测试标准与方法
5、评测专家需要具备强大的数据分析能力，能够从大量数据中提取有效信息，对模型的性能进行准确评估
6、评测专家需要具备良好的沟通能力和团队协作精神，能够与其他团队成员有效沟通，共同推进评测工作的顺利进行。

岗位职责：
1、制定评测方案：根据中医药领域的特点和需求，制定详细且全面的大模型评测方案。确保评测方案能够准确评估大模型在中医药领域的应用效果和性能。
2、按照评测方案，对大模型进行系统的测试和评估。对模型的召回率、准确率、可解释性等方面的全面考察；
3、对评测过程中收集的数据进行深入分析，提取关键指标和性能数据；
4、基于专业中医药行业知识和实践经验，对模型进行客观、全面的评价；
5、医药大模型评测集撰写，根据行业经验撰写符合行业背景、用户使用习惯、符合业务场景预期的训练、评测、调优数据集；
6、基于专业中医药行业知识和实践经验，协同数据工程师，完成医药数据的标准工作，并对标注结果和质量负责。