岗位职责:
1、负责开发大模型训练&微调的数据处理方案,根据不同领域场景大模型落地需求,提出大模型训练&微调数据规模、数据质量、语料配比、数据清洗等建议;
2、负责大模型语料数据处理,通过数据去重、规则过滤、数据去毒等手段对数据集进行清洗,沉淀出满足大模型训练微调等要求的数据集;
3、协助场景化AI服务解决方案的开发,负责新解决方案的推广落地、技术支持等工作;
4、支持AI项目交付,协助行业AI项目方案设计、技术管理、交付实施等,协同厂商共同达成AI业务目标。
任职要求:
1、统招本科学历,3年及以上AI项目经验,具有技术规划/产品规划/解决方案开发经验;
2、至少精通其中一个领域:LLM、NLP、机器学习、强化学习、智能推荐。至少有两个领域的项目经验;
3、熟悉Python、Scala、Java等至少一门编程语言,有扎实的编程功底。熟悉Tensorflow、Pytorch、MindSpore至少一种深度学习框架;
4、具有大模型训练或微调工程、大模型数据工程的研发经验,有结合AI场景参与数据清洗经历者优先;
5、具有重大AI方案成功交付经验者优先,包括传统AI场景(NLP,CV,OCR等)。