01 / EVALUATION FRAMEWORK↗
▥EvalScope评测流程
模型 / API评测任务结果报告
CAPABILITYPERFORMANCEINSIGHT
AI ENGINEERING · OPEN SOURCE
Yunlin Mao
大模型评测
与训练基础设施
我在 ModelScope 团队参与 AI 开源项目开发，
主要关注模型评测、微调与后训练。
BUILD. EVALUATE. ITERATE.
参与 EvalScope、Twinkle 和 ms-swift 的开发。SCROLL TO EXPLORE ↓
01 / SELECTED WORK
参与的开源项目
主要参与模型评测、训练服务与模型微调相关的开源项目。
SELECTED OPEN-SOURCE PROJECTS
显示全部 3 个项目
流程示意 · 非实测数据
02 / TRAINING INFRASTRUCTURE✳
Twinkle ClientTinker Client
Twinkle统一训练服务接口
TransformersMegatron
03 / FINE-TUNING & POST-TRAINING
LLMVLM
ms-swift模型微调与后训练
SFTDPO / GRPODEPLOY
项目代码与提交记录见各项目仓库。GitHub 仓库
02 / RESEARCH & PUBLICATIONS
论文与预印本
研究工作涉及自然语言处理、图表问答、数值推理、文档搜索和大模型训练基础设施。
显示全部 7 篇论文
2026
Twinkle: A Composable Training-as-a-Service Infrastructure for Multi-Tenant Post-Training
面向多租户后训练场景，提供可组合的训练服务基础设施。
2026
LENS: In-Context Search via Latent Evidence Exploration over Dynamic Raw Documents
研究动态文档中的上下文搜索，通过探索潜在证据定位相关内容。
2025
Bridging Questions and Charts: A Weakly Supervised Alignment Model for Chart Question Answering
通过弱监督学习对齐问题与图表信息，用于图表问答。
2025
SWIFT: A Scalable Lightweight Infrastructure for Fine-Tuning
面向大语言模型与多模态模型的微调框架，支持训练、推理、评测与量化。
2024
ModelScope: Towards Cloud-Native Model-as-a-Service from Open-Source Perspectives
从开源平台的角度讨论云原生模型即服务（Model-as-a-Service）。
2023
Alignment is Crucial: A Weakly Supervised Alignment Model for Chart Question Answering
研究通过弱监督学习对齐问题与图表信息的方法，用于图表问答。
2022
A Numerical Reasoning Question Answering System with Fine-grained Retriever and the Ensemble of Multiple Generators for FinQA
结合细粒度检索与多个生成模型，完成金融文本和表格中的数值推理问答。
列表包括已发表论文、预印本和投稿论文；投稿不代表已录用。更新于 2026 年 10 月
03 / EDUCATION
教育经历
南京大学 硕士
人工智能学院 · NLP 组
Nanjing University · Natural Language Processing武汉大学 本科
计算机软件工程专业
Wuhan University · Software Engineering04 / WHAT I CARE ABOUT
技术方向
模型评测
关注模型能力评测、评测方法和结果分析，重视实验的可复现性。
MEASURE WHAT MATTERS训练基础设施
关注模型训练接口、资源调度和服务可靠性，改进训练工具的使用体验。
MAKE COMPLEXITY USABLE开源工程
参与开源项目开发，持续完善代码、文档和测试。
BUILD IN THE OPEN05 / A LITTLE ABOUT ME
关于我
目前在阿里巴巴通义实验室 ModelScope 团队工作，参与 EvalScope、Twinkle 和 ms-swift 的开发。
2024 年硕士毕业于南京大学人工智能学院，研究方向为自然语言处理；2021 年本科毕业于武汉大学计算机软件工程专业。
欢迎交流模型评测、训练基础设施和开源开发。
LET’S BUILD SOMETHING USEFUL