事【网易有道 - 质量保障体系】主题技术沙龙

开始时间: 2023-08-20 14:00:00 周日

结束时间: 2023-08-20 18:00:00 周日

举办地点: 北京网易研发中心 C1M6

报名已截止活动已结束

由【有道测试团】与 TesterHome 社区联合主办的【网易有道 - 质量保障体系】主题技术沙龙，邀约大家共探：网易有道质量保障的支撑体系，精彩分享，不容错过。

沙龙活动时间：2023年8月20日

团队简介

网易有道以帮助用户实现 “高效学习” 为使命，依托强大的 Al 技术，围绕学习场景打造了一系列深受用户喜爱的学习产品和服务。
网易有道测试团队一直致力于探索高质量、高效率的服务保障体系，并从用户角度不断探索 AI 算法的质量评估体系。

活动出品人

张晓璐
网易有道人工智能产品部测试开发专家
负责有道 AI 评测工作，热爱探索 AI 算法和产品的评测体系建设。

沙龙安排

时间：2023年08月20日

活动地点：
北京市海淀区西北旺东路 10 号院中关村软件园二期西区 7 号 网易研发中心 C1M6

日程安排

时间	议题
14:00 - 14:05	主持人开场
14:05 - 14:10	出品人以及团队介绍
14:10 - 14:50	《有道业务监控系统的演变》田霄、汪梅
14:50 - 15:30	《词典笔 OCR 的质量保障探索及实战》王丹
15:30 - 16:10	《有道口语打分（CAPT）算法评测》周寒聿西
16:10 - 16:50	《有道 TTS 评测体系介绍》龚思思
16:50 - 17:20	QA

分享主题

议题分享一：《有道业务监控系统的演变》

讲师介绍
田霄毕业于中南大学，10 年的测试开发经验，对自动化测试领域有浓厚的兴趣，目前负责有道测试工具平台的建设与推进工作。
汪梅资深测试开发工程师，任职网易有道广告部测试负责人，喜欢研究持续集成和持续测试、线下线上质量可见性、测试平台设计开发等。

议题介绍
监控是业务线上质量保障中的重要一环，具有发现问题、辅助排查问题的重要作用，充当着 “保镖” 的角色。希望借助分享，可以把有道在业务监控系统搭建方面演变的过程、过程中遇到的问题以及有效的实践方案等总结分享给大家。

议题分享二：《词典笔 OCR 的质量保障探索及实战》

讲师介绍
王丹有道词典笔和 AI 学习机 AI 质量评测项目负责人。8 年 AI 领域工作经验，7 年项目管理经验。擅长从用户角度设计评测方案和评测指标，通过流程、自动化、sop 保证产品质量和降本增效。

议题介绍
随着越来越多公司进军词典笔领域，OCR 是词典笔的核心算法之一，其质量直接影响产品口碑和用户体验。作为词典笔领域行业第一的网易有道词典笔算法质量评测负责人，探索出了一套成熟且客观的评测体系，为词典笔以及其他算法质量保障同学提供了优秀的实践经验。本次分享将介绍我们目前总结出来的评测认知，帮助大家少走弯路。也希望能够抛转引玉，和大家共创 AI 算法质量的评测标准。

议题分享三：《有道口语打分（CAPT）算法评测》

讲师介绍

周寒聿西网易有道测试开发工程师，负责有道语音相关业务测试

议题介绍
口语打分（CAPT）算法质量测试方法探索
1.介绍口语打分评测面临的困难：标注主观、评测方面多、指标不反映问题
2.介绍数据标注的挑战：音素颗粒度、主观与客观的平衡、定性的原则
3.分享新指标的探索尝试：将准召率指标修改应用于连续数值任务
4.多样灵活的测试方法尝试：专项测试、验证性测试、人工评估

议题分享四：《有道 TTS 评测体系介绍》

讲师介绍