由【有道测试团队】与 TesterHome 社区联合主办的【网易有道 - 质量保障体系】主题技术沙龙,邀约大家共探:网易有道质量保障的支撑体系,精彩分享,不容错过。
沙龙活动时间:2023年8月20日
网易有道以帮助用户实现 “高效学习” 为使命,依托强大的 Al 技术,围绕学习场景打造了一系列深受用户喜爱的学习产品和服务。
网易有道测试团队一直致力于探索高质量、高效率的服务保障体系,并从用户角度不断探索 AI 算法的质量评估体系。
张晓璐
网易有道人工智能产品部测试开发专家
负责有道 AI 评测工作,热爱探索 AI 算法和产品的评测体系建设。
时间:2023年08月20日
活动地点:
北京市海淀区西北旺东路 10 号院中关村软件园二期西区 7 号 网易研发中心 C1M6
时间 | 议题 |
---|---|
14:00 - 14:05 | 主持人开场 |
14:05 - 14:10 | 出品人以及团队介绍 |
14:10 - 14:50 | 《有道业务监控系统的演变》田霄、汪梅 |
14:50 - 15:30 | 《词典笔 OCR 的质量保障探索及实战》王丹 |
15:30 - 16:10 | 《有道口语打分(CAPT)算法评测》周寒聿西 |
16:10 - 16:50 | 《有道 TTS 评测体系介绍》龚思思 |
16:50 - 17:20 | QA |
议题分享一:《有道业务监控系统的演变》
讲师介绍
田霄 毕业于中南大学,10 年的测试开发经验,对自动化测试领域有浓厚的兴趣,目前负责有道测试工具平台的建设与推进工作。
汪梅 资深测试开发工程师,任职网易有道广告部测试负责人,喜欢研究持续集成和持续测试、线下线上质量可见性、测试平台设计开发等。
议题介绍
监控是业务线上质量保障中的重要一环,具有发现问题、辅助排查问题的重要作用,充当着 “保镖” 的角色。希望借助分享,可以把有道在业务监控系统搭建方面演变的过程、过程中遇到的问题以及有效的实践方案等总结分享给大家。
议题分享二:《词典笔 OCR 的质量保障探索及实战》
讲师介绍
王丹 有道词典笔和 AI 学习机 AI 质量评测项目负责人。8 年 AI 领域工作经验,7 年项目管理经验。擅长从用户角度设计评测方案和评测指标,通过流程、自动化、sop 保证产品质量和降本增效。
议题介绍
随着越来越多公司进军词典笔领域,OCR 是词典笔的核心算法之一,其质量直接影响产品口碑和用户体验。作为词典笔领域行业第一的网易有道词典笔算法质量评测负责人,探索出了一套成熟且客观的评测体系,为词典笔以及其他算法质量保障同学提供了优秀的实践经验。本次分享将介绍我们目前总结出来的评测认知,帮助大家少走弯路。也希望能够抛转引玉,和大家共创 AI 算法质量的评测标准。
议题分享三:《有道口语打分(CAPT)算法评测》
讲师介绍
周寒聿西 网易有道测试开发工程师,负责有道语音相关业务测试
议题介绍
口语打分(CAPT)算法质量测试方法探索
1.介绍口语打分评测面临的困难:标注主观、评测方面多、指标不反映问题
2.介绍数据标注的挑战:音素颗粒度、主观与客观的平衡、定性的原则
3.分享新指标的探索尝试:将准召率指标修改应用于连续数值任务
4.多样灵活的测试方法尝试:专项测试、验证性测试、人工评估
议题分享四:《有道 TTS 评测体系介绍》
讲师介绍
龚思思 网易有道测试开发工程师,先后负责自然语言处理、语音合成、计算机视觉等方向的质量保障,目前是计算机视觉业务测试负责人。
议题介绍
介绍有道 TTS 评测体系,包括如何多维度设计适合业务的评测指标和评测方法以及如何高效建设评测数据,来推动业务不断优化,保障产品质量。
============》点击报名《=================
或扫描下方二维码报名
我们也期待更多测试技术专家在 TesterHome 平台畅谈技术心得,洞察最新技术浪潮、分享实用 coding 经验,帮助更多测试同学在技术领域持续学习成长!如果你想要投稿技术专栏,或直播分享你的开发测试经验,欢迎扫描下方小助手的二维码联系我们~