直播、视频会议、在线教学等实时互动场景在今年备受瞩目。本专题将重点关注实时音视频... 展开 >





毕业于清华大学,曾在飞利浦医疗、微软等公司任职。现为声网Agora 技术VP,做为声网Agora SDK 首席架构师主导了大前端的架构设计和最佳工程实践。曾经是游戏黑客,业余时间开发的 Diablo II 游戏外挂 d2hackmap 在全球有上百万用户。
直播、视频会议、在线教学等实时互动场景在今年备受瞩目。本专题将重点关注实时音视频场景下的技术落地实践。实践者们将从音视频场景在大前端的落地、AI 算法融合,以及架构几个维度,与大家分享他们从中汲取到的经验与教训。
1. 介绍实时视频处理管线的基本概念以及所面临的挑战
2. 介绍实时视频处理管线架构设计的设计目标和原则
2.1 接口设计简洁易用
2.2 采用模块化设计实现高度的灵活性
2.3 分层设计, 解耦策略和机制
2.4 多维度提升视频处理的性能(线程模型,内存管理,zero copy,A/V Sync等)
3. 介绍视频处理管线在实践中的落地
3.1 多码率观众端
3.2 云端合图
3.3 电商直播
1. 了解实时视频处理管线的基本概念和主要模块
2. 了解实时视频处理管线架构设计,以及开发的重点和难点工作
3. 了解声网实时视频处理管线的业务功能和优势
1-5年实时音视频领域的研发、架构工程师
在实时互动场景中,信令消息起到控制媒体、同步状态的重要作用。信令消息系统的延迟表现和可靠性为实时互动业务提供了保障。本次分享会介绍声网实时信令云背后的架构设计、实践探索以及未来展望。
实时音视频开发者、云游戏开发者、云服务开发架构师、云服务解决方案架构师
英语教育中少儿口语的测评次数需求量巨大,人工测评肯定无法满足,必须使用算法自动测评,而少儿的口语测评次数巨大又给了测评算法海量的数据支撑。AI语音算法在少儿口语测评中意义重大,而巨大的数据又使得测评算法的准确性得到保证。少儿口语测评调用量巨大,如果把测评服务部署在客户终端可以极大地减低评测时延,提升评测服务的体验,同时也能大大降低服务器压力和成本。
本次分享, 我们希望大家能大概明白语音测评的算法思想和服务的搭建流程,本地化服务中模型压缩的方法,编译库如何和安卓和iOS各终端APK联系。
2. 少儿语音测评优化实践
3. 少儿语音测评本地化实践
1. 了解语音测评算法框架
2. 了解本地化语音测评开放的意义和难度
3. 了解终端模型压缩的方法
4. 本地化接口暴露和如何提供各终端要的库文件
语音算法开发者、语音测评开发者、AI算法本地化探究者
H5时代,能用H5完成的功能,一定会替换原生应用,因为H5丰富的展现能力和跨平台能力。新东方云教室核心的交互基本由H5来完成,但是实时音视频除外。传统方法,前端使用H5 Video 标签播放音视频流。Video标签是把双刃剑,灵活、高性能,定制化程度高,但是各个平台对Video做了特殊的处理或者系统的一些限制,导致了在各种终端播放器行为的不一致。2020年云教室解决的一个重点就是直播流在前端的播放问题,在专题里会重点介绍实现方案。
1. 新东方云教室前端音视频播放的需求背景
2. 前端音视频播放器的设计和架构
3. 开发中遇到的问题和解决方法
4. 自研播放器在AI课中的一个扩展应用
5. 前端音视频播放器的进一步探索
1. 了解新东方云教室整体架构
2. 了解前端直播流播放,如何绕过H5 Video标签的限制
3. 了解前端音视频播放器如何覆盖各种终端
直播相关领域的前端开发人员,做前端播放器的技术人员



微信咨询

电话咨询
微信联系我们

