开篇词|实时互动强势发展,如何快速入门音频技术?
![](https://static001.geekbang.org/resource/image/cf/d3/cf73a249a33aea2b83593f845e6f1cd3.jpg)
一名“算法吟游诗人”的 10 年
为什么说音频是实时互动开发中的必备武器?
课程设计
![](https://static001.geekbang.org/resource/image/ca/29/ca4e3d8b628a5739a9d11dc8f3220129.jpg?wh=1572x1280)
- 深入了解
- 翻译
- 解释
- 总结
![](https://static001.geekbang.org/resource/image/d0/e4/d0880927e2a522a038be2d04bf19dfe4.png)
音频技术在实时互动领域的重要性日益凸显,尤其在新冠疫情影响下,实时互动成为必要交流方式,音频技术的实时性和可靠性成为关键。本文以作者建元的音频技术发展经历为线索,介绍了音频技术在工业、创业和实时互动领域的广泛应用。建元分享了他的学术背景和工作经历,以及在音频领域的创新实践,包括音频美化、空间音频渲染、自动巡检机器人系统等。文章指出,随着人们对音频体验要求的提升,音频技术在线上体验、新体验、新玩法等领域的应用也日益广泛。未来人工智能领域在音频技术上会有进一步突破,市场对专业音频技术人才的需求也在增加。整体而言,文章通过建元的经历展示了音频技术在实时互动领域的重要性和广泛应用,为读者提供了对音频技术发展趋势的深入了解。文章内容涵盖音频基础知识、实时音频处理模块、VR/AR音频渲染、音效制作原理以及AI变声算法应用等,为读者提供了全套音频处理链路和音频发展的脉络、方向。文章还强调了音频技术的实用性和趣味性,鼓励读者加入音频这个充满朝阳的领域。
2021-11-2213人觉得很赞给文章提建议
《搞定音频技术》,新⼈⾸单¥59
全部留言(9)
- 最新
- 精选
- Fan什么开发语言的呢
作者回复: 音频的开发语言取决于你所在的行业场景和工作内容。工程方面比如硬件开发可能更多的和C打交道。为了保证实时性和性能的移动端APP或者SDK那么C++用的比较多。如果是做算法研发那么python和Matlab会是首选。
2021-11-227 - pencilCool我自己从小就喜欢音乐,会玩一些乐器,在学校学的也是信号处理,现在主要 搞ios 开发,这两年希望转到音频技术的研发。老师这们课必须第一时间跟上呀 。
作者回复: 那其实基础不错,驾轻就熟~
2021-11-283 - 怕什么,抱紧我音乐系毕业,java路过,需要什么基础呢!就懂点乐理,音高,音频,音色,五度相生律,十二平均律相关的!
作者回复: 音乐毕业入行的也有不少,音频算法相关的不少和音乐知识有联系。这门课还是比较基础的只需要少许信号处理的基础知识,结合自己的专业可以在修音、空间音频、音乐编解码等方向都会有很多的新的发现。
2021-11-273 - 自由冯老师,你好,我的主语言是 go,c、python 我用的比较少,请问订阅后能结合专栏知识,实现什么功能呢?
作者回复: 想往音频分析算法方面转的话建议可以把python用起来,这样可以有很多现成的算法开源库可以使用。至于最后使用go还是C还是java做成工程化的产品功能就应人和产品而异了。
2021-11-301 - A证老司机兄弟你好,我是有三年多前端开发经验的前端开发,目前打算往webar方面深入学习,不知道您有什么建议,或者推荐的书籍和技术,或是成长计划呢
作者回复: AR中的音频尤其是空间音频有很多有意思的应用,尤其是加入头部追踪传感器。目前Vivserse,Oculus等都开始有web平台的工具可以先熟悉一下。
2022-03-24 - Wen-ZH冯老师,我觉得评论区是离您这种大佬最近的距离,我计算机毕业,出来就干了软件测试,也向你们声网提交了简历,那作为我们软件测试工程师,之前遇到的都是软件,怎么能在深度学习和AI领域发挥自己更大的光彩?对于我们软件测试来说这是一个陌生的领域,怎么才能更好的去接触这些新技术啊?
作者回复: 实践出真知,软件测试尤其是音频测试就是很好的切入口在了解了音频链路的背景后,对音频质量的好坏现在除了POLQA、PESQ也有很多AI的打分方法可以更为贴近人的主观评测,在工程测试方面需要设计很多测试样例可以采用变声、变调等算法丰富语料等等其实有很多和这些技术可以结合的点作为技术实践的方向。加油
2022-02-23 - 刘宏鑫因为当前公司是做声纹技术的,日常开发任务也包括很多音视频的处理工作,和FFmpeg打交道比较多,最近想深入学习音视频的相关知识,感觉老师讲得针不错,不过我是来催更的哈哈哈
编辑回复: 加油!共同学习,每周一三五更新呦
2021-11-24 - 哈珀朋友希望声网能为中国音视频的技术发展做出突出贡献2021-12-033
- Quincy老师,音频怎么生成对应的字幕文件? 我现在的思路是先把音频按照无声或小于给定阈值进行分割成多个片段,再对片段进行推理成文本,最后合成多个文本,但是不明白怎么和时间轴对应,形成对应的字幕2022-07-20