CSDN 有很多的老朋友，專門做音視頻技術(shù)的LiveVideoStack 就是其中的一位。
一個(gè)月前，在微信的大本營廣州 TIT 創(chuàng)意園，微信多媒體內(nèi)核中心音視算法高級(jí)工程師梁俊斌面對(duì) LiveVideoStack 提問“為什么選擇音頻這么小眾、枯燥和孤獨(dú)的領(lǐng)域”時(shí)，表示：“你用了‘孤獨(dú)’這次詞形容音頻技術(shù)開發(fā)很到位。”
這折射出多媒體領(lǐng)域的一個(gè)尷尬現(xiàn)象 —— 對(duì)多媒體技術(shù)人的需求很大，但能夠深入到底層開發(fā)的人少之又少。這也就導(dǎo)致了這一領(lǐng)域人才極度搶手，薪資水漲船高。
“我們預(yù)計(jì)國內(nèi)的多媒體開發(fā)者有幾萬人吧”，LiveVideoStack 這樣告訴某 TOP 級(jí)短視頻平臺(tái)多媒體技術(shù)負(fù)責(zé)人，后者的反饋是：“應(yīng)該沒有那么多人。從招聘的情況看，能被我們認(rèn)可的人才非常少?！?/span>
區(qū)區(qū)幾萬人，只占到國內(nèi)開發(fā)者數(shù)量的幾百分之一，“孤獨(dú)”是很正常的。在國內(nèi)，并沒有一個(gè)被廣泛認(rèn)可的“多媒體開發(fā)工程師”的崗位，許多多媒體技術(shù)開發(fā)的正式崗位名字是“運(yùn)維”、“大數(shù)據(jù)工程師”。即便在一些主流的視頻平臺(tái)，許多多媒體開發(fā)工程師的 title 是“算法工程師”，表面上和多媒體開發(fā)一點(diǎn)關(guān)系也沒有。
當(dāng)別人在聊 DevOps、IPFS、CNN，你一張口就是 Codec、PSNR、VMAF，瞬間就沒有了朋友。
LiveVideoStack 經(jīng)常收到推薦多媒體技術(shù)人的消息，如果是運(yùn)維、前端、Android 開發(fā)崗位，推薦起來并不困難，但是想要資深的多媒體技術(shù)人很難。所以，基本上這樣的請(qǐng)求，只能無功而返。
梁俊斌還告訴 LiveVideoStack，“應(yīng)屆生招進(jìn)來，需要學(xué)習(xí)算法和基礎(chǔ)知識(shí)，當(dāng)條件具備了可以開始做產(chǎn)品時(shí)，已經(jīng)過去 3 年了?！憋@然，這不是小公司也可以承擔(dān)的。面對(duì)人才的瓶頸，許多公司不得不采取了極端的防守策略——至少保證辛苦培養(yǎng)的技術(shù)人不被挖走。一名 TOP 級(jí)的視頻平臺(tái)公司的 HR 告訴 LiveVideoStack：“我們對(duì)嶄露頭角，有一定能力的工程師進(jìn)行特別的保護(hù)”。事實(shí)上，LiveVideoStack 一直在邀請(qǐng)這家公司的技術(shù)人來 LiveVideoStackCon 音視頻技術(shù)大會(huì)分享，但始終沒有得到積極的反饋。
另一個(gè)不容忽視的現(xiàn)實(shí)是，一線大學(xué)的畢業(yè)生選擇金融、P2P、區(qū)塊鏈、AI 這些領(lǐng)域，畢竟可以離 money 更近。這進(jìn)一步擠壓了多媒體技術(shù)人的供給，愿意投身多媒體開發(fā)的技術(shù)人相應(yīng)的減少。
如果展望未來三、五年，VR、5G、4K 乃至 8K 視頻的機(jī)會(huì)就在眼前，為什么愿意投身多媒體的技術(shù)人反而更少呢？
多媒體技術(shù)很難？
是的，很難。多媒體技術(shù)是一門實(shí)踐的科學(xué)，不是通過下載源碼，把玩下開源軟件就能搞定的。在現(xiàn)實(shí)中，需要面對(duì)復(fù)雜的網(wǎng)絡(luò)情況，各種約定俗成的方法，沒有注解的源碼，千奇百怪的硬件和非標(biāo)準(zhǔn)的協(xié)議。
上圖便是直播視頻所經(jīng)歷的關(guān)鍵模塊，這還不包括視頻的前處理和后處理。當(dāng)然，如果加上人耳、眼睛在聲音、圖像上的生物特性，以及相關(guān)心理感知模型，全部知識(shí)體系是如此龐雜。
“視頻領(lǐng)域是個(gè)海洋，可以游泳、沖浪，也可以潛水、遠(yuǎn)航……編碼優(yōu)化、去噪聲、視覺特效等很多問題都是跨領(lǐng)域的，涉及計(jì)算機(jī)、電子、通信，甚至藝術(shù)、生理、心理學(xué)等，無論本專業(yè)還是外專業(yè)都需要再學(xué)習(xí)”，北京大學(xué)信息科學(xué)技術(shù)學(xué)院教授馬思偉告訴 LiveVideoStack。
騰訊多媒體內(nèi)核中心高級(jí)研究員時(shí)永方在接受 LiveVideoStack 采訪時(shí)表示：“多媒體涉及高等數(shù)學(xué)，數(shù)字信號(hào)處理，通信原理，信息論等基礎(chǔ)學(xué)科?！?/span>
同時(shí)掌握這么多專業(yè)知識(shí)，挑戰(zhàn)可想而知。但投入并不一定能產(chǎn)生高回報(bào)，至少回報(bào)周期很長。橫向的與 AI、區(qū)塊鏈等熱門領(lǐng)域?qū)Ρ?，學(xué)習(xí)多媒體技術(shù)的投入產(chǎn)出比沒有任何優(yōu)勢(shì)。
多媒體開發(fā)者的機(jī)會(huì)
如此看來，多媒體技術(shù)似乎是學(xué)霸們才能玩得起的。事實(shí)上，并不完全如此。如果你是要做深入底層的多媒體開發(fā)者，的確需要更多時(shí)間，而且最好是科班出身，有多媒體領(lǐng)域的導(dǎo)師帶路，不斷探索和豐富自己的知識(shí)體系與經(jīng)驗(yàn)。比如在視頻 Codec 領(lǐng)域，能夠?qū)Φ讓舆M(jìn)行優(yōu)化的肯定是少數(shù)人。
但如果你并不想深入底層，只在應(yīng)用層開發(fā)，那么難度會(huì)大幅降低。比如最近十分流行的 WebRTC，以及不斷完善強(qiáng)大的 FFmpeg，這些框架、工具不僅強(qiáng)大，而且有完備的文檔，社區(qū)也足夠活躍，使用它們可以大幅降低學(xué)習(xí)、開發(fā)多媒體產(chǎn)品服務(wù)的門檻。
未來，多媒體技術(shù)會(huì)像通信技術(shù)一樣成為一種能力，滲透在各種應(yīng)用場景中，無論你是前端、后端、運(yùn)維都需要或多或少地涉及多媒體技術(shù)。針對(duì)特定場景的多媒體能力開發(fā)，需要大量的人才支持。在 5G 和 4K 高清視頻的趨勢(shì)下，多媒體應(yīng)用將誕生新的應(yīng)用和商業(yè)模式。
10 月 19-20 日，CSDN 與 LiveVideoStack 聯(lián)合出品的 LiveVideoStackCon 2018 音視頻技術(shù)大會(huì)將在北京舉行，這是一次針對(duì)多媒體技術(shù)的全面梳理與展望，也將開啟多媒體技術(shù)世界的大門。不過，作為多媒體開發(fā)初學(xué)者，或者只是有興趣學(xué)習(xí)相關(guān)的技術(shù)，能否在專業(yè)的技術(shù)大會(huì)上有所收獲呢？先看看有哪些專家分享經(jīng)驗(yàn)？
以上列出了 LiveVideoStackCon 的部分講師，以及出品人和聯(lián)席主席，大約還有 20 位講師仍在溝通確認(rèn)中，在官網(wǎng)上會(huì)隨時(shí)更新講師與議題的最新進(jìn)展 （掃碼即可查看）。
不難發(fā)現(xiàn)，他們中的大多數(shù)都來自多媒體技術(shù)重度應(yīng)用的平臺(tái)，各自承擔(dān)著多媒體技術(shù)關(guān)鍵任務(wù)。同時(shí)，組委會(huì)與出品人會(huì)對(duì)講師的內(nèi)容提出要求，并經(jīng)過至少兩輪審校，這將保障內(nèi)容源于實(shí)踐，富有啟發(fā)性，嚴(yán)謹(jǐn)準(zhǔn)確。
比如，YY 音視頻算法中心負(fù)責(zé)人林緒虹會(huì)介紹如何重構(gòu) YY 的音視頻技術(shù)棧，提升用戶 QoE，控制成本。
學(xué)而思網(wǎng)?？蛻舳思軜?gòu)負(fù)責(zé)人趙文杰將介紹如何實(shí)現(xiàn)功能強(qiáng)大的白板功能，以及如何在復(fù)雜網(wǎng)絡(luò)條件下的實(shí)現(xiàn)低延遲保障與可用性。
Hulu 全球高級(jí)研發(fā)經(jīng)理視頻編解碼與傳輸領(lǐng)域資深專家傅德良則會(huì)介紹在 Hulu 內(nèi)部的一套視頻質(zhì)量評(píng)價(jià)體系，以及他如何幫助 Hulu 甄選 Codec，他包含一系列客觀評(píng)價(jià)指標(biāo)，如畫質(zhì)、延遲、壓縮率等。
快手流媒體大數(shù)據(jù)平臺(tái)架構(gòu)師羅喆會(huì)介紹快手如何提升用戶觀看短視頻的體驗(yàn)的，這包括全鏈路的狀態(tài)抓取，以及相應(yīng)的分析、告警、故障定位和優(yōu)化。
騰訊視頻視頻編碼團(tuán)隊(duì)負(fù)責(zé)人汪亮則會(huì)分享騰訊視頻在視頻質(zhì)量、畫質(zhì)增強(qiáng)、成本控制等方面的經(jīng)驗(yàn)。
思科視頻研究員張睿將會(huì)分享如何設(shè)計(jì) WebEx 的架構(gòu)，以及如何全方位監(jiān)控網(wǎng)絡(luò)與客戶端實(shí)現(xiàn)高品質(zhì)的視頻通話。
其次，除了來自工業(yè)界的一線專家，LiveVideoStack 也邀請(qǐng)了來自學(xué)術(shù)界的代表。
比如，北京大學(xué)信息科學(xué)技術(shù)學(xué)院教授馬思偉將會(huì)分享全球最新的視頻編碼技術(shù)的趨勢(shì)以及 AVS2 相關(guān)的進(jìn)展。
上海交通大學(xué)教授宋利則會(huì)分享視頻畫質(zhì)評(píng)定技術(shù)，包括相關(guān)的開源工具、方法及工業(yè)界的應(yīng)用情況。
清華大學(xué)電子工程系教授、博導(dǎo)竇維蓓將介紹音頻編碼標(biāo)準(zhǔn)的演進(jìn)等。
三菱電子研究院田棟則會(huì)介紹點(diǎn)云技術(shù)的標(biāo)準(zhǔn)與實(shí)現(xiàn)方案，以及在全景視頻、VR 等方面的應(yīng)用進(jìn)展。
如果說在一線的多媒體技術(shù)人可以帶來更接地氣的分享，幫助解決實(shí)際應(yīng)用中的問題。那么，學(xué)術(shù)界的各位大咖則可以幫大家補(bǔ)補(bǔ)課，重溫經(jīng)典算法，開啟全球視野。
最后，還有一些代表各自領(lǐng)域的 TOP 級(jí)公司，帶來各自的獨(dú)門秘籍。比如，杜比研究高級(jí)總監(jiān) Claus Bauer會(huì)帶來杜比如何在千差萬別的設(shè)備中實(shí)現(xiàn)聲音特效。
Twitch Principal Research Engineer 沈悅時(shí)則會(huì)分享如何將 HLS 打造成比 RTMP 更低延遲的方法，以及通過機(jī)器學(xué)習(xí)的方式自動(dòng)優(yōu)化網(wǎng)絡(luò)。
Intel Media SW Engineering Manager Faouzi Kossentini將會(huì)帶來如何基于 Intel 的 CPU/GPU 對(duì) HEVC 及 AV1 編碼的優(yōu)化，對(duì)于算法復(fù)雜度超高的 AV1，如果通過硬件加速的方式提升編碼速度，將給 AV1 帶來巨大的機(jī)會(huì)。
RealNetworks CTO Reza Rassool會(huì)帶來 AI 技術(shù)為 Codec 帶來的優(yōu)化，以及如何在低算法復(fù)雜度下實(shí)現(xiàn)極致的軟件編解碼。不少 80 后都有過觀看 RM/RMVB 視頻的經(jīng)歷，在那個(gè) 64KB 帶寬就算是寬帶的年代，RM/RMVB 風(fēng)靡一時(shí)。
北京美攝網(wǎng)絡(luò)科技有限公司 CTO 見良將分享在移動(dòng)端視頻處理的性能保障與優(yōu)化，設(shè)計(jì) Codec 優(yōu)化、視頻渲染、GPU 加速等。
外界對(duì)于快手的技術(shù)充滿了好奇，尤其多媒體技術(shù)方面快手有一幫頂尖技術(shù)人才?？焓忠粢曨l技術(shù)負(fù)責(zé)人于冰將首次公開分享快手在多媒體技術(shù)方面的經(jīng)驗(yàn)與探索，包括 AI、編碼和網(wǎng)絡(luò)算法等。
Akamai 首席架構(gòu)師 William Robert Law會(huì)分享這家全球最大的 CDN 針對(duì)網(wǎng)絡(luò)方面的優(yōu)化，如何使用 CMAF 和 QUIC 協(xié)議來實(shí)現(xiàn) 2-3 秒的低延遲直播。
三體云實(shí)時(shí)視頻高級(jí)工程師李幸原將分享低延遲音視頻技術(shù)在社交、音樂教育等場景下的技術(shù)難點(diǎn)與實(shí)現(xiàn)。
愛奇藝 CTO 劉文峰介紹 AI 對(duì)于一家多媒體娛樂公司的價(jià)值，AI 在影片制作、剪輯、編碼、傳輸、廣告以及個(gè)性化推薦等方面做的探索。
Aupera Senior Embedded Vision/AI Engineer Narges Afsham則會(huì)帶來如何通過 FPGA 硬件來加速實(shí)時(shí)編碼、轉(zhuǎn)碼，相對(duì)于 CPU/GPU/ASIC 方案，F(xiàn)PGA 在效率、靈活度以及畫質(zhì)方面可以達(dá)到較完美平衡。
除此之外，LiveVideoStackCon 也關(guān)注多媒體技術(shù)應(yīng)用的重要行業(yè)場景，如教育、醫(yī)療、視頻會(huì)議、安防等。
如51Talk 技術(shù)總監(jiān)陳靖會(huì)介紹音視頻技術(shù)在 51Talk 的應(yīng)用實(shí)踐，尤其在延遲、卡頓方面的優(yōu)化。
即構(gòu)科技技術(shù)副總裁冼牛將會(huì)分享實(shí)時(shí)音視頻技術(shù)在教育、游戲和社交領(lǐng)域的應(yīng)用案例。
智慧樹網(wǎng)副總經(jīng)理襲普照將會(huì)介紹在業(yè)務(wù)快速擴(kuò)張的情況下，如何選擇技術(shù)棧與供應(yīng)商，保證技術(shù)平臺(tái)的可用性及一定限度的擴(kuò)展性。
前面提到，在 LiveVideoStackCon 期間提供了若干場面向初學(xué)者的技術(shù)培訓(xùn)，旨在幫助學(xué)員快速掌握和提高技能。除了 FFmpeg Maintainer 李忠、英特爾資深軟件工程師張華聯(lián)手帶來的《FFmpeg 視頻編碼原理與實(shí)戰(zhàn)》培訓(xùn)以外，全民快樂研發(fā)高級(jí)總監(jiān)展曉凱還會(huì)帶來一場《抖音短視頻特效實(shí)戰(zhàn)》培訓(xùn)，掌握基本的播放器技巧和 3D 渲染，并親手完成各種視頻特效。
One More Thing
正因?yàn)椤肮陋?dú)”，才更享受相聚的日子。LiveVideoStackCon 上準(zhǔn)備了豐盛的自助餐，輕松的社交晚宴，以及“你問我答”與“幫你約專家”活動(dòng)。
聯(lián)系客服
