戴上頭盔在虛擬世界里遨游，感受全新的視覺盛宴，充滿視覺沖擊力的體驗讓VR（虛擬現實）這一前沿技術異?；鸨?。近年來，AR（增強現實）技術與現實世界高度融合，在真實場景中加入虛擬物品，將視覺沖擊體驗帶上了新的高峰。在直播環境下，利用AR技術，我們可以看到虛擬巨鯨在現實體育場中躍水而出，可以對停在現實馬路上的虛擬汽車進行360度的觀摩。
2017年，隨著蘋果在WWDC上發布ARKit，AR技術一時間占據各種有利區位，成為市場和資本聚焦的重點。
“大眾對全新視覺體驗的需要和市場旺盛的需求，讓AR歷經蛻變，從之前的象牙塔走入了‘尋常百姓家’。ARKit的推出，推動了AR在全行業的快速發展。此外，作為當前最前沿的視覺體驗技術之一，AR技術在直播中的價值也在不斷被挖掘。”在6月22日的GMTC2018全球大前端技術大會現場，滬江CCtalk音視頻架構專家李超向在場技術大咖分享AR技術在直播中的運用現狀及挑戰。
GMTC全球大前端技術大會是由極客邦科技和InfoQ中國主辦的頂級技術盛會，關注移動、前端、AI應用等多個技術領域，促進全球技術交流，推動國內技術升級。GMTC為期2天，主要面向各行業對移動開發、前端、AI技術感興趣的中高端技術人員，大會聚焦前沿技術及實踐經驗，旨在幫助參會者了解移動開發&前端領域最新的技術趨勢與最佳實踐。
深耕音視頻領域十余年，李超在GMTC 2018音視頻會議專場進行了主題為《AR在直播中的應用》的技術分享。
“不同于VR技術完全的虛擬環境，AR技術基于現實的環境加入了虛擬的元素，讓視覺體驗更加真實”，李超舉例說，“例如利用VR技術，我們可以重現虛擬的物品、環境；而AR技術，可以讓虛擬汽車在現實的馬路上‘馳騁’，還可以在我們的手臂上‘戴上’虛擬的手表，而且手表上的時間與現實中的時間能夠保持一致，我們還能根據需要‘換’手表，‘調’時間。這種真實與虛擬交叉的特性增加了AR更加逼真的體驗。”
互聯網技術飛速發展帶動了直播領域的熱情高漲，在線教育互動直播風口重起。作為大前端的重要子領域，音視頻如何優化，如何做好實時處理，如何將AR技術應用于在線教育場景，也是目前深受關注的話題。
以VR、AR、MR之間的區別聯系、AR技術的現狀與發展方向為線索，李超詳細梳理了AR的核心概念、ARKit與ARCore的運行機制，分享了AR在各種直播系統中的真實應用、開發過程中的技術難題、解決方案，與與會者探討了AR技術的未來以及對整個生態的展望。
在現場，李超還列舉了CCtalk平臺上利用AR技術在線教學的網師案例——“剖哥”李哲。李哲曾在電視節目上淡定自若地解剖烤鴨，是名副其實的實踐3D解剖教學、玩轉AR技術實景模擬教學的“解剖達人”，將看似冰冷的解剖學成為平臺用戶追捧的對象。
現場展示視頻中，李哲打開AR設備，從屏幕里“取出”右心室的圖片，讓它呈現在學員眼前，可以看到心臟內部的三尖瓣正在不停跳動……這是李哲日常使用AR技術授課的場景。
在“剖哥”李哲看來，學員在學習結構類知識時，需要視覺的刺激。對于學習者、授課者來說，內容是整個教學過程中的靈魂，而教學手段的多元化是極為重要的途徑。
“AR給直播環境帶來了諸多可能，讓直播中的交互變得更富趣味性與吸引力，”李超表示，“但目前直播真正完美呈現AR技術，還需要解決很多問題。諸如遠端視頻如何在虛擬屏幕上渲染，AR與非AR客戶端、ARKit與ARCore如何互通，AR端無法直接從AR Camera獲取視頻，幀率過高導致傳輸碼流過大等問題。這些都制約AR技術的實現，當然也是諸多工程師致力突破的挑戰。”
目前AR發展尚屬初級階段，李超樂觀地說，“但通過手機我們可以實現部分‘黑科技’，可以將 AR 認為是一個瓶子，這個瓶子可以裝天下。我們可以暢想，可以共同營造生態，盡管AR之路并非坦途”。
滬江CCtalk聯合創始人、CTO楊繼珩認為，從當前技術發展分析，短期內AR比VR更容易找到實際應用場景，而且在CCtalk平臺已經有些老師很扎實的把AR和MR帶到了授課過程中，授課效果、質量都很棒，很多學員第一次看到的時候非常震驚。事實上，很多技術現在已經不是科幻了，更多場景技術的出現也只是產業鏈條和時間問題。
