大華、宇視、商湯、曠視......扒一扒冬奧會(huì)上的「AI」力量
毫無(wú)疑問(wèn)，2月份國(guó)內(nèi)最火熱的賽事莫過(guò)于北京冬奧會(huì)：人見(jiàn)人愛(ài)的冰墩墩，如美如畫的開(kāi)幕式，以及假期“霸榜”的谷愛(ài)凌選手......都給觀眾留下了深刻印象。
這一精彩紛呈的賽事，背后離不開(kāi)高新技術(shù)的支持。不論是場(chǎng)內(nèi)外的安全防疫、觀眾引導(dǎo)和治安，還是場(chǎng)上捕捉精彩瞬間、賽事轉(zhuǎn)播，以及現(xiàn)場(chǎng)8K觀賽、線上VR觀賽，背后都需要各類技術(shù)的融合支撐。
隨著冬奧會(huì)走向尾聲，各種AI技術(shù)也先后露面。今天，掘金志就來(lái)扒一扒冬奧會(huì)上，那些讓人眼前一亮的「黑科技」。
曠視：區(qū)間智能防疫系統(tǒng)+室內(nèi)視覺(jué)定位導(dǎo)航
首先，假設(shè)你為一名觀眾，正在體育場(chǎng)外等候入場(chǎng)，除了要檢票之外，更重要的是測(cè)量體溫、查驗(yàn)健康碼，實(shí)現(xiàn)疫情的精準(zhǔn)防控。
曠視為此提出「智能測(cè)溫」解決方案，一方面可實(shí)現(xiàn)多人同時(shí)測(cè)溫通行，另一方面能夠?qū)崿F(xiàn)非接觸式AI輔助篩查疑似發(fā)熱人員。主辦方僅需要少量工作人員即可完成觀眾體溫排查，在大幅度提升檢測(cè)效率的同時(shí)，減少了交叉感染的風(fēng)險(xiǎn)。
進(jìn)入體育場(chǎng)之后，你對(duì)場(chǎng)館肯定是陌生的，不論是找座位，還是洗手間，都需要「室內(nèi)導(dǎo)航」。
市面上常見(jiàn)的室內(nèi)導(dǎo)航，主要依靠藍(lán)牙、Wi-Fi等技術(shù)進(jìn)行識(shí)別，成本高并且精度較低，容易受場(chǎng)景限制。在相對(duì)封閉的場(chǎng)館，由于觀眾密集，手機(jī)信號(hào)很差，傳統(tǒng)的室內(nèi)導(dǎo)航效果并不明顯。
為此，曠視研發(fā)出室內(nèi)視覺(jué)定位導(dǎo)航系統(tǒng)，該系統(tǒng)采用室內(nèi)視覺(jué)定位技術(shù)，無(wú)需對(duì)室內(nèi)建筑環(huán)境二次改造，僅使用激光視覺(jué)地圖采集設(shè)備對(duì)現(xiàn)有環(huán)境采集，就可以實(shí)現(xiàn)定位功能。
與傳統(tǒng)室內(nèi)導(dǎo)航相比，該系統(tǒng)主要有兩個(gè)亮點(diǎn)：
精度提升至亞米級(jí)，相比較而言，傳統(tǒng)GPS定位精度在5米左右，WiFi、藍(lán)牙定位則是1-3米；
無(wú)需額外增加傳感器，室內(nèi)環(huán)境也不用加裝輔助定位設(shè)備，具備成本優(yōu)勢(shì)。
曠視冬奧項(xiàng)目工程師張長(zhǎng)勝表示，觀眾通過(guò)手機(jī)隨手拍方式便可輕松定位；并且支持離線識(shí)別定位，在人流密度較大5G/4G無(wú)法完全覆蓋的場(chǎng)所仍然可順暢導(dǎo)航。
商湯：AI觀賽+AR導(dǎo)航
假設(shè)你已經(jīng)找到了自己的座位，并開(kāi)始欣賞選手們的精彩表演。但受限于人的視力、角度等問(wèn)題，觀眾很難捕捉到比賽的精彩畫面；并且，對(duì)于一些專業(yè)性較強(qiáng)的運(yùn)動(dòng)，觀眾需要專業(yè)解說(shuō)才能感受到運(yùn)動(dòng)的美感。
例如，在被譽(yù)為冬奧會(huì)“國(guó)際象棋”的冰壺運(yùn)動(dòng)中，由于冰壺壺體較小，視距較遠(yuǎn)，并容易受到運(yùn)動(dòng)員身體遮擋干擾，座位席上的觀眾不得不借助于望遠(yuǎn)鏡，或者現(xiàn)場(chǎng)大屏幕來(lái)觀察細(xì)節(jié)。
為了解決這個(gè)難題，商湯基于視覺(jué)AI感知、深度學(xué)習(xí)、三維建模和空間定位等技術(shù)，打造了「冰壺運(yùn)動(dòng)軌跡捕捉」技術(shù)。
該技術(shù)克服了超大空間環(huán)境下基于遠(yuǎn)視距對(duì)較小物體運(yùn)動(dòng)軌跡精準(zhǔn)捕捉的難題，通過(guò)對(duì)真實(shí)場(chǎng)景的數(shù)字化映射，實(shí)現(xiàn)對(duì)運(yùn)動(dòng)冰壺的檢測(cè)跟蹤和軌跡捕捉。同時(shí)，結(jié)合實(shí)時(shí)渲染、虛實(shí)同步技術(shù)，系統(tǒng)可以將冰壺軌跡進(jìn)行精準(zhǔn)還原，并將畫面轉(zhuǎn)化為視頻流，輸出至網(wǎng)絡(luò)平臺(tái)和現(xiàn)場(chǎng)大屏幕。
憑借該技術(shù)，不論是線下，還是線上，觀眾都可以近距離觀察冰壺運(yùn)動(dòng)的細(xì)節(jié)、運(yùn)動(dòng)規(guī)律和賽況；解說(shuō)員也能分析運(yùn)動(dòng)員的狀態(tài)和投壺技巧、戰(zhàn)術(shù)等，實(shí)現(xiàn)「AI觀賽」。
與曠視類似，商湯在導(dǎo)航方面推出了「AR導(dǎo)航」，但側(cè)重于室外，服務(wù)對(duì)象主要為奧運(yùn)村的運(yùn)動(dòng)員和工作人員。
在張家口冬奧村中，由于奧運(yùn)村及周邊面積較大（超30萬(wàn)平米），要在短時(shí)間內(nèi)構(gòu)建高精度三維地圖，對(duì)技術(shù)要求很高；而且，村內(nèi)建筑風(fēng)格統(tǒng)一，加上冰雪覆蓋，這種環(huán)境下，很難基于圖像來(lái)實(shí)現(xiàn)精準(zhǔn)地識(shí)別自身位置。
對(duì)此，商湯通過(guò)GPS與視覺(jué)融合的數(shù)據(jù)關(guān)聯(lián)方法和參數(shù)分塊優(yōu)化方法，以及綜合利用視覺(jué)、藍(lán)牙、GPS等信號(hào)等技術(shù)，并針對(duì)冰雪場(chǎng)景，訓(xùn)練了不同天氣條件下魯棒的圖像特征，從而在復(fù)雜場(chǎng)景下，實(shí)現(xiàn)了6自由度空間定位。
據(jù)了解，該導(dǎo)航系統(tǒng)可以實(shí)現(xiàn)大尺度場(chǎng)景下厘米級(jí)的三維地圖構(gòu)建和部署，并解決了動(dòng)態(tài)復(fù)雜場(chǎng)景下實(shí)現(xiàn)精準(zhǔn)定位跟蹤等難題。用戶打開(kāi)手機(jī)專屬APP，打開(kāi)攝像頭識(shí)別周邊環(huán)境，即可定位自身位置，輸入目的地后，跟隨AR虛擬箭頭，即可進(jìn)行導(dǎo)航。
大華股份：智能視頻跟蹤系統(tǒng)
對(duì)于冬奧而言，另一個(gè)重要的環(huán)節(jié)是，利用視頻技術(shù)來(lái)甄別選手的動(dòng)作是否違規(guī)，以輔助裁判對(duì)選手的得分情況進(jìn)行更為準(zhǔn)確的判罰，這既是對(duì)選手、賽事的尊重，也體現(xiàn)出舉辦方公平公正公開(kāi)的奧運(yùn)精神。
以往的判罰主要基于裁判的主觀意識(shí)，而人本身會(huì)受限于視角、經(jīng)驗(yàn)等因素，容易忽略一些動(dòng)作細(xì)節(jié)。
比如，在一些速度快、賽道窄的項(xiàng)目中，受場(chǎng)地環(huán)境影響，成誤判、錯(cuò)判等情況并不少見(jiàn)，從而影響選手的成績(jī)和比賽的公平性。
大華股份為此研發(fā)出專門適用于冬奧會(huì)雪車、雪橇項(xiàng)目的「智能視頻跟蹤系統(tǒng)」，該系統(tǒng)能實(shí)現(xiàn)在高速移動(dòng)場(chǎng)景下，捕捉到運(yùn)動(dòng)員在通過(guò)不同斜坡道的畫面，并進(jìn)行無(wú)縫銜接、有序展示，全程記錄比賽的每一處細(xì)節(jié)，為裁判的判罰提供視頻依據(jù)，保證比賽的公平公正。
該系統(tǒng)同樣可用于改進(jìn)運(yùn)動(dòng)員訓(xùn)練，為賽前訓(xùn)練提供數(shù)據(jù)支撐。運(yùn)動(dòng)員通過(guò)賽事視頻進(jìn)行回顧，可以發(fā)現(xiàn)難以察覺(jué)的動(dòng)作細(xì)節(jié)或者說(shuō)存在的動(dòng)作缺陷，從而制定具有針對(duì)性的訓(xùn)練計(jì)劃，來(lái)提高訓(xùn)練效果。
宇視：戶外LED大屏+智能安防系統(tǒng)
前面提到，在部分冬奧項(xiàng)目中，觀眾需要通過(guò)大屏幕來(lái)觀察比賽細(xì)節(jié)。對(duì)于一些比賽場(chǎng)館而言，戶外大屏作為信息傳遞的重要平臺(tái)，屏幕本身需要滿足諸多嚴(yán)苛的條件。
比如，大屏幕要在極寒、防水條件下穩(wěn)定運(yùn)行，并且，8K轉(zhuǎn)播技術(shù)對(duì)于IC芯片、電源的要求非常高。
宇視從實(shí)際場(chǎng)景出發(fā)，提供戶外MW75XX系列P5產(chǎn)品，該產(chǎn)品主要采用了高刷新IC、高效防潮電源、IP65等級(jí)的信號(hào)等配置。
在防水方面，通過(guò)模組防水、箱體防水、關(guān)鍵器件防水的處理，保證在大雪或潮濕環(huán)境依舊可以正常工作。在耐寒方面，除了選用低溫電源以外，還在屏體內(nèi)安裝制熱設(shè)備，以保證設(shè)備穩(wěn)定運(yùn)行。
宇視在冬奧會(huì)上的另一個(gè)亮點(diǎn)，是參與了首都體育館、冰雪小鎮(zhèn)文創(chuàng)商街的智能安防系統(tǒng)的改造。
在首都體育館的智能安防項(xiàng)目中，宇視提供了近1000路的高清視頻監(jiān)控、智能一體化存儲(chǔ)、等產(chǎn)整網(wǎng)解決方案。整個(gè)場(chǎng)館的實(shí)時(shí)數(shù)據(jù)可直接推送至奧組委平臺(tái)，為奧運(yùn)安全保障提供技術(shù)支持。
冰雪小鎮(zhèn)文創(chuàng)商街的智能安防系統(tǒng)，宇視提供了近1500路的高清視頻監(jiān)控、智能一體化存儲(chǔ)、超融合分析平臺(tái)及LED大屏顯控等整網(wǎng)解決方案，可在重要通道布置相應(yīng)設(shè)備，結(jié)合后臺(tái)數(shù)據(jù)，助力冬奧會(huì)的安保工作。
除此之外，宇視在智慧高速方面也有參與。
以延崇高速為例，作為進(jìn)入冬奧會(huì)張家口崇禮賽區(qū)的公路主通道，宇視覺(jué)通過(guò)部署千余路攝像機(jī)，199套智能運(yùn)維箱等設(shè)備，提高了交管平臺(tái)的運(yùn)營(yíng)、管理效率等等。
中科智云：智能哨兵機(jī)器人
許多比賽項(xiàng)目在戶外舉行，因此戶外項(xiàng)目的安保工作也非常重要。
在場(chǎng)外，賽事場(chǎng)地通常會(huì)加裝物理圍欄或使用人力來(lái)維持安防工作，但在地形復(fù)雜、氣候條件嚴(yán)苛以及晝夜溫差大的環(huán)境下，如何為賽場(chǎng)提供安全防護(hù)工作、減輕人力負(fù)擔(dān)，也是需要解決的問(wèn)題。
例如，張家口密苑云頂樂(lè)園（冬奧會(huì)和冬殘奧會(huì)比賽場(chǎng)地之一），占地面積約100平方公里，地處太行山和燕山交會(huì)的大馬群山中，夜晚溫度可達(dá)零下四十度。
這種惡劣條件下，依托人力、圍欄等傳統(tǒng)方式不但效率低、效果差，而且增加高昂的人力成本?；诖?，中科智云及其合作伙伴共同研發(fā)了「智能哨兵機(jī)器人」。
該機(jī)器人運(yùn)用了中科智云的識(shí)別算法和反入侵技術(shù)，能夠分辨低特征差異，解決防攻擊防偽裝，穩(wěn)定性問(wèn)題。在日常監(jiān)測(cè)中，機(jī)器人能全天候進(jìn)行邊界監(jiān)控、目標(biāo)識(shí)別、多目標(biāo)跟蹤、異物檢測(cè)、道口警示等功能，并自動(dòng)精準(zhǔn)判斷入侵者的類別，將監(jiān)測(cè)到的情況或入侵者的行蹤軌跡上傳至后臺(tái)指揮中心，從而確保賽場(chǎng)安全。
掘金志了解到，目前，已有13臺(tái)智能哨兵機(jī)器人上崗，監(jiān)測(cè)距離超過(guò)15公里，形成電子屏障，相當(dāng)于傳統(tǒng)200個(gè)警衛(wèi)的安防力量。
科大訊飛：語(yǔ)音交互終端
作為國(guó)際性賽事，冬奧會(huì)的參賽人員、部分觀眾來(lái)自世界各地，語(yǔ)言各有差異，容易造成交流障礙；并且一些特殊人群，例如殘奧會(huì)的部分選手、冬奧會(huì)的部分具備溝通障礙的觀眾，在參賽、觀賽過(guò)程中也會(huì)遇到困難。
科大訊飛為此研發(fā)出了多語(yǔ)種智能語(yǔ)音及語(yǔ)言服務(wù)平臺(tái)，以及各種翻譯設(shè)備，提供定制優(yōu)化的語(yǔ)音識(shí)別、語(yǔ)音合成、機(jī)器翻譯、自動(dòng)問(wèn)答等服務(wù)。
據(jù)悉，該平臺(tái)同時(shí)支持60個(gè)語(yǔ)種語(yǔ)音合成、69個(gè)語(yǔ)種語(yǔ)音識(shí)別、168個(gè)語(yǔ)種機(jī)器翻譯和3個(gè)語(yǔ)種交互理解。冬奧場(chǎng)景下漢語(yǔ)與英、俄、法、西、日、韓等重點(diǎn)語(yǔ)種翻譯準(zhǔn)確率不低于95%；平均每句翻譯響應(yīng)時(shí)間不超過(guò)0.5秒。
科大訊飛高級(jí)副總裁杜蘭表示，科大訊飛從3個(gè)方面助力本屆冬奧會(huì)。
人與人的溝通，助力來(lái)自不同國(guó)家和地區(qū)的選手、教練、游客及志愿者等人群之間的語(yǔ)言交流；
人與組織的溝通，實(shí)現(xiàn)會(huì)議機(jī)器自動(dòng)翻譯及轉(zhuǎn)寫；
人與賽事的溝通，主要是幫助各國(guó)觀眾、游客快速掌握賽事信息，并輔助視障人士聽(tīng)得見(jiàn)奧運(yùn)文字、聽(tīng)障人士看得見(jiàn)奧運(yùn)聲音。
科大訊飛還推出了諸如雙屏翻譯機(jī)、虛擬人智能交互一體機(jī)等設(shè)備，提升了多語(yǔ)種信息獲取、發(fā)布、傳播的及時(shí)性和便捷性，滿足冬奧及冬殘奧會(huì)無(wú)障礙、跨語(yǔ)言溝通的需要。
當(dāng)虹科技：8K編碼器
受制于疫情，能到現(xiàn)場(chǎng)觀賽的觀眾終究是少數(shù)，許多人只能通過(guò)線上的方式，來(lái)參與冬奧、欣賞冬奧選手的高光時(shí)刻，這就需要用到8K直播技術(shù)。
作為目前最接近“人眼真實(shí)”的超高清技術(shù)，8K的分辨率是高清的16倍，在量化、幀率、色域等方面比4K更強(qiáng)，結(jié)合3D渲染等技術(shù)，能給觀眾帶來(lái)“身臨其境”的體驗(yàn)。
但要實(shí)現(xiàn)8K超高清直播，除了要采用專門的8K相機(jī)以及專業(yè)的調(diào)色、包裝，進(jìn)行采集制作之外，還涉及「編碼傳輸」這一核心步驟。
編碼傳輸，即是將視頻數(shù)據(jù)量巨大的8K超高清視頻，通過(guò)編碼器來(lái)壓縮8K直播信號(hào)碼流，在減少傳輸帶寬的壓力的同時(shí)，使其適應(yīng)8K超高清電視、8K超高清戶外大屏等終端，最終能夠流暢、穩(wěn)定地呈現(xiàn)出來(lái)。
由于8K超高清直播要求低碼率、高畫質(zhì)、高并發(fā)、低延時(shí)，這對(duì)編碼傳輸帶來(lái)了許多挑戰(zhàn)。
一方面，視頻數(shù)據(jù)量過(guò)于龐大，對(duì)計(jì)算性能（如算力、算法等）和編碼效率的要求很高；
另一方面，在需要更高壓縮率的同時(shí)，用戶也對(duì)于畫質(zhì)提出了更高的要求。
因此，當(dāng)虹科技通過(guò)與英特爾合作，推出了8K AVS3 超高清一站式解決方案。
這里提到的AVS3，是我國(guó)具有自主知識(shí)產(chǎn)權(quán)的視頻編碼標(biāo)準(zhǔn)（第三代），采用了更靈活的塊劃分結(jié)構(gòu)、更精細(xì)的預(yù)測(cè)模式、更具適應(yīng)性的變換核，比AVS2節(jié)省約30%的碼率，從而提升編碼效率。
同時(shí)，該方案基于圖像分析及主觀視覺(jué)的編碼模型，通過(guò)數(shù)十萬(wàn)素材庫(kù)的深度學(xué)習(xí)超分技術(shù)，以及不同場(chǎng)景、高低分辨率差別學(xué)習(xí)和AI訓(xùn)練，來(lái)提升編碼畫質(zhì)。
在這次冬奧會(huì)中，當(dāng)虹科技8K編碼器還適配國(guó)內(nèi)首個(gè)HDR標(biāo)準(zhǔn)（HDR Vivid），實(shí)現(xiàn)更大曝光動(dòng)態(tài)范圍，能更好提取和顯示高光及暗部細(xì)節(jié)，豐富色彩和層次，增強(qiáng)縱深感，讓畫面更趨近自然。
天地偉業(yè)：環(huán)保卡口+超星光違停球
在舉辦大型賽事期間，交通問(wèn)題也顯得較為突出，尤其是車流量劇增之后，交通執(zhí)法也不能單靠人力巡查來(lái)解決。
為了保障交通的平穩(wěn)運(yùn)行，北京交管部門特意劃分了42條近239.5公里的奧運(yùn)專用車道。在這些車道上，部署著專用的“電子警察”，通過(guò)執(zhí)勤交警現(xiàn)場(chǎng)執(zhí)法，和卡口攝像機(jī)抓拍記錄非現(xiàn)場(chǎng)執(zhí)法兩種方式，進(jìn)行執(zhí)法工作。
天地偉業(yè)為此推出了「天星環(huán)保卡口」和「超星光違停球」。
普通電子警察在夜間抓拍時(shí)，會(huì)產(chǎn)生瞬間爆閃，容易給駕駛員造成視覺(jué)障礙，存在一定的交通隱患。
天星環(huán)?？谥饕扇×穗pSensor多光譜融合技術(shù)，入射光經(jīng)過(guò)攝像機(jī)內(nèi)部的分光裝置，可見(jiàn)光用來(lái)捕捉色彩；同時(shí)紅外光用來(lái)感受紋理和亮度，將獲取的畫面進(jìn)行像素級(jí)逐幀融合，整體色彩還原性高、無(wú)偏色，圖像整體亮度質(zhì)量高。
在夜間，該產(chǎn)品可通過(guò)紅外補(bǔ)光把光污染降到最低，獲得和白光爆閃相同的全彩效果，既可檢測(cè)抓拍違法車輛，也不會(huì)對(duì)駕駛員造成影響。
對(duì)于違停現(xiàn)象，天地偉業(yè)的超星光違停球可在布置場(chǎng)域內(nèi)形成360度巡視，形成全方位、全時(shí)段覆蓋，并且通過(guò)語(yǔ)音警戒來(lái)驅(qū)離違停車輛。
天地偉業(yè)品牌總監(jiān)張征表示，該違停球可適用于復(fù)雜場(chǎng)景，檢測(cè)違停車輛的成功率在95%以上。
蘇州科達(dá)：AI超微光電警+AR實(shí)景指揮
蘇州科達(dá)在交通方面推出了「超微光電警」、電子卡口、違停球等產(chǎn)品，布置在張家口市區(qū)的諸多路段、路口。
其中，共有近400套AI超微光電警落地主干道，無(wú)需補(bǔ)光燈，就可在夜間抓拍清晰準(zhǔn)確的違章圖片，減少光污染的同時(shí)，為解決違停、違章等提供視覺(jué)支撐。
在整個(gè)交通運(yùn)行狀態(tài)中，科達(dá)依托高點(diǎn)監(jiān)控搭載了AR實(shí)景指揮系統(tǒng)。
傳統(tǒng)的交通指揮系統(tǒng)需要多個(gè)攝像機(jī)提供實(shí)時(shí)數(shù)據(jù)，但存在畫面獨(dú)立、不連貫的問(wèn)題，割裂的畫面很難反映整體的交通區(qū)域狀況，指揮中心也無(wú)法兼顧全局。
科達(dá)的AR實(shí)景指揮系統(tǒng)依托3D定位、AI等技術(shù)，可通過(guò)AR高點(diǎn)全景攝像機(jī)獲取監(jiān)控點(diǎn)全景視頻，進(jìn)而與區(qū)域內(nèi)低點(diǎn)攝像機(jī)形成視頻聯(lián)動(dòng)，兼顧整體與局部。
同時(shí)，該系統(tǒng)支持視頻調(diào)閱、數(shù)據(jù)展示、信息標(biāo)注等功能，給指揮中心提供立體化、可視化的交通信息，從多個(gè)角度助力冬奧會(huì)的交通運(yùn)行。
結(jié)語(yǔ)
“智能化、人性化”是冬奧會(huì)的科技底色，各種聞所未聞、見(jiàn)所未見(jiàn)的技術(shù)，在提升競(jìng)技效果、改變觀賽方式的同時(shí)，為世界呈現(xiàn)出了全新的「中國(guó)名片」。
為那些默默在背后提供技術(shù)支撐的企業(yè)點(diǎn)贊、致敬！