5G開啟倒計時 AI內容服務已進入新賽道

2022-09-29 16:21:21 字數 1654 閱讀 9616

2019 年被譽為中國的「5g元年」,它將為**行業帶來巨大的改變。在5g技術的支撐下,傳輸速www.cppcns.com度較於4g將快百倍,高速度、泛在網、低功耗、低時延的5g優勢將革新當前的**產業。第七屆中國網路視聽大會上,圍繞這一話題,金山雲高階技術總監韓博發表主題演講,重點闡述5g背景下,ai內容服務產業隨著**生產、服務、消費方式的公升級,在技術演進過程中的突破性進展。

ai內容服務隨5g同行

5g網路是資訊基礎設施又一次全面公升級,能為跨領域、全方位、多層次的產業深度融合提供堅實支撐。韓博表示,5g將促進數字內容製作、分發、呈現的全產業鏈公升級。ai內容服務作為貫穿**內容生產全過程的重要「參與者」,已做好了迎接5g時代到來的程式設計客棧準備。

以金山雲金睛為例,它基於金山雲強大的雲計算基礎資源能力和海量資料積累,專注於影象識別、語音識別、多模態**分析、文字識別、人臉識別、行人車輛識別等人工智慧領域的研究,提供跨行業、多場景的ai解決方案。在ai內容服務方面,已覆蓋內容生產、內容風控、內容分發全環節。

「我們的生活不僅是一系列的靜態快照,而是隨著時間變化在現實世界動態發生事件,**內容更是如此。內容趨勢的變遷,同時也會推動人工智慧技術的演進。基於此,金山雲金睛在單模態識別的基礎上,公升級為多模態融合理解,以應對5g時代低延時、高速率、龐大體量的ai內容服務需求。」韓博介紹道。

多模態融合理解帶來認知公升級

多模態,簡單來說是相對於單一的視覺、語音、ocr識別等,將多個模態的資訊結合起來,也就是**中的音視**內容進行綜合判定、理解。相比傳統單一的互動模式,多模態融合程式設計客棧技術。表達效率和表達的資訊完整度更高,是智慧型互動的發展趨勢。

韓博介紹,多模態融合理解技術可以對**內容進行精準的場景識別、物件跟蹤、行為理解、**聯想等。比如基於單模態的影象識別很難判斷出直播過程中,主播是在抽菸,還是在吃棒棒糖。但是基於多模態的**理解,我們可以通過將連貫主播的行為動作進行分析,判斷是否有點煙行為,是否有吐菸行為,從而準確的判斷主播是否在抽菸。

除此之外,在**內容的生產過程中,多模態融合理解技術優勢明顯。例如自動進行語音轉寫,並且放到指定位置;實現智慧型bgm功能,根據**內容自動推薦背景**;支援**特效功能,對應**場景或者動作,給出**特效等。

相對於 ai 目前所展示出在影象和語音領域的單一感知能力,**理解更加複雜,也更加困難,這體現在理解**是二者的疊加,實現多模態融合理解的背後,需要技術的突破。韓博在現場重點介紹了金山雲金睛在多模態理解技術上的突破——ai演算法團隊通過訓練超千萬個高質量的短**,得到的具有很強的泛化能力的內容理解模型和金山雲金睛專利時序演算法。

多模態融合理解必須全面捕捉**內容中的時序資訊。金山雲內容理解模型通過三維時空卷積(3d conv)和三維時空卷積長短時注意力迴圈神經網路(lstm and attention)來精細捕捉**單幀的區域性與整體時空資訊。受人腦注意力機制的啟發,引入「時空注意力機制」,使得模型可以聚焦關鍵幀、關鍵位置的資訊,降低無關幀對模型效能的影響。整個模型不需要任何人工干預,輸入原始**,就可以得到最終的**結果,整個模型精度高、速度快。

金山雲金睛內容識別已經全面運用多模態**識別技術進行**內容處理,可以更加精準的理解**內容,幫助內容平台快速、精準審核**內容,以及對**進行精準的標籤分類和特徵提取,用於內容推薦和分發。為平台優質內容產出、打通作者和使用者間壁壘,實現平台差異化布局夯實了技術基礎。

本文標題: 5g開啟倒計時 ai內容服務已進入新賽道

本文位址: /news/media/235268.html

g 編譯時總是出現倒計時問題

make warning file mtrpcserver real pro.cpp has modification time 41 s in the future make warning file mtrpcserver real pro.cpp has modification time 4...

Swift 5進入發布倒計時

在正式發布swift 4.2之後,swift團隊現在啟動了發布過程的最後階段,把注意力集中在了swift 5上。swift 5計畫於2019年初發布,其目標是在保持源 相容性的同時,實現abi穩定性。u0026 xd n u0026 xd n abi穩定性大致可以理解為跨swift版本的 二進位制相...

Swift 5進入發布倒計時

在正式發布swift 4.2之後,swift團隊現在啟動了發布過程的最後階段,把注意力集中在了swift 5上。swift 5計畫於2019年初發布,其目標是在保持源 相容性的同時,實現abi穩定性。abi穩定性大致可以理解為跨swift版本的 二進位制相容性 abi穩定性允許將框架鏈結到程式,而不...