游客發(fā)表
發(fā)帖時(shí)間:2024-12-29 14:36:55
近期,科技騰訊會(huì)議與聯(lián)發(fā)科技合作,天璣騰訊正式上線了虛擬背景功能運(yùn)行在天璣移動(dòng)平臺(tái)NPU的移動(dòng)議體驗(yàn)版本。作為雙方首次聯(lián)合優(yōu)化、平臺(tái)實(shí)現(xiàn)平臺(tái)最大化AI算力的賦能分割軟硬件生態(tài)合作,為用戶帶來更智能、端側(cè)打造更高效、人像更安全的模型高品質(zhì)會(huì)議體驗(yàn),也為業(yè)內(nèi)AI應(yīng)用提供了絕佳的高品參考案例。
在本次合作中,質(zhì)線聯(lián)發(fā)科技的科技天璣移動(dòng)平臺(tái)為虛擬背景功能提供了強(qiáng)大的AI性能底座。天璣移動(dòng)平臺(tái)面向智能手機(jī)、天璣騰訊平板電腦等移動(dòng)設(shè)備,移動(dòng)議體驗(yàn)擁有高智能、平臺(tái)高性能、賦能分割高能效、低功耗卓越特性。最新發(fā)布的天璣9400集成聯(lián)發(fā)科技第八代 AI 處理器 NPU 890,提供遠(yuǎn)超以往的AI 性能和能效。此外,天璣9400 還支持時(shí)域張量(Temporal Tensor)硬件加速技術(shù)、端側(cè)高畫質(zhì)視頻生成技術(shù),強(qiáng)勁的端側(cè)Stable Diffusion性能,不僅能夠?qū)崿F(xiàn)高分辨率生圖,更支持端側(cè)動(dòng)圖和視頻生成,實(shí)現(xiàn)更多創(chuàng)新玩法。
【聯(lián)發(fā)科技天璣9400移動(dòng)平臺(tái)集成先進(jìn)的AI 處理器 NPU 890】
騰訊會(huì)議的虛擬背景功能是一種基于人像分割技術(shù)的運(yùn)用,在進(jìn)行視頻會(huì)議時(shí),騰訊會(huì)議將自動(dòng)識(shí)別參會(huì)人,并將參會(huì)人周圍的環(huán)境替換為指定圖像或視頻 ,在對(duì)參會(huì)人員進(jìn)行隱私保護(hù)的同時(shí),也提升了會(huì)議趣味。虛擬背景功能還可以取代布展背景墻,可有效節(jié)約會(huì)議成本。
此次騰訊會(huì)議基于天璣移動(dòng)平臺(tái)NPU上實(shí)現(xiàn)的AI人像分割技術(shù),采用了自建的多樣性數(shù)據(jù)集,涵蓋了豐富多樣的人物樣本和場(chǎng)景環(huán)境,以確保能夠在各種實(shí)際應(yīng)用場(chǎng)景中實(shí)現(xiàn)穩(wěn)定而精準(zhǔn)的人像分割。同時(shí)在模型設(shè)計(jì)上,騰訊會(huì)議追求輕量化和高計(jì)算性價(jià)比,采用先進(jìn)的卷積神經(jīng)網(wǎng)絡(luò)架構(gòu),并結(jié)合注意力機(jī)制與重參數(shù)化等技術(shù),確保用戶無論使用何種設(shè)備,都能享受到流暢且準(zhǔn)確的人像分割體驗(yàn)。
【騰訊會(huì)議APP端-虛擬背景設(shè)置】
此次雙方的深度合作,共同針對(duì)模型在GPU架構(gòu)和NPU架構(gòu)的運(yùn)行能力進(jìn)行了協(xié)同優(yōu)化,顯著提升了處理速度和能效表現(xiàn),為用戶提供了更加流暢和高效的體驗(yàn)。
聯(lián)發(fā)科技不僅在芯片硬件層面提供了強(qiáng)大的NPU算力支持,還為騰訊會(huì)議提供了天璣AI開發(fā)套件NeuroPilot軟件工具和API。通過聯(lián)發(fā)科技的一站式軟件解決方案NeuroPilot,為騰訊會(huì)議提供了模型量化、轉(zhuǎn)換、編譯和集成的完整工具鏈(SDK/API/Document),使之可在天璣移動(dòng)平臺(tái)上高效開發(fā)和部署基于神經(jīng)網(wǎng)絡(luò)的AI應(yīng)用程序,極大簡化了騰訊會(huì)議基于AI的應(yīng)用程序開發(fā)步驟。
為了讓模型網(wǎng)絡(luò)中更多計(jì)算運(yùn)行在高性能的天璣移動(dòng)平臺(tái)NPU,騰訊會(huì)議對(duì)自研模型中的自定義模塊進(jìn)行調(diào)整和替換,以充分發(fā)揮天璣移動(dòng)平臺(tái)NPU的AI性能。此外,雙方還共同設(shè)計(jì)模型最大并行度,以進(jìn)一步提升AI應(yīng)用在天璣移動(dòng)平臺(tái)NPU上的執(zhí)行效率。經(jīng)雙方聯(lián)合優(yōu)化,虛擬背景功能運(yùn)行在天璣移動(dòng)平臺(tái)NPU的版本相對(duì)CPU FP16模式版本性能提升可達(dá)3.5倍至4倍,耗時(shí)也縮短到6毫秒內(nèi)。同時(shí),降低功耗還有助于減少手機(jī)發(fā)熱,為長時(shí)間會(huì)議提供更好的續(xù)航保障。
騰訊會(huì)議智能應(yīng)用研發(fā)中心負(fù)責(zé)人左小祥表示:長期以來,除了通過AI算法在軟件層優(yōu)化性能,騰訊會(huì)議與芯片設(shè)計(jì)廠商積極合作,探索在硬件層提升性能與優(yōu)化用戶體驗(yàn)的更多可能。本次與聯(lián)發(fā)科技的合作,憑借天璣移動(dòng)平臺(tái)強(qiáng)大的AI算力支持,將騰訊會(huì)議的AI人像分割模型遷移至天璣AI引擎上運(yùn)行,AI算法運(yùn)行更快的同時(shí),還大幅降低算法的CPU占用,節(jié)省更多CPU資源。騰訊會(huì)議將持續(xù)發(fā)力AI技術(shù)應(yīng)用的前沿探索,并在軟硬件生態(tài)的更多合作中,為用戶打造更優(yōu)開會(huì)體驗(yàn),目前,騰訊會(huì)議已經(jīng)在天璣9400、天璣9300、天璣9200、天璣9000等多個(gè)平臺(tái)上線虛擬背景的端側(cè)NPU版本。歡迎廣大使用天璣移動(dòng)平臺(tái)設(shè)備的用戶下載騰訊會(huì)議APP,體驗(yàn)高效AI加持的開會(huì)模式。
聯(lián)發(fā)科技與騰訊會(huì)議的合作充分結(jié)合了實(shí)際業(yè)務(wù)場(chǎng)景,是一次面向用戶體驗(yàn)的移動(dòng)端AI算力深化合作,為未來功能的拓展和創(chuàng)新打下了堅(jiān)實(shí)的基礎(chǔ),同時(shí)也彰顯了雙方攜手推動(dòng)行業(yè)向更高效、更智能發(fā)展的先進(jìn)成果。未來,聯(lián)發(fā)科技與騰訊會(huì)議持續(xù)攜手,通過軟硬件協(xié)同共同精進(jìn)落地更多前沿AI能力,助力騰訊會(huì)議用戶在天璣移動(dòng)平臺(tái)設(shè)備上暢享卓越體驗(yàn)。
相關(guān)內(nèi)容
隨機(jī)閱讀
熱門排行
友情鏈接