在相同流量消耗的情況下，540p可秒變1080p?這不是魔法，通過視頻超分辨率技術(shù)(簡稱視頻超分)，就能讓視頻變得更清晰。
7月20日，在小紅書最新版本7.48的App中，用戶就能體驗(yàn)到這項(xiàng)技術(shù)帶來的優(yōu)質(zhì)視頻體驗(yàn)。小紅書和華為HMS Core合作，在移動(dòng)端上線了基于HUAWEI HiAI Foundation提供的視頻超分能力，實(shí)現(xiàn)了視頻筆記在相同流量消耗的情況下，540p清晰度可秒變1080p的視覺效果，讓用戶真正享受到低成本觀看流暢清晰視頻的快感。
真誠分享創(chuàng)造用戶價(jià)值，同頻探索低成本高畫質(zhì)
一直以來，小紅書將用戶基于真實(shí)生活的記錄分享視為最寶貴的財(cái)富，鼓勵(lì)用戶通過短視頻、圖文、直播等形式記錄生活，分享生活方式，并基于興趣互動(dòng)形成社區(qū)。以此為基礎(chǔ)，小紅書平臺(tái)上涌現(xiàn)出內(nèi)容與商業(yè)之間不斷流轉(zhuǎn)的良性交互，成長出獨(dú)具特色的“種草經(jīng)濟(jì)”。
但在2K、4K屏幕分辨率已是主流的今天，用戶對(duì)視頻畫質(zhì)和體驗(yàn)效果的要求也越來越高，卡頓或視頻分辨率太低都會(huì)讓用戶難以忍受。然而音視頻領(lǐng)域業(yè)務(wù)復(fù)雜，端側(cè)算力需求大、算法部署困難，想要實(shí)現(xiàn)新的功能，構(gòu)建新的業(yè)務(wù)場景并不容易。
如何為用戶打造低成本高畫質(zhì)的視頻播放體驗(yàn)，成為短視頻領(lǐng)域(尤其是各大頭部短視頻平臺(tái))迫切想要解決的問題。
與此同時(shí)，華為HMS Core通過對(duì)影像處理能力的不斷積累，結(jié)合多媒體技術(shù)和AI算法，為社交、影音行業(yè)的開發(fā)者提供了一套AI視頻超分解決方案，輕松實(shí)現(xiàn)讓用戶觀看低分辨率視頻時(shí)也能享受高分辨率體驗(yàn)的效果。
對(duì)音視頻領(lǐng)域的一致探索，為小紅書與HMS Core的合作拉開了帷幕。
短視頻超分加持，UGC種草刷到爽
致力于打造“超清視界”的AI視頻超分技術(shù)，通過機(jī)器學(xué)習(xí)，可以將低分辨率的圖像、視頻進(jìn)行重建，使圖像、視頻更加清晰。但傳統(tǒng)超分算法對(duì)運(yùn)算資源有較大的需求，且受限于移動(dòng)端算力、算法功耗、多機(jī)型兼容性等問題，在移動(dòng)端上部署實(shí)時(shí)超分技術(shù)面臨著巨大挑戰(zhàn)。
在本次合作中，小紅書App通過接入基于HMS Core開放的HUAWEI HiAI Foudation，使能端側(cè)超分業(yè)務(wù)。端側(cè)視頻超分模型對(duì)實(shí)時(shí)性要求較高，意味著視頻超分功能不僅需要高算力，還需要通過底層硬件能力優(yōu)化來降低功耗。HUAWEI HiAI Foundation作為端側(cè)AI計(jì)算的平臺(tái)底座，通過多IP協(xié)同、圖融合優(yōu)化等技術(shù)，充分發(fā)揮NPU硬件單元的算力，令視頻超分以更低功耗更高性能在手機(jī)端側(cè)高效運(yùn)轉(zhuǎn)。
這樣一來，小紅書開發(fā)者們就可通過降低或升高用戶所觀看視頻的清晰度和碼率，動(dòng)態(tài)化選擇網(wǎng)絡(luò)環(huán)境，有效降低了寬帶的使用成本，并且提升了開發(fā)與運(yùn)營效率。同時(shí)，端側(cè)視頻超分的落地，也讓小紅書用戶以相同的流量消耗，獲得了更流暢清晰的“種草”視頻觀看體驗(yàn)。
高效合作，深度探索未來音視頻行業(yè)無限可能
小紅書團(tuán)隊(duì)與華為HMS Core團(tuán)隊(duì)對(duì)接始于今年4月，雙方合作高效，共同基于對(duì)媒體領(lǐng)域的技術(shù)理解和方案，協(xié)同開發(fā)，很快便集成了HUAWEI HiAI Foundation并實(shí)現(xiàn)了端側(cè)視頻超分能力，通過AI硬件的加速，解決了功耗和性能的難題。小紅書應(yīng)用研發(fā)負(fù)責(zé)人鄧林在提及與HMS Core合作感受時(shí)說到：“HMS Core幫助我們解決了端側(cè)視頻超分這一難題，這使得小紅書的開發(fā)者們可以將更多精力放在業(yè)務(wù)創(chuàng)新方面，用旗艦技術(shù)賦能提升我們的用戶體驗(yàn)。”
目前，小紅書“視頻超分”功能部署至HUAWEI MateX2系列、P50 Pro、Mate 40系列等90多款華為NPU手機(jī)機(jī)型，以及HUAWEI MatePad系列等10多款華為NPU平板機(jī)型，在相關(guān)手機(jī)和平板刷小紅書視頻筆記都能獲得優(yōu)質(zhì)體驗(yàn)。
音視頻行業(yè)還存在著大量潛在的業(yè)務(wù)創(chuàng)新需求，未來HMS Core和小紅書也將持續(xù)探索為用戶提供更多個(gè)性化的服務(wù)，提升用戶體驗(yàn)，在運(yùn)動(dòng)類、賽事類等細(xì)分領(lǐng)域上探索更多創(chuàng)新玩法。HUAWEI HiAI Foundation也一直在為開發(fā)者解決底層算力與體驗(yàn)中的切實(shí)問題和最新技術(shù)難點(diǎn)，對(duì)開發(fā)者開放底層算力平臺(tái)，助力更多的算法遷移到端側(cè)部署。
（免責(zé)聲明：本網(wǎng)站內(nèi)容主要來自原創(chuàng)、合作伙伴供稿和第三方自媒體作者投稿，凡在本網(wǎng)站出現(xiàn)的信息，均僅供參考。本網(wǎng)站將盡力確保所提供信息的準(zhǔn)確性及可靠性，但不保證有關(guān)資料的準(zhǔn)確性及可靠性，讀者在使用前請(qǐng)進(jìn)一步核實(shí)，并對(duì)任何自主決定的行為負(fù)責(zé)。本網(wǎng)站對(duì)有關(guān)資料所引致的錯(cuò)誤、不確或遺漏，概不負(fù)任何法律責(zé)任。
任何單位或個(gè)人認(rèn)為本網(wǎng)站中的網(wǎng)頁或鏈接內(nèi)容可能涉嫌侵犯其知識(shí)產(chǎn)權(quán)或存在不實(shí)內(nèi)容時(shí)，應(yīng)及時(shí)向本網(wǎng)站提出書面權(quán)利通知或不實(shí)情況說明，并提供身份證明、權(quán)屬證明及詳細(xì)侵權(quán)或不實(shí)情況證明。本網(wǎng)站在收到上述法律文件后，將會(huì)依法盡快聯(lián)系相關(guān)文章源頭核實(shí)，溝通刪除相關(guān)內(nèi)容或斷開相關(guān)鏈接。 ）
