淘寶星辰是由阿里媽媽基于自研的淘寶星辰視頻生成大模型推出的視頻AIGC工具。
輸入一張靜態(tài)圖片就能生成一段商品展示小視頻;一張圖片+文字描述,還能按照要求一鍵生成高質(zhì)量的5秒視頻。這是阿里媽媽近期推出的淘寶星辰 · 圖生視頻工具。
淘寶星辰是由阿里媽媽基于自研的淘寶星辰視頻生成大模型推出的視頻AIGC工具,操作便捷、更懂商品的展示手法、專業(yè)的光影效果、更強(qiáng)的多語種語義遵循能力、穩(wěn)定的人物/商品/裝飾保持,這是淘寶星辰的主要特點(diǎn)。
視頻生成是一個復(fù)雜的、系統(tǒng)性的算法工程。據(jù)介紹,2024年3月,阿里媽媽基于Unet Diffusion Model路線研發(fā)并上線了阿瞳木動效視頻,實(shí)現(xiàn)了視頻AIGC在電商場景的首次應(yīng)用落地。
但是,由于技術(shù)路線、數(shù)據(jù)等多個因素的限制,阿瞳木動效視頻在畫面穩(wěn)定性、內(nèi)容可控性、目標(biāo)與動作豐富性等關(guān)鍵要素上,仍然存在較大的進(jìn)步空間。
從去年3月至今,通過算法、數(shù)據(jù)、工程等眾多團(tuán)隊(duì)的密切協(xié)作,阿里媽媽完成了面向生成任務(wù)的數(shù)據(jù)飛輪、自研3D VAE、自研淘寶星辰視頻生成大模型(包括Tbstar-T2V、Tbstar-I2V、Tbstar-V2V等)等多個關(guān)鍵模塊和模型從0到1的建設(shè)。
目前,Tbstar-I2V大模型已經(jīng)應(yīng)用于淘寶星辰 · 圖生視頻工具中,為用戶提供更懂電商的圖生視頻功能。
淘寶星辰 · 圖生視頻不僅可以根據(jù)單張商品圖,一鍵生成主圖視頻,還能在多少模特圖的基礎(chǔ)上,自行添加轉(zhuǎn)場、特效和文字,快速生成吸睛的產(chǎn)品展示視頻。同時,還可以根據(jù)多張商品圖分別生成視頻片段,采用剪輯視頻方式制作商品短視頻,配備解說、字幕等,生成商品種草視頻。
淘寶星辰還針對服裝行業(yè)提供一體化解決方案,只需要模特圖或平鋪圖+虛擬模特,都能輕松生成多樣化服飾視頻。
看完覺得寫得好的,不防打賞一元,以支持藍(lán)海情報(bào)網(wǎng)揭秘更多好的項(xiàng)目。
標(biāo)簽: 阿里媽媽 網(wǎng)絡(luò)營銷