亚洲第一无码精品久久久播放,99精品国产自在现线10页,国产伦精品一区二区三区小说,国产免费久久久久久久无码浪潮,91av视频精品一区二区三区

24小時故障咨詢電話 點擊右邊熱線,在線解答故障撥打:400-186-5909
新澳門和香港2025年免費正版資料大全,新澳2025精準正版圖庫

新澳門和香港2025年免費正版資料大全,新澳2025精準正版圖庫

全國報修熱線:400-186-5909

更新時間:

400服務電話:400-186-5909(點擊咨詢)
新澳門和香港2025年免費正版資料大全,新澳2025今晚開彩資料
新澳門和香港2025年免費正版資料大全,新澳2025精準正版圖庫








新澳門和香港2025年免費正版資料大全,7777788888精準管家婆網(wǎng):(1)400-186-5909(點擊咨詢)(2)400-186-5909(點擊咨詢)








新澳門和香港2025年免費正版資料大全,探索創(chuàng)新科技助力智慧城市建設新路徑(1)400-186-5909(點擊咨詢)(2)400-186-5909(點擊咨詢)




新澳門和香港2025年免費正版資料大全,澳門管家婆100%精準香港
新澳門和香港2025年免費正版資料大全,新能源企業(yè)推出創(chuàng)新環(huán)保材料解決方案








我們重視環(huán)保,維修過程中產(chǎn)生的廢棄物將按照環(huán)保標準進行處理。








服務熱線直撥:無需經(jīng)過繁瑣的轉(zhuǎn)接流程,直接撥打服務熱線即可聯(lián)系我們。








新澳門和香港2025年免費正版資料大全,2025年正版資料免費








新澳門和香港2025年免費正版資料大全,維修服務電話全國服務區(qū)域:








亳州市渦陽縣、洛陽市老城區(qū)、泰州市姜堰區(qū)、紅河個舊市、淄博市桓臺縣、德宏傣族景頗族自治州瑞麗市








福州市永泰縣、深圳市寶安區(qū)、鶴壁市淇濱區(qū)、信陽市固始縣、九江市濂溪區(qū)








成都市錦江區(qū)、安陽市滑縣、渭南市潼關縣、七臺河市勃利縣、黔西南興義市、安陽市內(nèi)黃縣、楚雄元謀縣、廣安市華鎣市








揚州市江都區(qū)、太原市杏花嶺區(qū)、銅川市耀州區(qū)、溫州市永嘉縣、阿壩藏族羌族自治州理縣、內(nèi)蒙古赤峰市元寶山區(qū)








開封市蘭考縣、北京市大興區(qū)、海東市民和回族土族自治縣、臨汾市蒲縣、衢州市常山縣、北京市延慶區(qū)、張掖市肅南裕固族自治縣








玉溪市江川區(qū)、張掖市山丹縣、廣安市前鋒區(qū)、廣西南寧市上林縣、樂山市沐川縣、內(nèi)蒙古赤峰市巴林左旗、福州市倉山區(qū)、張掖市臨澤縣、渭南市蒲城縣








內(nèi)蒙古阿拉善盟阿拉善右旗、贛州市石城縣、南平市邵武市、麗水市云和縣、保山市騰沖市、廣西柳州市融安縣、珠海市金灣區(qū)








眉山市仁壽縣、東莞市寮步鎮(zhèn)、南京市秦淮區(qū)、迪慶德欽縣、青島市市南區(qū)、菏澤市巨野縣、棗莊市臺兒莊區(qū)、晉中市介休市








撫順市撫順縣、六安市舒城縣、東方市四更鎮(zhèn)、畢節(jié)市赫章縣、北京市海淀區(qū)、直轄縣天門市








呂梁市汾陽市、大慶市龍鳳區(qū)、撫順市順城區(qū)、平頂山市葉縣、忻州市岢嵐縣、吉安市廬陵新區(qū)、貴陽市開陽縣、普洱市墨江哈尼族自治縣








武漢市洪山區(qū)、玉樹治多縣、佳木斯市向陽區(qū)、西安市灞橋區(qū)、龍巖市漳平市、玉溪市通??h、晉城市城區(qū)








達州市達川區(qū)、遼陽市文圣區(qū)、東方市新龍鎮(zhèn)、撫州市黎川縣、煙臺市龍口市、廣安市華鎣市、臨沂市沂南縣、鎮(zhèn)江市潤州區(qū)、東莞市大朗鎮(zhèn)、白沙黎族自治縣牙叉鎮(zhèn)








文昌市文教鎮(zhèn)、徐州市云龍區(qū)、重慶市南川區(qū)、屯昌縣坡心鎮(zhèn)、聊城市冠縣、酒泉市阿克塞哈薩克族自治縣、青島市黃島區(qū)








臨汾市曲沃縣、渭南市韓城市、蘭州市七里河區(qū)、張家界市慈利縣、滁州市瑯琊區(qū)、楚雄姚安縣、鹽城市鹽都區(qū)








新鄉(xiāng)市衛(wèi)濱區(qū)、鎮(zhèn)江市京口區(qū)、黔東南錦屏縣、綿陽市平武縣、忻州市神池縣、大理云龍縣、周口市商水縣








亳州市渦陽縣、汕尾市城區(qū)、澄邁縣瑞溪鎮(zhèn)、廈門市海滄區(qū)、廣西玉林市陸川縣、廣州市黃埔區(qū)








海南貴德縣、成都市新都區(qū)、威海市榮成市、濰坊市濰城區(qū)、雞西市梨樹區(qū)、株洲市醴陵市、齊齊哈爾市訥河市、銅陵市樅陽縣








哈爾濱市尚志市、白沙黎族自治縣金波鄉(xiāng)、萍鄉(xiāng)市安源區(qū)、屯昌縣新興鎮(zhèn)、商丘市睢陽區(qū)、陽江市陽東區(qū)








天水市清水縣、遵義市紅花崗區(qū)、三沙市南沙區(qū)、五指山市水滿、四平市鐵西區(qū)、甘孜丹巴縣、汕尾市陸豐市、長春市農(nóng)安縣、連云港市灌南縣








內(nèi)蒙古巴彥淖爾市五原縣、成都市蒲江縣、遂寧市大英縣、廣元市昭化區(qū)、吉林市昌邑區(qū)、綏化市青岡縣、黔南福泉市








昆明市富民縣、涼山金陽縣、合肥市巢湖市、內(nèi)江市資中縣、衢州市江山市、濟南市天橋區(qū)、南昌市進賢縣、上饒市鉛山縣、白山市靖宇縣








普洱市西盟佤族自治縣、四平市伊通滿族自治縣、臨滄市耿馬傣族佤族自治縣、池州市青陽縣、臨夏和政縣、咸陽市禮泉縣、四平市鐵東區(qū)








哈爾濱市道里區(qū)、渭南市蒲城縣、東莞市石龍鎮(zhèn)、撫州市臨川區(qū)、宜春市樟樹市、許昌市建安區(qū)、白山市江源區(qū)、儋州市中和鎮(zhèn)、臺州市路橋區(qū)








荊州市公安縣、黑河市五大連池市、大興安嶺地區(qū)呼中區(qū)、五指山市通什、昭通市鎮(zhèn)雄縣、韶關市湞江區(qū)、清遠市清新區(qū)、廣西河池市金城江區(qū)、太原市杏花嶺區(qū)








陵水黎族自治縣隆廣鎮(zhèn)、武漢市江夏區(qū)、南陽市新野縣、海南興??h、廣西賀州市富川瑤族自治縣、荊州市江陵縣、黃岡市黃梅縣








文昌市錦山鎮(zhèn)、寧夏中衛(wèi)市沙坡頭區(qū)、九江市共青城市、襄陽市南漳縣、天津市靜海區(qū)、海北祁連縣、晉城市沁水縣、忻州市五臺縣








寧波市奉化區(qū)、運城市鹽湖區(qū)、寧德市古田縣、蕪湖市無為市、廣西柳州市城中區(qū)、信陽市光山縣、廣州市荔灣區(qū)、果洛久治縣、蚌埠市固鎮(zhèn)縣
400服務電話:400-186-5909(點擊咨詢)
新澳門和香港2025年免費正版資料大全,新奧精準免費提供澳門
新澳門和香港2025年免費正版資料大全,新澳門2025最精準免費








新澳門和香港2025年免費正版資料大全,新政策出臺助力中小企業(yè)創(chuàng)新發(fā)展:(1)400-186-5909(點擊咨詢)(2)400-186-5909(點擊咨詢)








新澳門和香港2025年免費正版資料大全,2025新澳門天天彩免費大全(1)400-186-5909(點擊咨詢)(2)400-186-5909(點擊咨詢)




新澳門和香港2025年免費正版資料大全,2025澳門正版免費全年資料大全旅游團
新澳門和香港2025年免費正版資料大全,最新政策解讀助力企業(yè)創(chuàng)新發(fā)展








售后服務團隊會定期進行培訓和學習,不斷提升自己的專業(yè)知識和技能。








維修服務滿意度調(diào)查定期化,保障服務質(zhì)量:我們定期對客戶進行維修服務滿意度調(diào)查,確保服務質(zhì)量始終保持在較高水平。








新澳門和香港2025年免費正版資料大全,新澳門2025年正版免費








新澳門和香港2025年免費正版資料大全,維修服務電話全國服務區(qū)域:








臨滄市臨翔區(qū)、臨汾市鄉(xiāng)寧縣、黑河市嫩江市、昭通市鹽津縣、韶關市南雄市、合肥市肥西縣、貴陽市云巖區(qū)








寧夏銀川市永寧縣、南平市建甌市、黔西南望謨縣、煙臺市棲霞市、荊州市洪湖市、永州市江華瑤族自治縣、黔西南晴隆縣、商丘市柘城縣、北京市西城區(qū)








鶴崗市東山區(qū)、晉中市榆社縣、廣元市蒼溪縣、棗莊市滕州市、廣西崇左市扶綏縣、朔州市山陰縣








昭通市昭陽區(qū)、撫順市東洲區(qū)、溫州市瑞安市、南京市棲霞區(qū)、綏化市明水縣、撫順市新賓滿族自治縣、延邊圖們市、大興安嶺地區(qū)塔河縣、撫順市順城區(qū)








內(nèi)蒙古呼和浩特市清水河縣、滁州市南譙區(qū)、長春市德惠市、廣西貴港市桂平市、臨夏東鄉(xiāng)族自治縣、鹽城市響水縣、武漢市東西湖區(qū)、贛州市寧都縣








玉樹雜多縣、濟南市市中區(qū)、揭陽市普寧市、通化市二道江區(qū)、湖州市德清縣、寧德市霞浦縣








淮安市淮安區(qū)、西雙版納景洪市、臨沂市沂水縣、東莞市石龍鎮(zhèn)、白山市靖宇縣、濱州市無棣縣








安康市漢陰縣、大同市渾源縣、曲靖市羅平縣、漢中市佛坪縣、黃岡市紅安縣、贛州市章貢區(qū)、清遠市清新區(qū)、內(nèi)蒙古包頭市土默特右旗、保山市龍陵縣








潮州市潮安區(qū)、廣西南寧市賓陽縣、紅河彌勒市、東營市東營區(qū)、上饒市婺源縣、濟寧市汶上縣、南陽市桐柏縣、延邊圖們市








平?jīng)鍪腥A亭縣、煙臺市福山區(qū)、大理漾濞彝族自治縣、汕尾市陸河縣、文昌市公坡鎮(zhèn)、邵陽市北塔區(qū)、寶雞市扶風縣








萬寧市北大鎮(zhèn)、陵水黎族自治縣群英鄉(xiāng)、內(nèi)蒙古巴彥淖爾市杭錦后旗、澄邁縣永發(fā)鎮(zhèn)、重慶市萬州區(qū)、梅州市梅江區(qū)、銅陵市義安區(qū)、中山市神灣鎮(zhèn)








廣西南寧市興寧區(qū)、紅河石屏縣、七臺河市桃山區(qū)、中山市五桂山街道、寶雞市扶風縣、內(nèi)蒙古烏海市海南區(qū)、清遠市清城區(qū)、張掖市肅南裕固族自治縣








三明市永安市、鞍山市岫巖滿族自治縣、平頂山市魯山縣、晉中市和順縣、六安市裕安區(qū)、內(nèi)蒙古錫林郭勒盟蘇尼特左旗、東方市八所鎮(zhèn)








黃山市黃山區(qū)、雅安市滎經(jīng)縣、成都市武侯區(qū)、寧夏固原市原州區(qū)、泉州市安溪縣、甘南碌曲縣、廣西河池市環(huán)江毛南族自治縣、滁州市南譙區(qū)








資陽市雁江區(qū)、鞍山市鐵東區(qū)、寧波市余姚市、大理鶴慶縣、文昌市錦山鎮(zhèn)、沈陽市和平區(qū)、瀘州市敘永縣、涼山美姑縣、商丘市永城市








泉州市金門縣、北京市平谷區(qū)、十堰市丹江口市、三明市建寧縣、三明市泰寧縣、淄博市沂源縣








資陽市雁江區(qū)、雙鴨山市尖山區(qū)、慶陽市合水縣、郴州市桂陽縣、吉安市井岡山市、麗水市云和縣、臨夏康樂縣、天津市寶坻區(qū)








沈陽市康平縣、白沙黎族自治縣牙叉鎮(zhèn)、肇慶市鼎湖區(qū)、四平市鐵東區(qū)、揭陽市普寧市、南平市延平區(qū)、廣西百色市西林縣、甘孜石渠縣、湖州市安吉縣








西安市藍田縣、湖州市德清縣、屯昌縣西昌鎮(zhèn)、陽泉市平定縣、江門市開平市








晉中市榆社縣、西雙版納勐海縣、淄博市淄川區(qū)、惠州市惠城區(qū)、深圳市福田區(qū)、大連市瓦房店市、張掖市甘州區(qū)








內(nèi)蒙古烏海市海勃灣區(qū)、本溪市平山區(qū)、南平市光澤縣、贛州市石城縣、嘉峪關市新城鎮(zhèn)、周口市鄲城縣、廣西崇左市江州區(qū)、安慶市大觀區(qū)、保山市龍陵縣、遼陽市弓長嶺區(qū)








黔南甕安縣、蕪湖市弋江區(qū)、文山丘北縣、贛州市石城縣、屯昌縣新興鎮(zhèn)








撫順市清原滿族自治縣、益陽市桃江縣、天水市秦安縣、佳木斯市向陽區(qū)、酒泉市金塔縣、合肥市廬陽區(qū)








內(nèi)蒙古通遼市科爾沁區(qū)、北京市密云區(qū)、天津市河西區(qū)、濟南市章丘區(qū)、白銀市會寧縣、忻州市定襄縣、合肥市包河區(qū)、南陽市鄧州市、瀘州市合江縣








宿遷市泗陽縣、怒江傈僳族自治州瀘水市、陵水黎族自治縣黎安鎮(zhèn)、東方市天安鄉(xiāng)、定安縣翰林鎮(zhèn)、周口市商水縣、岳陽市岳陽樓區(qū)、揭陽市榕城區(qū)








濰坊市安丘市、內(nèi)蒙古巴彥淖爾市烏拉特后旗、雙鴨山市饒河縣、寶雞市金臺區(qū)、哈爾濱市方正縣、北京市門頭溝區(qū)、晉中市介休市、廣西崇左市大新縣、常德市澧縣








楚雄牟定縣、佳木斯市富錦市、商洛市丹鳳縣、定西市臨洮縣、宜春市萬載縣、聊城市東昌府區(qū)、安慶市桐城市、長沙市望城區(qū)、涼山冕寧縣

對話階躍星辰姜大昕:Sora技術有局限,多模態(tài)理解生成一體化才是未來|界面新聞 · 科技

界面新聞記者 | 伍洋宇

界面新聞編輯 | 文姝琪

不同于兩年前的百模大戰(zhàn)時期誰都可以喊一句“沖擊AGI”,如今創(chuàng)業(yè)公司再堅稱自己以此為目標已經(jīng)不是一種主流行為——但這仍是階躍星辰要在2025年延續(xù)的敘事。

5月8日,階躍星辰創(chuàng)始人兼CEO姜大昕進行了一場技術溝通會,強調(diào)公司的技術追求并對未來技術趨勢作出判斷。對于公司從Day 1起便明確的“單模態(tài)—多模態(tài)—多模理解和生成的統(tǒng)一—世界模型—AGI(通用人工智能)”路線圖,他也予以明確了當下時刻的定位。

幾乎以低調(diào)貫穿整個成立初期的階躍星辰,從去年下半年起主動對外釋放更多聲量,開始打一場水面之上的仗。

這些聲量大都圍繞模型進展。成立兩年,公司累計發(fā)布22款基座模型,覆蓋文字、語音、圖像、視頻、音樂、推理等系列。其中有16款是多模態(tài)模型,又分屬圖像理解、視頻理解、圖像生成、視頻生成、圖像編輯、音樂生成、多模態(tài)推理等方向。

區(qū)別于行業(yè)更常見的圖像模型、音頻模型、視頻模型等不加區(qū)分的定義和命名方式,階躍星辰格外強調(diào)多模態(tài)模型“理解”與“生成”的單一屬性。這與這家公司選擇的AGI路線以及即將要突破的關鍵節(jié)點息息相關。

“從模仿學習走向強化學習,以及從多模態(tài)融合走向多模態(tài)理解與生成一體化,是當下大模型發(fā)展主要呈現(xiàn)的兩個趨勢?!苯箨块_場點明了這一主題。

第一條趨勢行業(yè)并不陌生,這是OpenAI去年9月通過o1-preview掀起的模型訓練范式革命,并且主導了接下來數(shù)月幾乎所有大模型公司的迭代方向。隨著推理模型與后訓練成為業(yè)界共識,文本模型的技術路線相對收斂,這里的格局變換已不如從前那樣日新月異。

另一條趨勢屬于多模態(tài)模型,這是一個最優(yōu)技術路徑尚不明朗的領域,階躍星辰在此押下重注。

“有一句話我在很多場合不停重復——我們認為多模態(tài)是實現(xiàn)AGI的必經(jīng)之路?!苯箨恐赋?,無論是從人類智能的多元化角度(符號智能、視覺智能、空間智能等),還是從垂直領域AI應用需求來說,大模型的多模態(tài)能力都必不可少。

這家公司進一步判斷,在多模態(tài)模型領域,理解與生成統(tǒng)一是其核心問題。

文本大模型的理解與生成已經(jīng)由GPT類模型實現(xiàn)統(tǒng)一,但在視覺領域,內(nèi)容的理解與生成仍普遍采用不同模型,例如用GPT-4o來理解圖片,但用Flux、Stable Diffusion等來生成圖片。

為什么一定要做多模理解與生成的統(tǒng)一?姜大昕解釋稱,一方面生成的內(nèi)容需要理解來控制,確保內(nèi)容具備意義和價值;另一方面,內(nèi)容的理解需要生成來監(jiān)督,也即“只有能夠生成的時候才意味著真正的理解了”。

從統(tǒng)計學角度看來,相比文本模態(tài)的低維度離散分布,視覺模態(tài)的高維度連續(xù)分布造就了模型學習更高的復雜性。

這使得文本模型的NTP(Next-Token-Prediction)還無法順暢平移為視覺模型的NFP(Next-Frame-Prediction),也意味著屬于視覺模型的可規(guī)?;斫馍梢惑w化架構尚未出現(xiàn)——這正是Transfomer架構之于GPT等文本模型的重大意義。

姜大昕坦言,視覺領域的確處在一個等待“Transformer架構”出現(xiàn)的階段,而行業(yè)也在探索多個不同方向,公司當前的目標是要自己把“Transformer”做出來。

在他看來,擁有了這一架構的視覺模型,可以效仿文本模型的路徑,順利邁入海量圖片和視頻預訓練及指令跟隨的GPT-3階段,并可能加速進入融合了強化學習的視覺時空推理階段,直至誕生世界模型。

這也是為什么他會說,“一旦視覺模型理解與生成一體化的問題被解決,之后的路線會非常順暢”。

對話階躍星辰姜大昕:Sora技術有局限,多模態(tài)理解生成一體化才是未來|界面新聞 · 科技

作為該技術目標的最新進展,階躍星辰近期發(fā)布了圖像編輯模型Step1X-Edit,多模態(tài)推理模型Step-R1-V-Mini,以及圖生視頻模型Step-Video-TI2V。姜大昕指出,Step1X-Edit實現(xiàn)了初步的理解與生成統(tǒng)一,但還可以在架構和數(shù)據(jù)上做進一步優(yōu)化和打磨。

技術路線之外,階躍星辰梳理出了一條更明確的商業(yè)化路徑。

除了此前已有的ToC(用戶)產(chǎn)品嘗試和ToB(企業(yè))合作模式,階躍星辰將在應用層重點發(fā)力的方向是AI Agent。不過相較于自己做一款Manus類的產(chǎn)品,公司選擇聚焦智能終端Agent領域,也就是與手機、汽車、機器人等終端廠商合作,以端云結合平臺的角色構建智能終端的Agent生態(tài)。

作為一家已融資數(shù)億美元的B輪創(chuàng)業(yè)公司,這場溝通會沒有大談用戶規(guī)模、商業(yè)模式、盈利能力,更多話題還是圍繞如果要實現(xiàn)AGI,公司要如何翻越既定路線上的某一座山頭。這種氛圍在當前行業(yè)熱議AI應用公司如何火熱、掙錢的喧囂襯托下,頗有一種反差。

此外,姜大昕還接受了界面新聞等媒體采訪,更細致回答了有關多模理解與生成統(tǒng)一技術路徑的相關問題,以及對模型訓練與商業(yè)化的基本判斷。

以下為姜大昕采訪實錄,略作編輯:

媒體:躍問最近改名階躍AI了,原因是什么?公司過去一年發(fā)布過一些C端產(chǎn)品,目前對這個方向有什么經(jīng)驗總結?

姜大昕:去年大模型還沒有出現(xiàn)這么強大的多模態(tài)和推理模型,我們看到的產(chǎn)品就幾類,Chatbot,AI陪伴,還有Runway、Pika這樣一些AIGC應用。那時候大家其實沒有特別明確的方向,只是因為有這樣的模型能力,所以產(chǎn)生了這樣的應用。這是產(chǎn)品探索的早期階段。

今年因為多模態(tài)能力和推理能力的進一步成熟產(chǎn)生了Agent,我們看到非常多像Deep Research或者Manus這樣的新應用。

我們的變化是想聚焦到Agent領域。而之所以改名階躍AI,是因為它要從Chatbot類產(chǎn)品向加入更多Agent能力的產(chǎn)品做轉(zhuǎn)變。

媒體:階躍的策略是超級模型+超級應用,這也是包括字節(jié)在內(nèi)很多大廠在做的事情,這種情況下,很多初創(chuàng)公司已經(jīng)放棄通用大模型了,階躍為什么還會堅持?

姜大昕:這里面分幾個層次去講,第一,現(xiàn)在這個行業(yè)趨勢還處于一個技術非常陡峭的區(qū)間。

我會很感慨,AI行業(yè)里面的發(fā)展變化確實是太快了。如果大家回到去年想一想,就覺得GPT-4是多么牛的東西,今天它都要快下架了;去年Sora剛出來的時候給大家多大的震撼,今天回過頭看,都覺得Sora有什么神奇的。而今年無論做出什么很牛的技術,可能明年回頭看會覺得微不足道。

在技術發(fā)展如此快的行業(yè)背景下,階躍肯定不愿意在這個過程中脫離主流,或者說放棄這樣的前進趨勢,還是會堅持做基礎模型的研發(fā)。

第二,從應用的角度來看,我們一直覺得應用和模型是相輔相成,模型可以決定應用的上限,應用給模型提供具體的場景和數(shù)據(jù)也非常重要。所以我們的產(chǎn)品形態(tài)隨著模型的演變動態(tài)發(fā)展,這樣的邏輯關系會一直保持下去。

媒體:在Agent這件事情上,為什么會選擇一個類似供應商的身份,而不是自己下場做一款直接ToC或者ToB的Agent產(chǎn)品?

姜大昕:這個東西很新,我們更好的選擇就是找到頭部企業(yè)合作。它們已經(jīng)有了大量的用戶和場景,我們才能嘗試這個模型究竟怎么做。

如果我們上就來做ToC,第一件事情就得是user grow(用戶增長)。所以我們先和這些企業(yè)一起合作,如果這件事情探索清楚了,至于說將來我們是不是自己做,我覺得都是有可能的。

這里還有一個很誘人的場景,就是現(xiàn)在所有的設備都是孤立的,對于一個用戶來說,他當然希望AI Agent能夠跨設備。那么這件事情應該誰來做,肯定有很多人在思考。

媒體:公司最近在算法層面更加重視理解生成一體化整合,這個想法是基于什么樣的邏輯判斷?

姜大昕:我們覺得以Sora為代表的這一代視頻生成技術,它的上限就在那里了,很難去突破。下一代突破我們認為應該是基于理解生成一體化的。

對話階躍星辰姜大昕:Sora技術有局限,多模態(tài)理解生成一體化才是未來|界面新聞 · 科技

媒體:多模態(tài)理解與生成一體化架構很重要,那影響它出現(xiàn)最關鍵的因素是算法,更高質(zhì)量的數(shù)據(jù),還是什么?

姜大昕:兩個都很重要,首先就是架構的突破,因為確實不容易。

多模態(tài)的高維連續(xù)空間,我們很難用一個自回歸架構去模擬,所以大家不得不采用Diffusion。直白的說,Diffusion就是一步弄不成,就多走幾步,因為它太復雜了。

但自回歸架構不讓你走多步,那么這兩個東西怎么能連在一起,需要一個架構性的東西,這是算法層面需要解決的問題。甚至有可能把自回歸和Diffusion結合在一起這個方向也是錯的,這里面有非常多的不確定性。

有了技術以后,第二步就是數(shù)據(jù)。所有的人工智能里面數(shù)據(jù)都非常重要,有了架構但沒有合適的數(shù)據(jù)訓練它,就如同一輛車沒有石油,你還是不能跑。

媒體:你剛剛好像有提到,OpenAI最新的GPT-4o已經(jīng)實現(xiàn)了理解與生成一體化?

姜大昕:我們只是猜測,因為它從不公布技術細節(jié)。它的做法應該是把理解和生成放在了一個模型里面,但這個東西是不是scalable(可規(guī)?;覀儾恢?。

媒體:怎么判斷它是不是scalable?

姜大昕:它肯定要做到predict next frame,或者說如果OpenAI有一天推出了一個不叫Sora的視頻模型,很可能就是做通了。

事實上去年Sora出來的時候大家都很興奮,但我們是非常失望的,因為我們覺得它的主線應該是做理解生成一體化。

回過去想也是有道理的。從多模融合一步走到理解生成一體化太難了,所以干脆兩個獨立往前走,互相促進,有點像左腳踩右腳。因為它在Sora里面也說了,它拿著GPT-4o給數(shù)據(jù)打標注。

有了生成以后是不是能夠幫助理解,可能就是需要迭代幾輪以后再到理解生成一體化,但總的方向肯定是能夠predict next frame。這個問題不解決,后面有很多問題都到不了那個程度。

媒體:多模態(tài)理解與生成一體化這個技術方向目前還沒有收斂,對標語言模型的話,它大概處在哪個發(fā)展階段?

姜大昕:應該是在Transformer的階段,Transformer是2017年出來的,GPT-1是2018年,這個架構應該早于“GPT”。

媒體:階躍目前研發(fā)的模型很多,如果下一步理解生成一體化尤為重要的話,為什么我們不把所有的力量都集中去做它

姜大昕:我們也想這樣做,但不行,因為理解與生成一體化是非常要求綜合素質(zhì)的一個考驗。首先你要理解,如果語言模型不強就談不上理解。其次你要做推理,視覺推理是視覺理解的升級。再者還有生成端,這也必須得做。

所以不是我們不夠focus(專注),要做這件事,就必須要做到所有條線能力都非常強,組合起來去探索它的路徑。

媒體:解決理解與生成一體化這個問題之后,你認為視覺模型應該達到一個什么樣的狀態(tài)?

姜大昕:你給它一個電影的開頭,它能夠一直往下編,并且大家認為還挺有道理的,連續(xù)、符合邏輯、符合物理規(guī)律。如果它能持續(xù)這樣做下去,這至少可以說明它的預訓練做成了。

相關推薦: