亚洲第一无码精品久久久播放,99精品国产自在现线10页,国产伦精品一区二区三区小说,国产免费久久久久久久无码浪潮,91av视频精品一区二区三区

24小時故障咨詢電話 點擊右邊熱線,在線解答故障撥打:400-186-5909
新澳跟香港2025天天開彩資料,探索創(chuàng)新科技助力智慧城市建設(shè)新路徑_對話階躍星辰姜大昕:Sora技術(shù)有局限,多模態(tài)理解生成一體化才是未來|界面新聞 · 科技

新澳跟香港2025天天開彩資料,探索創(chuàng)新科技助力智慧城市建設(shè)新路徑

全國報修熱線:400-186-5909

更新時間:

400服務(wù)電話:400-186-5909(點擊咨詢)
新澳跟香港2025天天開彩資料,科技賦能未來生活新體驗
新澳跟香港2025天天開彩資料,探索創(chuàng)新科技助力智慧城市建設(shè)新路徑








新澳跟香港2025天天開彩資料,2025新澳門精準(zhǔn)正版免費藏寶圖:(1)400-186-5909(點擊咨詢)(2)400-186-5909(點擊咨詢)








新澳跟香港2025天天開彩資料,2025年澳門今晚開獎號碼(1)400-186-5909(點擊咨詢)(2)400-186-5909(點擊咨詢)




新澳跟香港2025天天開彩資料,新澳2025最新資料大全
新澳跟香港2025天天開彩資料,新澳門最精準(zhǔn)四不像正版








維修前后對比照片,直觀展示維修效果:在維修前后,我們會拍攝對比照片,直觀展示維修前后的變化,讓客戶清晰看到維修效果。








維修服務(wù)客戶案例分享,增強信心:在官網(wǎng)或社交媒體上分享成功維修案例和客戶好評,增強新客戶對服務(wù)的信心。








新澳跟香港2025天天開彩資料,新澳2025最精準(zhǔn)正最精準(zhǔn)看








新澳跟香港2025天天開彩資料,維修服務(wù)電話全國服務(wù)區(qū)域:








焦作市馬村區(qū)、陽江市陽春市、蚌埠市龍子湖區(qū)、昆明市東川區(qū)、涼山昭覺縣、宣城市績溪縣








寶雞市陳倉區(qū)、楚雄大姚縣、攀枝花市米易縣、重慶市黔江區(qū)、阜陽市潁州區(qū)、鞍山市臺安縣








本溪市桓仁滿族自治縣、揭陽市惠來縣、淮安市金湖縣、重慶市北碚區(qū)、廣西百色市右江區(qū)、眉山市東坡區(qū)、新余市分宜縣、贛州市于都縣、隴南市文縣、揭陽市揭東區(qū)








杭州市富陽區(qū)、濰坊市高密市、汕頭市濠江區(qū)、十堰市丹江口市、海南共和縣、大理永平縣








鎮(zhèn)江市揚中市、銅仁市沿河土家族自治縣、中山市橫欄鎮(zhèn)、駐馬店市西平縣、吉林市龍?zhí)秴^(qū)、寶雞市眉縣、麗水市縉云縣








哈爾濱市依蘭縣、樂山市峨眉山市、揭陽市揭西縣、呂梁市孝義市、晉城市城區(qū)








衡陽市雁峰區(qū)、中山市板芙鎮(zhèn)、贛州市全南縣、濰坊市昌樂縣、寶雞市太白縣、寧夏銀川市西夏區(qū)








屯昌縣楓木鎮(zhèn)、岳陽市云溪區(qū)、牡丹江市林口縣、天津市薊州區(qū)、江門市臺山市、寧夏中衛(wèi)市中寧縣








新余市分宜縣、昆明市五華區(qū)、白沙黎族自治縣牙叉鎮(zhèn)、錦州市黑山縣、常德市石門縣、南昌市新建區(qū)、長沙市雨花區(qū)








十堰市竹溪縣、朝陽市龍城區(qū)、上饒市萬年縣、涼山布拖縣、瀘州市合江縣、五指山市南圣








內(nèi)蒙古阿拉善盟阿拉善左旗、鹽城市建湖縣、長治市沁縣、安康市寧陜縣、遵義市紅花崗區(qū)、瓊海市博鰲鎮(zhèn)








大同市新榮區(qū)、海北剛察縣、佳木斯市樺川縣、臨沂市莒南縣、淮北市杜集區(qū)、內(nèi)蒙古興安盟阿爾山市








重慶市渝北區(qū)、鐵嶺市昌圖縣、合肥市廬江縣、武漢市蔡甸區(qū)、平頂山市舞鋼市








內(nèi)蒙古烏蘭察布市集寧區(qū)、益陽市南縣、昌江黎族自治縣叉河鎮(zhèn)、宜賓市翠屏區(qū)、昆明市官渡區(qū)、宜賓市敘州區(qū)、贛州市龍南市、漢中市洋縣、安陽市殷都區(qū)








阜新市彰武縣、淮南市八公山區(qū)、贛州市安遠(yuǎn)縣、隨州市隨縣、內(nèi)蒙古烏蘭察布市卓資縣








七臺河市茄子河區(qū)、張掖市肅南裕固族自治縣、濟(jì)南市鋼城區(qū)、煙臺市萊州市、達(dá)州市開江縣








黑河市孫吳縣、鐵嶺市鐵嶺縣、信陽市新縣、廣西玉林市容縣、銅川市宜君縣、晉中市壽陽縣、重慶市南岸區(qū)、漢中市南鄭區(qū)








大理賓川縣、牡丹江市綏芬河市、廣西玉林市北流市、銅陵市義安區(qū)、無錫市惠山區(qū)








瓊海市長坡鎮(zhèn)、江門市恩平市、東莞市石排鎮(zhèn)、鷹潭市貴溪市、黔南貴定縣、廣西百色市田林縣、重慶市忠縣、遂寧市船山區(qū)、平?jīng)鍪腥A亭縣








昭通市綏江縣、廣州市海珠區(qū)、臨高縣和舍鎮(zhèn)、重慶市合川區(qū)、??谑旋埲A區(qū)、麗江市玉龍納西族自治縣、牡丹江市愛民區(qū)、牡丹江市穆棱市、邵陽市洞口縣








北京市通州區(qū)、黔南三都水族自治縣、運城市鹽湖區(qū)、平頂山市衛(wèi)東區(qū)、恩施州來鳳縣、延安市延川縣、鐵嶺市清河區(qū)、重慶市巫山縣








濮陽市范縣、贛州市大余縣、河源市東源縣、信陽市新縣、無錫市梁溪區(qū)、哈爾濱市通河縣、蘭州市城關(guān)區(qū)、金華市金東區(qū)








海南貴德縣、溫州市龍港市、安康市平利縣、永州市江永縣、廣西百色市田陽區(qū)、海南同德縣、衢州市江山市








南平市浦城縣、西寧市湟中區(qū)、天水市麥積區(qū)、襄陽市樊城區(qū)、萬寧市萬城鎮(zhèn)、阿壩藏族羌族自治州茂縣、三門峽市義馬市、臨高縣調(diào)樓鎮(zhèn)








十堰市鄖陽區(qū)、雙鴨山市嶺東區(qū)、九江市德安縣、焦作市孟州市、常德市漢壽縣








蘭州市城關(guān)區(qū)、龍巖市漳平市、蘭州市皋蘭縣、延邊琿春市、阜新市清河門區(qū)、渭南市白水縣








雙鴨山市友誼縣、臨汾市襄汾縣、重慶市南岸區(qū)、楚雄祿豐市、儋州市大成鎮(zhèn)、隴南市宕昌縣、濟(jì)南市歷下區(qū)、榆林市橫山區(qū)、北京市石景山區(qū)、瀘州市納溪區(qū)
400服務(wù)電話:400-186-5909(點擊咨詢)
新澳跟香港2025天天開彩資料,2025新澳門天天開獎免費查
新澳跟香港2025天天開彩資料,優(yōu)質(zhì)資源免費獲取指南








新澳跟香港2025天天開彩資料,最新政策解讀助力企業(yè)創(chuàng)新發(fā)展:(1)400-186-5909(點擊咨詢)(2)400-186-5909(點擊咨詢)








新澳跟香港2025天天開彩資料,2025新澳門最精準(zhǔn)免費大全(1)400-186-5909(點擊咨詢)(2)400-186-5909(點擊咨詢)




新澳跟香港2025天天開彩資料,科技新突破助力環(huán)保產(chǎn)業(yè)升級
新澳跟香港2025天天開彩資料,探索創(chuàng)新科技助力智慧城市建設(shè)新路徑








維修服務(wù)個性化維修計劃,量身定制:根據(jù)客戶家電的具體情況和客戶需求,量身定制個性化維修計劃,確保維修方案的最優(yōu)化。








長期合作保障:我們致力于與客戶建立長期合作關(guān)系,提供持續(xù)服務(wù)支持。








新澳跟香港2025天天開彩資料,新澳2025最精準(zhǔn)正精準(zhǔn)








新澳跟香港2025天天開彩資料,維修服務(wù)電話全國服務(wù)區(qū)域:








慶陽市正寧縣、臨滄市云縣、湛江市麻章區(qū)、黔南羅甸縣、鞍山市臺安縣、杭州市富陽區(qū)、太原市陽曲縣、黃岡市團(tuán)風(fēng)縣、內(nèi)蒙古烏蘭察布市商都縣、龍巖市新羅區(qū)








河源市源城區(qū)、肇慶市廣寧縣、濱州市無棣縣、重慶市九龍坡區(qū)、大慶市肇源縣








阜新市新邱區(qū)、清遠(yuǎn)市英德市、云浮市云安區(qū)、綏化市望奎縣、安康市旬陽市、運城市河津市








云浮市新興縣、云浮市羅定市、懷化市鶴城區(qū)、荊門市沙洋縣、寧夏吳忠市鹽池縣








雞西市城子河區(qū)、佛山市高明區(qū)、玉樹稱多縣、運城市新絳縣、遵義市習(xí)水縣、成都市彭州市、葫蘆島市連山區(qū)、廣元市劍閣縣








濰坊市坊子區(qū)、福州市倉山區(qū)、甘南碌曲縣、廣安市鄰水縣、隴南市文縣、甘南合作市、韶關(guān)市仁化縣








太原市古交市、雅安市天全縣、安慶市太湖縣、呂梁市離石區(qū)、廣西桂林市灌陽縣、西安市碑林區(qū)、嘉興市秀洲區(qū)








樂東黎族自治縣志仲鎮(zhèn)、漳州市南靖縣、日照市東港區(qū)、重慶市江北區(qū)、佳木斯市樺川縣、齊齊哈爾市建華區(qū)、綏化市安達(dá)市








陽泉市城區(qū)、天津市靜海區(qū)、商丘市柘城縣、淄博市周村區(qū)、果洛久治縣








武漢市硚口區(qū)、長春市寬城區(qū)、江門市恩平市、白沙黎族自治縣打安鎮(zhèn)、金華市永康市、定西市安定區(qū)、盤錦市興隆臺區(qū)、舟山市嵊泗縣








溫州市永嘉縣、三亞市吉陽區(qū)、吉安市永新縣、重慶市璧山區(qū)、果洛甘德縣、晉城市澤州縣、沈陽市沈北新區(qū)、內(nèi)蒙古鄂爾多斯市康巴什區(qū)、三明市三元區(qū)、內(nèi)蒙古赤峰市林西縣








海北剛察縣、徐州市云龍區(qū)、三明市永安市、內(nèi)蒙古巴彥淖爾市臨河區(qū)、哈爾濱市香坊區(qū)、普洱市瀾滄拉祜族自治縣、韶關(guān)市翁源縣、海西蒙古族烏蘭縣、吉安市永新縣








文昌市東閣鎮(zhèn)、湘西州鳳凰縣、蘭州市安寧區(qū)、西寧市湟源縣、伊春市鐵力市








上饒市廣信區(qū)、宜春市樟樹市、茂名市電白區(qū)、泉州市德化縣、定安縣龍河鎮(zhèn)








澄邁縣仁興鎮(zhèn)、天津市東麗區(qū)、焦作市孟州市、海南貴德縣、菏澤市成武縣、瀘州市江陽區(qū)、鄭州市二七區(qū)








成都市龍泉驛區(qū)、菏澤市鄆城縣、常德市桃源縣、阜新市海州區(qū)、潮州市饒平縣、漳州市平和縣








內(nèi)蒙古通遼市開魯縣、阜陽市太和縣、撫州市資溪縣、黔南惠水縣、臺州市黃巖區(qū)、重慶市豐都縣、成都市蒲江縣、遂寧市射洪市、寧夏銀川市西夏區(qū)








安陽市龍安區(qū)、酒泉市肅北蒙古族自治縣、聊城市高唐縣、中山市港口鎮(zhèn)、漯河市源匯區(qū)、南通市如皋市、北京市海淀區(qū)、涼山會理市








儋州市新州鎮(zhèn)、韶關(guān)市曲江區(qū)、南平市政和縣、長沙市開福區(qū)、寧夏銀川市興慶區(qū)、澄邁縣永發(fā)鎮(zhèn)、云浮市云安區(qū)








呂梁市柳林縣、榆林市橫山區(qū)、哈爾濱市呼蘭區(qū)、杭州市富陽區(qū)、三明市清流縣、沈陽市康平縣、儋州市東成鎮(zhèn)、臨汾市洪洞縣、營口市站前區(qū)、內(nèi)蒙古興安盟阿爾山市








牡丹江市西安區(qū)、昌江黎族自治縣海尾鎮(zhèn)、東營市墾利區(qū)、玉樹玉樹市、洛陽市嵩縣、酒泉市肅北蒙古族自治縣、泉州市洛江區(qū)








牡丹江市西安區(qū)、內(nèi)蒙古通遼市科爾沁區(qū)、宿州市靈璧縣、本溪市桓仁滿族自治縣、廣西來賓市忻城縣、廣西南寧市隆安縣、黔南三都水族自治縣、營口市西市區(qū)








自貢市榮縣、蘇州市昆山市、果洛瑪沁縣、黑河市愛輝區(qū)、內(nèi)蒙古赤峰市寧城縣、運城市河津市、涼山布拖縣、廣西桂林市象山區(qū)、十堰市茅箭區(qū)、玉溪市江川區(qū)








蕪湖市繁昌區(qū)、九江市武寧縣、忻州市定襄縣、衡陽市衡東縣、茂名市電白區(qū)、合肥市巢湖市、畢節(jié)市赫章縣、臺州市椒江區(qū)、大興安嶺地區(qū)松嶺區(qū)、岳陽市君山區(qū)








儋州市那大鎮(zhèn)、泰安市新泰市、汕頭市濠江區(qū)、鐵嶺市銀州區(qū)、鹽城市大豐區(qū)、泰州市海陵區(qū)、漢中市佛坪縣








重慶市萬州區(qū)、南陽市西峽縣、澄邁縣老城鎮(zhèn)、杭州市建德市、廣西貴港市覃塘區(qū)、榆林市米脂縣








撫州市樂安縣、內(nèi)蒙古巴彥淖爾市五原縣、泉州市晉江市、廣西梧州市藤縣、莆田市仙游縣

對話階躍星辰姜大昕:Sora技術(shù)有局限,多模態(tài)理解生成一體化才是未來|界面新聞 · 科技

界面新聞記者 | 伍洋宇

界面新聞編輯 | 文姝琪

不同于兩年前的百模大戰(zhàn)時期誰都可以喊一句“沖擊AGI”,如今創(chuàng)業(yè)公司再堅稱自己以此為目標(biāo)已經(jīng)不是一種主流行為——但這仍是階躍星辰要在2025年延續(xù)的敘事。

5月8日,階躍星辰創(chuàng)始人兼CEO姜大昕進(jìn)行了一場技術(shù)溝通會,強調(diào)公司的技術(shù)追求并對未來技術(shù)趨勢作出判斷。對于公司從Day 1起便明確的“單模態(tài)—多模態(tài)—多模理解和生成的統(tǒng)一—世界模型—AGI(通用人工智能)”路線圖,他也予以明確了當(dāng)下時刻的定位。

幾乎以低調(diào)貫穿整個成立初期的階躍星辰,從去年下半年起主動對外釋放更多聲量,開始打一場水面之上的仗。

這些聲量大都圍繞模型進(jìn)展。成立兩年,公司累計發(fā)布22款基座模型,覆蓋文字、語音、圖像、視頻、音樂、推理等系列。其中有16款是多模態(tài)模型,又分屬圖像理解、視頻理解、圖像生成、視頻生成、圖像編輯、音樂生成、多模態(tài)推理等方向。

區(qū)別于行業(yè)更常見的圖像模型、音頻模型、視頻模型等不加區(qū)分的定義和命名方式,階躍星辰格外強調(diào)多模態(tài)模型“理解”與“生成”的單一屬性。這與這家公司選擇的AGI路線以及即將要突破的關(guān)鍵節(jié)點息息相關(guān)。

“從模仿學(xué)習(xí)走向強化學(xué)習(xí),以及從多模態(tài)融合走向多模態(tài)理解與生成一體化,是當(dāng)下大模型發(fā)展主要呈現(xiàn)的兩個趨勢?!苯箨块_場點明了這一主題。

第一條趨勢行業(yè)并不陌生,這是OpenAI去年9月通過o1-preview掀起的模型訓(xùn)練范式革命,并且主導(dǎo)了接下來數(shù)月幾乎所有大模型公司的迭代方向。隨著推理模型與后訓(xùn)練成為業(yè)界共識,文本模型的技術(shù)路線相對收斂,這里的格局變換已不如從前那樣日新月異。

另一條趨勢屬于多模態(tài)模型,這是一個最優(yōu)技術(shù)路徑尚不明朗的領(lǐng)域,階躍星辰在此押下重注。

“有一句話我在很多場合不停重復(fù)——我們認(rèn)為多模態(tài)是實現(xiàn)AGI的必經(jīng)之路?!苯箨恐赋?,無論是從人類智能的多元化角度(符號智能、視覺智能、空間智能等),還是從垂直領(lǐng)域AI應(yīng)用需求來說,大模型的多模態(tài)能力都必不可少。

這家公司進(jìn)一步判斷,在多模態(tài)模型領(lǐng)域,理解與生成統(tǒng)一是其核心問題。

文本大模型的理解與生成已經(jīng)由GPT類模型實現(xiàn)統(tǒng)一,但在視覺領(lǐng)域,內(nèi)容的理解與生成仍普遍采用不同模型,例如用GPT-4o來理解圖片,但用Flux、Stable Diffusion等來生成圖片。

為什么一定要做多模理解與生成的統(tǒng)一?姜大昕解釋稱,一方面生成的內(nèi)容需要理解來控制,確保內(nèi)容具備意義和價值;另一方面,內(nèi)容的理解需要生成來監(jiān)督,也即“只有能夠生成的時候才意味著真正的理解了”。

從統(tǒng)計學(xué)角度看來,相比文本模態(tài)的低維度離散分布,視覺模態(tài)的高維度連續(xù)分布造就了模型學(xué)習(xí)更高的復(fù)雜性。

這使得文本模型的NTP(Next-Token-Prediction)還無法順暢平移為視覺模型的NFP(Next-Frame-Prediction),也意味著屬于視覺模型的可規(guī)?;斫馍梢惑w化架構(gòu)尚未出現(xiàn)——這正是Transfomer架構(gòu)之于GPT等文本模型的重大意義。

姜大昕坦言,視覺領(lǐng)域的確處在一個等待“Transformer架構(gòu)”出現(xiàn)的階段,而行業(yè)也在探索多個不同方向,公司當(dāng)前的目標(biāo)是要自己把“Transformer”做出來。

在他看來,擁有了這一架構(gòu)的視覺模型,可以效仿文本模型的路徑,順利邁入海量圖片和視頻預(yù)訓(xùn)練及指令跟隨的GPT-3階段,并可能加速進(jìn)入融合了強化學(xué)習(xí)的視覺時空推理階段,直至誕生世界模型。

這也是為什么他會說,“一旦視覺模型理解與生成一體化的問題被解決,之后的路線會非常順暢”。

對話階躍星辰姜大昕:Sora技術(shù)有局限,多模態(tài)理解生成一體化才是未來|界面新聞 · 科技

作為該技術(shù)目標(biāo)的最新進(jìn)展,階躍星辰近期發(fā)布了圖像編輯模型Step1X-Edit,多模態(tài)推理模型Step-R1-V-Mini,以及圖生視頻模型Step-Video-TI2V。姜大昕指出,Step1X-Edit實現(xiàn)了初步的理解與生成統(tǒng)一,但還可以在架構(gòu)和數(shù)據(jù)上做進(jìn)一步優(yōu)化和打磨。

技術(shù)路線之外,階躍星辰梳理出了一條更明確的商業(yè)化路徑。

除了此前已有的ToC(用戶)產(chǎn)品嘗試和ToB(企業(yè))合作模式,階躍星辰將在應(yīng)用層重點發(fā)力的方向是AI Agent。不過相較于自己做一款Manus類的產(chǎn)品,公司選擇聚焦智能終端Agent領(lǐng)域,也就是與手機(jī)、汽車、機(jī)器人等終端廠商合作,以端云結(jié)合平臺的角色構(gòu)建智能終端的Agent生態(tài)。

作為一家已融資數(shù)億美元的B輪創(chuàng)業(yè)公司,這場溝通會沒有大談用戶規(guī)模、商業(yè)模式、盈利能力,更多話題還是圍繞如果要實現(xiàn)AGI,公司要如何翻越既定路線上的某一座山頭。這種氛圍在當(dāng)前行業(yè)熱議AI應(yīng)用公司如何火熱、掙錢的喧囂襯托下,頗有一種反差。

此外,姜大昕還接受了界面新聞等媒體采訪,更細(xì)致回答了有關(guān)多模理解與生成統(tǒng)一技術(shù)路徑的相關(guān)問題,以及對模型訓(xùn)練與商業(yè)化的基本判斷。

以下為姜大昕采訪實錄,略作編輯:

媒體:躍問最近改名階躍AI了,原因是什么?公司過去一年發(fā)布過一些C端產(chǎn)品,目前對這個方向有什么經(jīng)驗總結(jié)?

姜大昕:去年大模型還沒有出現(xiàn)這么強大的多模態(tài)和推理模型,我們看到的產(chǎn)品就幾類,Chatbot,AI陪伴,還有Runway、Pika這樣一些AIGC應(yīng)用。那時候大家其實沒有特別明確的方向,只是因為有這樣的模型能力,所以產(chǎn)生了這樣的應(yīng)用。這是產(chǎn)品探索的早期階段。

今年因為多模態(tài)能力和推理能力的進(jìn)一步成熟產(chǎn)生了Agent,我們看到非常多像Deep Research或者M(jìn)anus這樣的新應(yīng)用。

我們的變化是想聚焦到Agent領(lǐng)域。而之所以改名階躍AI,是因為它要從Chatbot類產(chǎn)品向加入更多Agent能力的產(chǎn)品做轉(zhuǎn)變。

媒體:階躍的策略是超級模型+超級應(yīng)用,這也是包括字節(jié)在內(nèi)很多大廠在做的事情,這種情況下,很多初創(chuàng)公司已經(jīng)放棄通用大模型了,階躍為什么還會堅持?

姜大昕:這里面分幾個層次去講,第一,現(xiàn)在這個行業(yè)趨勢還處于一個技術(shù)非常陡峭的區(qū)間。

我會很感慨,AI行業(yè)里面的發(fā)展變化確實是太快了。如果大家回到去年想一想,就覺得GPT-4是多么牛的東西,今天它都要快下架了;去年Sora剛出來的時候給大家多大的震撼,今天回過頭看,都覺得Sora有什么神奇的。而今年無論做出什么很牛的技術(shù),可能明年回頭看會覺得微不足道。

在技術(shù)發(fā)展如此快的行業(yè)背景下,階躍肯定不愿意在這個過程中脫離主流,或者說放棄這樣的前進(jìn)趨勢,還是會堅持做基礎(chǔ)模型的研發(fā)。

第二,從應(yīng)用的角度來看,我們一直覺得應(yīng)用和模型是相輔相成,模型可以決定應(yīng)用的上限,應(yīng)用給模型提供具體的場景和數(shù)據(jù)也非常重要。所以我們的產(chǎn)品形態(tài)隨著模型的演變動態(tài)發(fā)展,這樣的邏輯關(guān)系會一直保持下去。

媒體:在Agent這件事情上,為什么會選擇一個類似供應(yīng)商的身份,而不是自己下場做一款直接ToC或者ToB的Agent產(chǎn)品?

姜大昕:這個東西很新,我們更好的選擇就是找到頭部企業(yè)合作。它們已經(jīng)有了大量的用戶和場景,我們才能嘗試這個模型究竟怎么做。

如果我們上就來做ToC,第一件事情就得是user grow(用戶增長)。所以我們先和這些企業(yè)一起合作,如果這件事情探索清楚了,至于說將來我們是不是自己做,我覺得都是有可能的。

這里還有一個很誘人的場景,就是現(xiàn)在所有的設(shè)備都是孤立的,對于一個用戶來說,他當(dāng)然希望AI Agent能夠跨設(shè)備。那么這件事情應(yīng)該誰來做,肯定有很多人在思考。

媒體:公司最近在算法層面更加重視理解生成一體化整合,這個想法是基于什么樣的邏輯判斷?

姜大昕:我們覺得以Sora為代表的這一代視頻生成技術(shù),它的上限就在那里了,很難去突破。下一代突破我們認(rèn)為應(yīng)該是基于理解生成一體化的。

對話階躍星辰姜大昕:Sora技術(shù)有局限,多模態(tài)理解生成一體化才是未來|界面新聞 · 科技

媒體:多模態(tài)理解與生成一體化架構(gòu)很重要,那影響它出現(xiàn)最關(guān)鍵的因素是算法,更高質(zhì)量的數(shù)據(jù),還是什么?

姜大昕:兩個都很重要,首先就是架構(gòu)的突破,因為確實不容易。

多模態(tài)的高維連續(xù)空間,我們很難用一個自回歸架構(gòu)去模擬,所以大家不得不采用Diffusion。直白的說,Diffusion就是一步弄不成,就多走幾步,因為它太復(fù)雜了。

但自回歸架構(gòu)不讓你走多步,那么這兩個東西怎么能連在一起,需要一個架構(gòu)性的東西,這是算法層面需要解決的問題。甚至有可能把自回歸和Diffusion結(jié)合在一起這個方向也是錯的,這里面有非常多的不確定性。

有了技術(shù)以后,第二步就是數(shù)據(jù)。所有的人工智能里面數(shù)據(jù)都非常重要,有了架構(gòu)但沒有合適的數(shù)據(jù)訓(xùn)練它,就如同一輛車沒有石油,你還是不能跑。

媒體:你剛剛好像有提到,OpenAI最新的GPT-4o已經(jīng)實現(xiàn)了理解與生成一體化?

姜大昕:我們只是猜測,因為它從不公布技術(shù)細(xì)節(jié)。它的做法應(yīng)該是把理解和生成放在了一個模型里面,但這個東西是不是scalable(可規(guī)?;覀儾恢?。

媒體:怎么判斷它是不是scalable?

姜大昕:它肯定要做到predict next frame,或者說如果OpenAI有一天推出了一個不叫Sora的視頻模型,很可能就是做通了。

事實上去年Sora出來的時候大家都很興奮,但我們是非常失望的,因為我們覺得它的主線應(yīng)該是做理解生成一體化。

回過去想也是有道理的。從多模融合一步走到理解生成一體化太難了,所以干脆兩個獨立往前走,互相促進(jìn),有點像左腳踩右腳。因為它在Sora里面也說了,它拿著GPT-4o給數(shù)據(jù)打標(biāo)注。

有了生成以后是不是能夠幫助理解,可能就是需要迭代幾輪以后再到理解生成一體化,但總的方向肯定是能夠predict next frame。這個問題不解決,后面有很多問題都到不了那個程度。

媒體:多模態(tài)理解與生成一體化這個技術(shù)方向目前還沒有收斂,對標(biāo)語言模型的話,它大概處在哪個發(fā)展階段?

姜大昕:應(yīng)該是在Transformer的階段,Transformer是2017年出來的,GPT-1是2018年,這個架構(gòu)應(yīng)該早于“GPT”。

媒體:階躍目前研發(fā)的模型很多,如果下一步理解生成一體化尤為重要的話,為什么我們不把所有的力量都集中去做它

姜大昕:我們也想這樣做,但不行,因為理解與生成一體化是非常要求綜合素質(zhì)的一個考驗。首先你要理解,如果語言模型不強就談不上理解。其次你要做推理,視覺推理是視覺理解的升級。再者還有生成端,這也必須得做。

所以不是我們不夠focus(專注),要做這件事,就必須要做到所有條線能力都非常強,組合起來去探索它的路徑。

媒體:解決理解與生成一體化這個問題之后,你認(rèn)為視覺模型應(yīng)該達(dá)到一個什么樣的狀態(tài)?

姜大昕:你給它一個電影的開頭,它能夠一直往下編,并且大家認(rèn)為還挺有道理的,連續(xù)、符合邏輯、符合物理規(guī)律。如果它能持續(xù)這樣做下去,這至少可以說明它的預(yù)訓(xùn)練做成了。

相關(guān)推薦: