階躍星辰CEO姜大昕：多模態是實現AGI的必經之路

《科創板日報》5月9日訊（記者 張洋洋）“我認同‘多模態卷王’這個名字，我們的多模態佈局是非常完整的，有視頻、圖像、音樂、語音，有多條線，每條戰線都是經過了幾個月或者是半年的積累纔出來一個新的迭代。”

今日，在一場小範圍的媒體採訪當中，當被問及如何平衡模型的性能與迭代頻率時，階躍星辰CEO姜大昕做出如是解答。

在AI大模型“六小虎”當中，階躍星辰一直是以多模態特色著稱。成立2年累計發佈22款自研基座模型，研發保持月更速度，幾乎平均每個月都會發布一款基礎大模型。也因此，這家公司被業內戲稱爲“多模態卷王”。

多模態的一大難點是融合過程中不能損失單個模態的性能，尤其是不能降智。在姜大昕看來，階躍採用原生多模的方式，在多模融合技術上有自己的經驗和認知。

目前，階躍星辰的模型覆蓋文字、語音、圖像、視頻、音樂、推理等全系列，其中，16款是多模態模型，佔比超7成。多模態模型矩陣覆蓋圖像理解、視頻理解、圖像生成視頻生成、圖像編輯、音樂生成，多模態推理全系列。

▍“多模態是實現AGI的必經之路”

之所以堅持多模態的道路並且全線佈局，姜大昕認爲是AGI初心使然，多模態是實現AGI的必經之路。

在接受《科創板日報》等媒體採訪時，他表示，AGI 對標的是人類的智能，人的智能是多元化的，每個人除了有來自語言的符號智能，還包括視覺智能、空間智能和運動智能等等，這些智能是需要通過視覺和其他模態來進行學習的。在多模態領域任何一個方向出現短板，都會延緩實現 AGI 的進程。

除了AGI本身的標準和定義，如果從應用的角度來看，不管是做垂直領域的應用還是做C端的應用，多模態都是必不可少的。用戶是需要AI能聽、能看、能說，這樣AI才能更好地理解用戶所處的環境，並且和用戶進行更爲自然的交流。

“目前的大模型公司有能力去全面自研預訓練模型，並構成這樣一個模型矩陣的，即使是大公司也不多，更不用說是初創公司了，這是階躍星辰的一個特色，也是我們的一個優勢。”姜大昕說。

當下，階躍星辰的多模態模型商業應用也正在快速落地。大量頭部企業及大量AI應用開發者正在接入其多模態模型，調用量持續快速增長。據開發者反饋，階躍多模態模型用戶付費率最高。

以頭部茶飲品牌茶百道爲例，其已與階躍星辰達成深度合作，通過後者多模態技術，探索大模型技術在茶飲行業的應用，進行智能巡檢、AIGC營銷，打造新型數字化門店生產運營方式，爲用戶帶來更加安全、便捷和豐富的消費體驗。目前全國數千家茶百道門店已經接入階躍星辰Step-1V多模態理解大模型，平均每天上百萬杯茶飲在大模型智能巡檢的守護下送到消費者手中。

網紅AI應用“胃之書”也基於階躍星辰多模態能力，幫助用戶以更快捷有趣的方式記錄飲食，開發者趙純想公開表示曾對國內大部分模型做過AB測試，最終發現階躍星辰多模態模型用戶付費率最高。

▍發力智能終端Agent

眼下，隨着大模型市場格局暫時進入穩定階段，AI廠商漸漸找到適合各自的路線深耕。階躍星辰也將重心放在了Agent方向，充分發揮多模態基礎大模型優勢，發力智能終端Agent。

爲什麼會選擇智能終端Agent作爲發力方向？姜大昕告訴《科創板日報》記者，其實很多的終端是用戶的感知和體驗的延伸，Agent能去理解用戶所處的環境和任務的上下文，更好地幫助人類去完成任務。階躍在其中扮演的角色就是提供一個平臺，能夠圍繞着這樣平臺去構建智能終端Agent生態。

在智能終端上，階躍星辰也選取了幾個重要的終端——手機、車、具身智能和IoT，目前已經與各個方向的頭部企業展開了深度的合作。

面向智能汽車，階躍星辰與吉利汽車集團、千里科技深化技術合作，進一步加強技術合作夥伴關係，共同推動“AI+車”的深度融合。

面向手機終端，階躍星辰與OPPO等手機廠商深度共建，將Agent技術深度集成到手機中，共同打造更好的交互體驗。基於階躍星辰多模態技術，OPPO先後推出了“一鍵問屏”、“一鍵全能搜”功能，應用在Find X8、Find N5等旗艦機型中。

面向具身智能，階躍星辰與智元機器人、原力靈機達成戰略合作，共同探索AI+具身機器人應用場景；面向IoT終端，階躍星辰通過生態開放的方式，與包括TCL在內的一系列IoT平臺和設備廠商緊密協作，推動設備間的智能化升級和體驗的無縫連接。

截至目前，在階躍星辰多模態技術的支持下，數百萬部手機用戶獲得了全新的AI服務體驗。

“大模型領域發展非常快，在你追我趕、輪番發佈的背後，我們其實可以感受到一個趨勢，就是‘追求智能的上限’，我們認爲追求智能的上限仍然是當下最重要的一件事。”姜大昕說，階躍星辰目前的狀態是堅持基礎大模型的研發，追求AGI是公司的初心，這一點不會改變。

姜大昕認爲，在當前的競爭格局中，階躍星辰差異化的特點就是多模態的能力，不僅眼下很多模態在業界的性能是領先的，而且也在積極地探索前沿的方向，這裡還存在着非常巨大的機會。在應用的層面，階躍星辰也走了一條差異化的路線，攜手合作夥伴在智能終端Agent這個方向上發力，最終形成一個從模型到Agent，從雲側到端側的生態體系。