05/08/2026 13:51
【AI】字節跳動發布SeedRealtime音視頻全雙工大模型,已上線豆包
字節跳動今日正式發布原生音視頻全雙工大模型SeedRealtime,並宣布該模型已在豆包App全量上線。用戶將豆包更新至最新版本後,可通過「打電話」功能進入視頻通話界面,體驗實時音視頻AI交互。
SeedRealtime採用統一端到端架構,原生融合音頻、視頻和文本,支持模型在連續多模態信息流中同步完成感知、理解、決策與表達,實現「邊看、邊聽、邊說」的實時交互。與傳統依賴ASR、視覺模型、TTS等多個模塊串聯的級聯系統相比,該模型減少了多模塊帶來的延遲和信息損耗,也不再依賴外部VAD進行輪次判斷。
字節表示,SeedRealtime實現了三項核心能力,包括音視頻聯合理解、主動交互能力以及更自然的對話節奏。模型能夠結合畫面、聲音和時序信息理解用戶意圖,例如利用視覺信息消除同音詞歧義、識別手勢和指代對象,並持續跟蹤畫面變化,在目標出現時主動提醒用戶。
《經濟通通訊社5日專訊》
SeedRealtime採用統一端到端架構,原生融合音頻、視頻和文本,支持模型在連續多模態信息流中同步完成感知、理解、決策與表達,實現「邊看、邊聽、邊說」的實時交互。與傳統依賴ASR、視覺模型、TTS等多個模塊串聯的級聯系統相比,該模型減少了多模塊帶來的延遲和信息損耗,也不再依賴外部VAD進行輪次判斷。
字節表示,SeedRealtime實現了三項核心能力,包括音視頻聯合理解、主動交互能力以及更自然的對話節奏。模型能夠結合畫面、聲音和時序信息理解用戶意圖,例如利用視覺信息消除同音詞歧義、識別手勢和指代對象,並持續跟蹤畫面變化,在目標出現時主動提醒用戶。
《經濟通通訊社5日專訊》
獨家優惠【etnet x 環球海產】用戶專享全場95折,特價貨品更可折上折。立即使用優惠代碼【ETN1WWS】,選購五星級酒店級海鮮► 立即瀏覽
-
上一篇
《中國房產》深圳7月二手豪宅簽約量達近六年峰值,千萬級房源均價按月升逾5% 05/08/2026 13:54
-
下一篇
《A股行情》滬綜指午後升1.5%,深成指、創業板均漲逾2% 05/08/2026 13:35
-
路透:三星電子及SK海力士測試中微公司芯片製造設備,擬用於中國工廠 05/08/2026 14:31
-
【AI】越疆發布新一代具身全棲人形機器人DOBOT LUMO 05/08/2026 14:02
-
《A場新股》宇樹科技開啟IPO初步詢價,預估發行價約104元,市值超400億 05/08/2026 14:00
-
《中國要聞》中國成功發射東方慧眼高光譜01、02星,搭載「綠水青山大模型」 05/08/2026 12:02
-
《A股焦點》劍橋科技高管回應美國光模塊禁令:滿足原產地認定者應可規避 05/08/2026 12:00