IT之家 2 月 12 日消息,字節(jié)跳動旗下生成式人工智能創(chuàng)作平臺即夢 AI 今日宣布正式接入最新視頻生成模型 Seedance 2.0 與圖片生成模型 Seedream 5.0 Lite。
IT之家附官方對兩款模型的具體介紹如下:
Seedance 2.0:全新多模態(tài)創(chuàng)作體驗
從開始使用文字和首 / 尾幀「講故事」的那天起,我們就想做出一個真正聽得懂你表達的視頻模型?,F(xiàn)在,它真的來了!
Seedance 2.0 能夠支持圖像、視頻、音頻、文本四種模態(tài)輸入,表達方式更豐富,生成也更可控。
你可以用一張圖來說明自己想要的畫面風(fēng)格,用一個視頻指定角色的動作和鏡頭的變化,用一段音頻表達預(yù)期的節(jié)奏和氛圍……“提示詞”開始不再局限于文字,創(chuàng)作過程變得更自然、更高效,也更像真正的“導(dǎo)演”。
你可以用一張圖,開啟一個故事。也可以參考視頻的動作、運鏡,實現(xiàn)一個全新的內(nèi)容。
Seedance 2.0 支持最多 9 張圖片、3 段視頻(總時長不超過 15 秒)、3 段音頻(MP3 格式,總時長不超過 15 秒)以及自然語言輸入,混合輸入總上限是 12 個文件,最長可生成 15 秒時長。
這次升級中,“參考能力”是最大亮點:參考圖像可精準捕捉畫面構(gòu)圖、角色細節(jié);參考視頻支持鏡頭語言、復(fù)雜的動作節(jié)奏、創(chuàng)意特效的復(fù)刻;視頻支持平滑延長與銜接,可按用戶提示生成連續(xù)鏡頭,不止生成,還能“接著拍”;編輯能力同步增強,支持對已有視頻進行角色更替、刪減、增加。
我們知道,視頻創(chuàng)作的目標從來不僅是“生成”,更是對表達的控制。Seedance 2.0 不僅是支持多模態(tài)輸入,更將提供一種真正可控的創(chuàng)作方式。
需要提醒大家的是,Seedance 2.0 目前暫不支持輸入含真人的照片 / 視頻作為主體參考。如果你也想要在故事“出鏡”,可以使用即夢 APP,錄制本人形象與聲音完成真人校驗后,就能創(chuàng)建屬于自己的數(shù)字人分身,還可以授權(quán)朋友使用你的分身,一起在無盡的故事里出鏡。
Seedream 5.0 Lite:會上網(wǎng)的圖片生成模型
圖片模型也有新的突破。最新上線的 Seedream 5.0 Lite 具備聯(lián)網(wǎng)實時檢索、編輯精準可控、智能邏輯推理三大亮點,讓每一個需求都能及時響應(yīng)、準確呈現(xiàn)。在即夢圖片生成功能選擇“圖片 5.0 Preview”即可體驗該模型。
模型首次支持檢索生圖功能,讓創(chuàng)作與熱門資訊話題深度綁定。
生成圖像與輸入文本的契合度也大幅提升,能夠更加精準地響應(yīng)文本細節(jié)指令;在影視海報、社媒封面、營銷海報、多字傳單、藝術(shù)海報、知識圖譜、UI 設(shè)計等場景均有較大提升。
Seedream 5.0 Lite 內(nèi)置生物科學(xué)、建筑設(shè)計等垂直行業(yè)專業(yè)知識庫,更懂現(xiàn)實規(guī)律,支持復(fù)雜的邏輯推演與多步推理需求。
即夢 AI 將首發(fā)上線 Seedream 5.0 Lite 2K、4K 清晰度,目前還有專屬限時免費活動:即日起至 2 月 28 日,2K 生圖全員限免,4K 生圖會員限免。
廣告聲明:文內(nèi)含有的對外跳轉(zhuǎn)鏈接(包括不限于超鏈接、二維碼、口令等形式),用于傳遞更多信息,節(jié)省甄選時間,結(jié)果僅供參考,IT之家所有文章均包含本聲明。