VideoPoet

大型语言模型

VideoPoet是由 Google Research 於 2023 年開發的一款大型語言模型,主要用於影片製作。[1][2][3][4] 該模型能將靜態影像轉換為動畫。[5] VideoPoet 支援文字、影像和影片作為輸入,並能將這些輸入轉換成多種格式。[4] 該模型於 2023 年 12 月 19 日正式公開。[1]VideoPoet 使用自我迴歸模型

VideoPoet
"一隻狗在電影院裡吃爆米花"
"一隻戴著帽子、太陽眼鏡和皮夾克的泰迪熊正在打鼓"
由該模型生成的範例影片來自於文字
開發者Google
首次發布2024年2月8日,​9個月前​(2024-02-08
類型大型語言模型

參考資料

  1. ^ 1.0 1.1 Krithika, K. L. Google Unveils VideoPoet, a New LLM for Video Generation. Analytics India Magazine. 2023-12-20 [2024-04-29] (美國英語). 
  2. ^ Kondratyuk, Dan; Yu, Lijun; Gu, Xiuye; Lezama, José; Huang, Jonathan; Hornung, Rachel; Adam, Hartwig; Akbari, Hassan; Alon, Yair; Birodkar, Vighnesh; Cheng, Yong; Chiu, Ming-Chang; Dillon, Josh; Essa, Irfan; Gupta, Agrim; Hahn, Meera; Hauth, Anja; Hendon, David; Martinez, Alonso; Minnen, David; Ross, David; Schindler, Grant; Sirotenko, Mikhail; Sohn, Kihyuk; Somandepalli, Krishna; Wang, Huisheng; Yan, Jimmy; Yang, Ming-Hsuan; Yang, Xuan; Seybold, Bryan; Jiang, Lu. VideoPoet: A Large Language Model for Zero-Shot Video Generation. December 21, 2023. arXiv:2312.14125  [cs.CV]. 
  3. ^ Google has introduced VideoPOET breaking new ground in coherent video generation. Gizmochina. December 21, 2023. 
  4. ^ 4.0 4.1 VideoPoet. Google Research. [2024-04-29] (英語). 
  5. ^ Franzen, Carl. Google’s new multimodal AI video generator VideoPoet looks incredible. VentureBeat. December 20, 2023. 

外部連結