Blog
前DeepMind團隊發布影片生成工具Haiper：挑戰Sora，致力於解決「恐怖谷效應」問題
前DeepMind團隊發布影片生成工具Haiper：挑戰Sora，致力於解決「恐怖谷效應」問題
March 6, 2024
重點摘要：
- OpenAI推出Sora模型，促使AI動畫影片生成市場愈發熱門。前DeepMind員工發布了「Haiper」，一款影片生成工具，其底層搭載自家AI模型。
- Haiper專注於影片生成，吸引了1380萬美元的種子輪融資。使用者可在網站上透過輸入文本提示免費生成影片，並享有一些功能限制。
- Haiper計劃打造核心影片生成模型，以供其他人使用。公司重視解決影片生成中的「恐怖谷效應」問題，目前已有約20名員工，積極擴大團隊。
新聞內文：
AI動畫影片生成是一個熱門市場，這得益於OpenAI上個月推出了Sora模型。兩位DeepMind的前員工Yishu Miao和Ziyu Wang公開發布了他們的影片生成工具「Haiper」，其底層搭載了自己的AI模型。Miao曾在TikTok的全球信任與安全團隊工作，而Wang曾在DeepMind和 Google擔任研究科學家，他們於2021年開始合作開發該公司，並於2022年正式註冊成立。
這兩位專家在機器學習方面具有豐富經驗，並開始致力於使用神經網路進行3D重建的問題。Miao在TechCrunch的通話中提到，經過對影片數據的訓練後，他們發現影片生成是一個比3D重建更加迷人的問題。這就是為什麼Haiper在大約六個月前開始專注於影片生成。
Haiper在由Octopus Ventures主導的種子輪融資中籌集了1380萬美元，5Y Capital也參與其中。在此之前，像Phil Blunsom和Nando de Freitas這樣的天使投資者幫助該公司在2022年4月籌集了540萬美元的預種子輪融資。
影片生成服務
使用者可以前往Haiper的網站，透過輸入文本提示開始免費生成影片。但有一些限制。您只能生成一個兩秒的高清影片和一個稍低品質的影片，長度最長為四秒。
該網站還具有像是將您的圖像動畫化以及以不同風格重新繪製您的影片等功能。此外，該公司還在努力引入一些功能，例如延長影片的能力。
Miao表示，該公司的目標是保持這些功能的免費，以建立一個社群。他指出，在該新創公司的旅程中，現在考慮圍繞影片生成建立訂閱產品還「言之過早」。然而，它已與京東等公司合作，探索商業應用案例。
我們使用了原始Sora提示之一來生成一個示範影片：「幾隻巨型絨毛猛獁象透過雪地踏行，它們的長毛輕輕地在風中飄動，遠處是被白雪覆蓋的樹木和壯麗的雪山，午後的光線下，飄逸的雲和遠處的太陽營造出溫暖的光芒，低角度的鏡頭視角令人驚嘆，捕捉到了這隻大型毛茸茸的哺乳動物，照片極具美感，景深明顯」。
打造核心影片模型
儘管Haiper目前專注於消費者面向的網站，但該公司希望打造一個核心的影片生成模型，以供他人使用。該公司尚未公開有關該模型的任何細節。
Miao表示，他們已私下與一群開發人員聯繫，試用其封閉的API。他期待開發人員的反饋對公司迅速換代模型非常重要。Haiper也考慮過未來開源其模型，讓人們探索不同的使用案例。
該CEO認為，目前解決「恐怖谷效應」問題在影片生成中很重要（這是一種現象，當人們看到AI生成的人類般形象時會引起怪異的感覺）。
他說：「我們不是在解決內容和風格領域的問題，而是試圖解決基本問題，比如 AI生成的人類在行走或雪落時的外觀」。
該公司目前約有20名員工，正在積極招聘多個工程和市場營銷方面的職位。
前方的競爭
OpenAI最近發布的Sora可能是目前Haiper最受歡迎的競爭對手。然而，還有其他參與者，如由Google和Nvidia支持的Runway，後者已籌集了逾2.3億美元的資金。Google和Meta也擁有自己的影片生成模型。在去年，Stability AI宣布了研究預覽中的Stable Diffusion Video模型。
Octopus Ventures的合夥人Rebecca Hunt認為，在未來三年，Haiper將必須打造一個強大的影片生成模型，以在這個市場上取得差異化。
她在電子郵件中告訴 TechCrunch：「實際上，只有少數幾個人有能力實現這一點；這也是我們想支持Haiper團隊的原因之一。一旦模型達到超越不真實谷底，並反映出現實世界及其所有物理現象的水準，將出現無限的應用場景」。
儘管投資者正在尋求投資於AI驅動的影片生成新創公司，但他們也認為這項技術仍有很大的改進空間。
「a16z」的Justine Moore去年寫道：「感覺AI影片處於GPT-2的水準。過去一年取得了巨大進步，但在日常消費者每天都在使用這些產品之前，仍有一段路要走。影片的『ChatGPT時刻』將何時到來？」。
新聞原址： https://techcrunch.com/2024/03/05/competition-in-ai-video-generation-heats-up-as-deepmind-alums-unveil-haiper/