「AI孫燕姿」の後、またブラックテクノロジーが登場した。
最近、トップストリーム歌手のテイラー・スウィフト（中国のファンは彼女を「かび」と呼んでいる）が流暢な共通語を操る動画が各SNS上で広まっている。動画の中で、カビは中国語を話す時、正確にポイントを押さえて、音色は母国語を話す時の音色と似ていて、口の形さえ合うことができます。
それだけでなく、ネット上の人気動画には中国語を話すビーン、エマ・ワトソン、英語を話す蔡明も登場した。中英互換のほか、海外では英語を日本語など他の6カ国語に翻訳しようと試みている人もおり、効果は同様だ。
どうやって?
これらのビデオにはAIビデオツールHeyGenが使用されていることが分かった。クリエイターはビデオをアップロードし、翻訳する言語を選択するだけで、自動翻訳、音色調整、口の形のマッチングを実現することができます。
しかし、HeyGenは完璧ではありません。ビデオ字幕にはクリエイターの追加が必要です。また、意図的に比較すると、ビデオ人物が別の言語を話す際に感情の還元度が不足しているというクリエイターもいます。
これはこのツールの人気を阻むことはできない。HeyGenは現在有料版を発売しているが、無料で1分間の動画を試用し、生成することができ、7000本の動画が並んでやっと翻訳が完了したというクリエイターもいる。
バックプレイヤーは中国製品からオンラインで7カ月間利益を上げている
HeyGenはビデオクリエイターのためのツールであり、翻訳機能はすべてではありません。大雑把に見ると、ビデオ制作を中心に、HeyGenの機能は非常に強力で、キャスターの顔の入れ替え、文字の中継放送、仮想キャスターの作成、音声クローンの作成などが含まれている。
デジタルヒューマン作成は、その主推論の機能です。HeyGenによると、カメラやスタジオ、俳優がなくても、一般人はこのツールで動画を作ることができるという。ユーザーは2分間の小さな動画をアップロードするだけで、ジェスチャー、顔、口の形のような「細かいボディーランゲージ」でも調整できるように、本物と同じデジタル人間を作ることができます。
Joshua Xuは自ら出陣し、自分のイメージと一致するデジタル人間を発売したことがある。
現在、その顧客は英偉達、アマゾン、volvoなどを含み、製品は300種類以上の音声、40種類以上の言語をサポートし、100+を超えるデジタル人素材とテンプレートを提供し、広告、電子商取引、ニュースなどはすべてそろっており、自分でPPT生成を編集することもできる。
天眼調査のデータによると、詩雲科学技術はすでにメタセコイア中国、真格基金などのベンチャー投資家から累計1000万近くの投資を受けている。
注目すべきは、HeyGenは利益を得たAIアプリケーションでもある。このツールは非常に細分化された料金支払い方案を制定し、個人版/企業版を分類し、バウチャーかバウチャーかを選択し、追加料金で使用するプラグインを提供することができ、一般ユーザーにとって、バウチャー年版の価格は平坦化され、毎月24ドル/月かかる。
同社は今年4月末に発表したブログで、製品のオンライン化（2022年7月発売）から178日が経過し、同社の年間経常収入（ARR、annual recurring revenue）は100万ドルに達し、オンライン化から7カ月で黒字になったことを明らかにした。
Joshua Xu氏は、HeyGenは数百万件のビデオデータを蓄積しており、ビデオ垂直領域の大モデル（LLM）を作ることも考えていると述べている。