あなたが今まで見たことがあるならスターウォーズDisney Plusでのショー、あなたがハイテクスタートアップの仕事に精通している可能性があります再シー、あなたがそれを実現するかどうか。ウクライナ企業のAI駆動の音声クローニングプラットフォームが提供されましたマーク・ハミルの退去したボーカルパフォーマンス両方でマンダロリアンそしてボバ・フェットの本、およびまだ正当化されたキャラクターの場合Obi-Wan Kenobi。 LucasfilmはRespeeheerに今のところそのキャラクターの名前を秘密にしておくように頼みました。そして、非常に多くのフランチャイズの退役軍人がシリーズに戻ってきているので、潜在的な候補者の不足は確かにありません。
Polygonは、Respeeheer CEOのAlex Serdiukと話をして、多くのファンにとってSacrilegeに隣接するプロセスをよりよく理解しました。テクノロジーを使用して、スターウォーズのサガの最も象徴的なキャラクターの1人（または2人）の完全にオーダーメイドのパフォーマンスを作成しました。最初から、Serdiukはプラットフォーム自体の背後にある人間の要素を強調しています。 「当社のテクノロジーとサービスにより、特定の音声のデジタルコピーを作成し、他の人がこの声で話すことを可能にすることができます」と彼は説明します。 「したがって、[スタジオ]は、いくつかのプロジェクトの声を拡大し、声を上げ、さらには声を復活させることさえできます。」
したがって、「人工知能」や「音声クローニング」などの用語で思い起こされる精神的イメージからはほど遠いことです。サウンドエンジニアは、オーディオファイルを吐き出すコンピューターアルゴリズムを介したサウンドエンジニアランニングラインのラインラインです。ドライブ。その間ダース・ベイダー自身がそうかもしれませんウクライナのスタートアップが彼の声を供給している場合（そして、「もし」と言ったことを覚えておいてください）、キャラクターの声の本質はまだ非常に肉と血です。
「AIはまだありません。それが存在するとは思いません。ターンキーベースで使用して、作成したいパフォーマンスを作成できます。 […]その人間の声がすべての変曲、アクセント、スピーチのスタイル、AIが作成するのが得意ではないスピーチのスタイルを与えているため、別の人間の声が必要です。彼は次のように付け加えます。「私たちのシステムには入力のパフォーマンスが必要なので、たとえば老化している人や他の誰かが作ることができます。 […]すべてのパフォーマンスが必要です。すべての演技は、「ソースボイス」と呼ばれるものから、変換を行います。」
さらに、Respeeheerのパイプラインにより、Hamillのような俳優は実際のセットと同じように異なるテイクを記録することができます。これは、Jon FavreauのようなショーランナーやDeborah Chowのようなディレクターからのメモに基づいて、後に最後に調整できます。
「スタジオプロジェクトや映画では、各ラインに何千ものテイクを記録する可能性があります。つまり、それらすべてを[若い声に]変換し、送り返し、さまざまなモデルをトレーニングしていたために異なるバージョンを送信する必要があることを意味します。異なるセットアップで」と彼は言います。 「そして、時には創造的な期待に応える必要があります。[ラインリーディング]をそのようにもう少し聞こえるようにしてもらえますか？そして、私たちは彼らが尋ねるようにもう少し聞こえるようにするために働きます。」
したがって、非伝統的な手段を通じて伝統的なパフォーマンスを再現するという究極の目的です。マンダロリアンまたはボバ・フェットの本、まるでハミルの線が何らかの形で1983年のセットから直接送信されたかのようにスターウォーズ：ジェダイの帰り？ 「目標は、昨日、ターゲットの声自体によってスタジオで録音されたように聞こえることです」とセルディウクは同意します。
もちろん、視聴者が生成する合成されたパフォーマンスは、たとえ視聴者が完全に確信していなくても、人工的に聞こえるように、Respeeheerのような音声クローンテクノロジーにはまだリスクがあります。 Serdiukは、Hamillの廃止された声が「方法で、より良い」と聞こえることさえ認めていますボバ・フェットの本それよりもマンダロリアン、俳優のボーカルをエミュレートするために、RespeeheerのAIモデルがどのように「訓練された」方法が大幅に改善されたことのおかげです。同時に、CEOはまた、多くのファンが20代を描くために使用される視覚効果について不平を言っている一方で、すぐに指摘しています。ルーク・スカイウォーカーマンダロリアンフィナーレ、ジェダイのマスターの声も合成されていることに気づいた人はほとんどいませんでした。ディズニーギャラリー数ヶ月後に特別な「作成」。
Serdiukは、ハミルが説得力のある廃止されたボーカルで言及していると述べていますマンダロリアンそしてボバ・フェットの本Lucasfilmから受け取ったレガシー資産の品質を考慮して、さらに印象的でした。 「その[データ]は非常に古いので、テープから何かがありました。古いADR録音、ビデオゲームの何かがあります」とSerdiukは回想します。 「そして、このデータをモデルでトレーニングして、現代の生産に適合する出力品質を生成できるようにする必要があります。 [パフォーマーの声]の老化や復活を伴う多くのプロジェクトでは、データの不足とデータの品質がサウンドを良くするという点で追加のブロッカーを導入するため、これは主な課題かもしれません。」
Respeeheer CEOは、Lucasfilmのような業界のヘビー級が彼らが行う仕事を受け入れてきた今、これらのデータ関連のハードルを克服することは価値があると主張しています。 「[私たち]は、サウンドエンジニアやハリウッドスタジオを通過し、大きなプロダクションに着陸するレベルで合成スピーチ[プラットフォーム]を構築するというアイデアから始めました。ですから、彼らが私たちのサウンドを受け入れるとき、彼らが私たちが生み出すことができたサウンドについて何か良いことを言うとき、そしてそれは非常に複雑で激しい技術的挑戦であり、それが実際の録音と区別できないレベルで合成されたスピーチをする - そのような場合、それは本当に私たちを励まし、私たちが成長するのを助けます」と彼は言います。
Serdiukに、音声クローニングテクノロジーの受け入れが高まっていることは、スタジオがもはや才能のあるサウンドアリックに故人の俳優の代役を呼びかけていないことを意味するかもしれないと言いました。たとえば、そうではありませんローグワン：スターウォーズの物語- ヘンリーが最近の声を模倣した人グランドモフタルキンとしてピータークッシング- 今、Respeeher's Deskに自動的に着陸するプロジェクトのようなものですか？必ずしもそうではないが、セルディウクによると、リスファーの音声クローンテクノロジーは、映画製作者の自由にあるいくつかの実行可能なオプションの1つと見なされている。
「業界で物事がどのように起こるべきかについては常に異なるビジョンがあり、ファンはそれらがどのように起こるべきかについて異なる考えを持っています。 [Respeeher]は、担当または裁判官[どのアプローチが最適]を判断するのに非常に適しているとは言いません」と彼は言います。 Serdiukはまた、Lucasfilmが死んだ俳優の声を再現するためにRespeeheerに呼びかけた場合、会社はその俳優の不動産の承認を得てのみそうすることを明確にしました。そして、Serdiukの反応は今のところ音声アクターを簡単に設定しますが、Lucasfilmが繰り返しRespeecherの顧客であるという事実は、スタートアップが音声クローニングテクノロジーのために真剣に行っていることを示唆しています。
確かに、Serdiukはすでに、俳優の声を除去する俳優の声を超えて広がるRespeeheerの未来のビジョンを持っていますが、彼は会社が計画したことが映画製作者の創造的な視野を拡大し、それらを縮小しないことを断言しています。彼はテクノロジーを民主化することについて語って、小規模な映画やテレビスタジオ、ビデオゲーム開発者がそれを使用して予算をさらに拡大できるようにします。彼はまた、Respeeherのプラットフォームの画期的なヘルスケアアプリケーションについて熱心に語っています。これは、同社が再び演奏できるように声を失った声優と協力している1つの例を引用しています。
しかし、未来に目を向けることは、SerdiukがRespeeheerが遠く離れた銀河である銀河で特定の宇宙オペラセットの一部であることの意味を見失っているという意味ではありません。 「それは特別なものです。つまり、あなたはこの物語の一部です。スターウォーズはハリウッドにとってかなりの地位を壊したとかなり言うことができますよね？彼らは、技術的な観点から、最初から業界を混乱させてきました。彼らの映画のやり方は例外的です。ですから、それらの人々と協力して彼らから学ぶことができることは大きな名誉です。」
