Your AI-powered
creative studio
AIを活用したクリエイティブなツールサービスを提供するCaptionsのご紹介です。
Captionsとは?
「Captions」は、シリコンバレーを拠点とするベンチャーキャピタル(VC)が開発した動画編集のAIアプリケーションです。
The next generation of storytelling is here
日本語を英語に自動で吹き替え
Captionsアプリで日本語を英語に吹き替えが自動で生成することが可能です。
小阪大魔王さんことあの有名なピコ太郎が吹き替えしていますので参考にしてみてください。
勝手に英語に訳して吹き替えしてくれるアプリやばい。 pic.twitter.com/mxoNONQJHN
— 古坂大魔王 (@kosaka_daimaou) June 26, 2023
勝手に英語に訳して吹き替えしてくれるアプリやばい。 pic.twitter.com/mxoNONQJHN
— 古坂大魔王 (@kosaka_daimaou) June 26, 2023
Captionsの主なサービス内容
1.AI Script writer:
- アイディアからスタートし、ライターのブロックを解消します。
- クリエイティブなプロセスを簡素化し、ストーリーテリングを新しい次元に引き上げます。
3. Recording & production:
- AI Avatar, Camera & Teleprompter, AI Voiceover & Voice cloning などの機能を提供。
- AIを使用して、話し言葉の中のフィラーワードや一時停止を自動的にトリミング。
- 背景ノイズの除去や音声の強化。
- ポストプロダクションでカメラを見るようにアイコンタクトを修正。
- 録音された音声のミスを一タップで修正。
- ポストプロダクションで音声の内容を編集するためのリップムーブメントの変更
4. Visual editing:
- AI Director が自動的にズームやトランジションを追加してビデオを魅力的に保ちます。
- 任意のビデオのカラーグレードをコピーするか、プロンプトで独自のものを生成。
- テキストプロンプトだけで完璧なカラースキームを生成。
- ビデオの背景を自動的に削除。
- 一タップでオブジェクトをカットアウト。
5. Sound:
- AI Music を使用して、完璧なトラックでムードを設定。
- さまざまなサウンドエフェクトで生き生きとさせる。
High Quality Camera
Speak Any Language with Lipdub
Lipdubでどんな言語でも話せるようになる
出典: By Dwight Churchill
Lipdubでどんな言語でも話せるように!
「Lipdub」は、あなたが望むどんな言語でも話すことができる新しい機能です。Captionsは、今年初めにAIを使った吹き替え機能をリリースして、すぐに世界中から注目を浴びました。この機能の使い道は予想以上に多く、さらに進化させる必要があると感じました。
Captionsのチームは、この新しい「Lipdub」というモデルに取り組んできました。このモデルは、品質や性能、使い道の面で初めてのものです。フランスやインド、スペインなどの市場でテストを始め、その後、いくつかのUGC(ユーザー生成コンテンツ)クリエイターと共同でテストを拡大しました。
UGCクリエイターたちは、ブランドとの契約に多言語オプションを追加できることに気づきました。その結果、彼らが制作した動画を、追加の作業なしで、どの市場でも使用できるようになりました。これは、クリエイターや広告主にとって大きな変革となりました。
実際に、Lipdubを使用した広告コンテンツは、元の英語のコンテンツよりもはるかに高いパフォーマンスを示しました。5つの言語(フランス語、ヒンディー語、スペイン語、イタリア語、ポルトガル語)でのテストでは、平均コストが54%も低くなりました。
特に、フランス語の広告は、Lipdubを使用して、元の広告に比べて購読のコストが67%も低くなりました。
Captionsのチームは、Lipdubが世界中の人々にどれだけの可能性をもたらすかを楽しみにしています。そして、そのためのスタンドアロンアプリをリリースする予定です。このアプリは、すでに予約が可能です。
How Zach Mitchem Scaled His Audience to 33k+ Followers Using Captions
Zach MitchemさんがCaptionsを使ってフォロワーを33k以上に増やした方法
ZachさんのTikTokでのフォロワー増加の秘訣
Zachさんは、TikTokやYouTubeでの動画作成を通じて、他のクリエイターがフォロワーを増やす方法を教えています。彼は「We Are Video Makers」というグループの創設者でもあります。
彼が「Captions」というアプリを使って動画の視聴数を増やした方法について、以下のポイントが挙げられます:
- 字幕の重要性:
- TikTokやInstagramなどの縦型動画では、80%の人が音声をオフにして動画を見ています。そのため、字幕がないと多くの人が動画をスキップしてしまいます。
- 字幕のスタイルがブランドを作る:
- Zachさんの動画には特徴的な明るい青の背景があり、それが彼のトレードマークとなっています。同様に、字幕のスタイルも彼の動画の特徴となっています。
- 「Captions」の利点:
- Zachさんは、動画作成の初期から手動で字幕を付けることはしていませんでした。しかし、彼は「Captions」を発見し、そのアプリの使いやすさやプロフェッショナルな見た目に魅了されました。
- フォロワーの増加:
- Zachさんは、TikTokに参加してから数百の動画を作成しましたが、本格的な注目を集めるまでには時間がかかりました。しかし、「Captions」を使い始めてから、彼のフォロワーは急激に増加しました。