AB
AiBoss
project

abogen - 同期字幕の生成をサポートするオープンソースのAIテキスト読み上げツール。

Abogenは、ePub、PDF、またはテキストファイルを高音質の音声に高速変換し、同期字幕を生成できる強力なテキスト読み上げツールです。Kokoro-82Mモデルをベースにしたabogenは、複数の言語と音声スタイルに対応しています。

アボゲンとは何ですか?

Abogenは、ePub、PDF、テキストファイルを高音質オーディオに高速変換し、同期字幕を生成できる強力なテキスト読み上げツールです。Kokoro-82Mモデルをベースに、複数の言語と音声スタイルに対応しています。簡単な設定で、音声速度の調整、音声の選択、字幕スタイルの設定が可能です。音声ミキサー、キューモード、チャプターマーキングなどの機能を備え、バッチ処理やパーソナライズされたコンテンツ作成を容易にします。オーディオブックやソーシャルメディアのナレーションなど、様々なコンテンツ制作に適しており、コンテンツクリエイターにとって強力なアシスタントとなります。

アボゲンの主な機能

  • テキスト読み上げePub、PDF、またはプレーンテキストファイルを高音質のオーディオファイルに変換でき、WAV、FLAC、MP3、OPUS、M4Bなど、複数の出力形式をサポートしています。
  • 同期字幕生成音声生成と同時に、音声と同期した字幕ファイル(SRTやASS形式など)を生成できるため、ビデオコンテンツの作成に便利です。
  • 音声カスタマイズ音声ミキサー機能を使用すると、ユーザーはさまざまな音声モデルを組み合わせて、自分好みの音声スタイルを作成し、カスタム設定として保存できます。
  • バッチ処理キューモードをサポートしており、ユーザーは複数のファイルをキューに追加して、順番にバッチ処理を行うことができます。各ファイルには個別の設定が可能です。
  • 章管理ePubファイルとPDFファイルにチャプターマーカーを自動的に追加し、オーディオファイルをチャプターごとに保存できるため、管理や再生が容易になります。
  • メタデータのサポートメタデータをサポートするプレーヤーで使いやすくするために、生成された音声ファイルにメタデータ(タイトル、著者、年など)を追加してください。
  • 多言語対応さまざまなユーザーのニーズを満たすため、複数の言語(アメリカ英語、イギリス英語、スペイン語、フランス語、日本語など)をサポートしています。
  • ユーザーフレンドリーなインターフェースグラフィカルインターフェースを備えているため、ユーザーはファイルをドラッグ&ドロップしたり、設定を調整したりすることで、システムを簡単に操作できます。

アボゲンの技術原則

  • ココロモデルをベースにAbogenは、テキスト音声変換にKokoro-82Mモデルを使用しています。Kokoroは、自然で流暢な音声を生成する高度な音声合成モデルであり、複数の言語や話し方に対応しています。
  • 音声ミキシング技術Abogenは音声ミキサーをベースに、ユーザーが様々な音声モデルをブレンドし、各モデルの重みを調整して、独自の音声スタイルを作成できるように設計されています。これにより、ユーザーはニーズに合わせてパーソナライズされた音声を生成することが可能です。
  • 字幕同期技術音声合成処理において、abogenは音声と同期した字幕ファイルを生成できます。これは、音声合成中に各単語または文の開始タイムスタンプと終了タイムスタンプを記録することで実現され、字幕と音声の完全な一致を保証します。
  • クロスプラットフォーム対応AbogenはWindows、Mac、Linuxシステムに対応しています。Pythonおよび関連ライブラリ(PyQt5など)を使用してクロスプラットフォームのグラフィカルインターフェースを提供するため、ユーザーはさまざまなオペレーティングシステムで便利に利用できます。

アボゲンのプロジェクト住所

  • プロジェクト公式サイト:https://pypi.org/project/abogen/
  • GitHubリポジトリ:https://github.com/denizsafak/abogen

Abogenのアプリケーションシナリオ

  • オーディオブック制作電子書籍(ePub、PDF)を音声ファイル(MP3、M4Bなど)に素早く変換できるため、ユーザーはいつでもどこでも書籍を聴くことができ、音声スタイルのカスタマイズにも対応しています。
  • ソーシャルメディア動画制作Instagram、YouTube、TikTokなどの動画向けに、自然なナレーションと同期された字幕(SRT、ASS形式)を生成し、コンテンツの魅力とプロフェッショナリズムを高めます。
  • 教育と学習支援学習教材(PDF、電子書籍など)を音声に変換するため、学生は通勤中や運動中に学習しやすくなります。また、多言語音声合成にも対応しており、語学学習にも役立ちます。
  • ポッドキャストコンテンツ制作テキストコンテンツを効率的に音声に変換してポッドキャスト制作に活用でき、ユーザーは声のスタイルや話す速度を自由に選択して、自分好みのポッドキャストを作成できます。
  • 視覚障害者の支援視覚障害のある人向けにテキストを読み上げることで、情報へのアクセスを容易にし、生活や学習の利便性を向上させます。