「聴く」名作文庫

Youtubeチャンネル「聴く」名作文庫の動画を自動生成するためのリポジトリ。 https://www.youtube.com/c/%E8%81%B4%E3%81%8F-%E5%90%8D%E4%BD%9C%E6%96%87%E5%BA%AB

使い方

プロジェクトの作成

準備
- pip install requests
青空文庫でbook_idを調べる
実行
- python create_project.py {book_id}
- ./projects/{作者名}/{作品名}/ に novel.txt と config.json が生成される
config.json は適宜調整する
- special_description
  - 記載すると概要欄の一番上に、一行あけてこの文字列が記載される。
  - 夏目漱石/こころ 参照
- title_yomi
  - titleそのままだと読み間違うときに追加すると、こっちを読んでくれる。
  - 江戸川乱歩/お勢登場 参照
- music
  - この項目を消したら、BGM無し版となる。
  - file
    - ./materials/musics/ からの相対PATHでmp3ファイルを指定する。
  - author, url
    - 概要欄に反映される。
- cover
  - musicと同様。消すと表紙が画像なしとなる。
  - file
    - ./materials/covers/ からの相対PATHで幅1280, 高さ720のpngファイルを指定する。
- low_quarity_intermediate_video_file
  - これにTrueを指定すると動画の中間ファイルが圧縮データになる。無圧縮でディスクサイズが足りない場合にのみ使用する。
  - デフォルトはFalse
- part_configuration_settings
  - 同じものがconsts.jsonにもある。config.jsonが優先。
  - split_priorities
    - それぞれのパラメータにペナルティ数を設定。最小は0で小さい方が分割されやすい。
    - first_page, part, chapter, manual_chapter, blank_line, coincidentally_newpage
  - optimal_duration_in_sec
    - 各パートがこの時間にできるだけ近くなるようにする。(これより短い場合は長い場合よりペナルティが4倍になる)
  - time_penalty_coef
    - この値を大きくすると、時間ペナルティの影響が大きくなり、結合ペナルティの影響が小さくなる。
  - penalty_chapters(リスト)
    - manual_chapters とは逆で、指定した文字列で始まるchapterはpartわけしないようにする。
  - lump
    - trueにすると、パート分けされない。その場合optimal_duration_in_secとtime_penalty_coefは無視される。
- clearpage_on_blank_line
  - デフォルトはTrue。Trueの場合、chapter中の空行で改ページを入れる。
  - azテキストのフォーマットにより空行は多発するような場合はFalseにする。あるいはaz2texのblank_lineの正規表現を直す。
- tex_replaces
  - 表組みなど特殊すぎる表現をまるまる置換するために使用できる
  - 江戸川乱歩/二銭銅貨 参照
- manual_chapters
  - 一つの動画の時間が長過ぎるときなどに、chapterを指定箇所の前で切ることが可能
  - 太宰治/人間失格 参照
  - コマンド等はエスケープが必要。(\ => \\\\, '{' => '\{')
- force_only_here_rubies
  - 変な読み方が不要なところまで拡散する場合に強制的にonly_hereにできる。
  - 例: {"kanji": "近", "ruby": "ちかづ"}
- special_rubies
  - 読み間違い等を調整できる。他の本にも通用する読み間違いは ./src/consts.json に記述する。
  - 読み間違いは完成した動画や、voice_checkのアウトプットで確認できる
  - 入力形式は↓を実行すると対話で出力できる
    - docker run --rm -it -v $PWD:/work lp-python-mecab /bin/sh -c "python -u ruby.py"
- primary_special_rubies
  - special_rubies と同様、ただしspecial_rubiesよりふりがなが優先されるが、こちらはふりがなより優先される。
  - 芥川竜之介/羅生門 参照
- chapter_interval
  - デフォルト値はconsts.jsonで設定されているが、build_chapter_moives.py で IndexError: list index out of range が発生する場合に値を調整するとエラーを回避できる場合がある。
  - 夏目漱石/こころ 参照
- ssml_final_overall_replaces
  - 同じものがconsts.jsonにもある。両方をマージしたものが使われる。
  - ssml作成処理の最後に、SSMLの一文を任意の一文に置換する。
  - カギカッコとかの兼ね合いとか、短い文字を置換したい場合に使用。
consts.json
- ignore_rubies
  - 普通の感じにふりがなしてあることにより発音が変になる場合にそのふりがなを無視できる。
  - 例: {"kanji": "覗", "ruby": "のぞ"}
画像がある場合は、./projects/{作者名}/{作品名}/images に画像をいれて、縦書きに対応するため↓のコマンドで90度回転させる
- docker run -v $PWD/projects/{作者名}/{作品名}/images:/images --rm -it rendertoolbox/imagemagick bash -c "mogrify -rotate -90 /images/*.png"

動画作成

ローカルPCにはdockerとjqをインストールしておく
予めAWSのクレデンシャルを取得しておく。必要なPolicyは、AmazonPollyFullAccess, AmazonS3FullAccess
- ./certs/aws_credentials.json に配置
  - 形式: {"aws_access_key_id": "hoge", "aws_secret_access_key": "hoge"}

./batch.sh {作者名}/{作品名}を実行
- 1つのpartのみをbuildする場合
  - ./batch.sh -r {part_id} {作者名}/{作品名}
- 複数のpartをbuildする場合
  - ./batch.sh -r {start_part_id}:{end_part_id} {作者名}/{作品名}
- 途中で止める場合
  - ./batch.sh -s {止める箇所} {作者名}/{作品名}
    - tex, pdf, ssml, voice, timekeeper, before_movie, voice_check, voice_check_old が指定可能
    - 通常はvoice_checkは作成されない。voice_checkと入力した場合のみ作成される。
    - voice を入力した場合はキーボード入力(y)可能。ただしバックグラウンドでは動作できない。
- config.{設定名}.jsonを使用する場合
  - ./batch.sh -c {設定名} {作者名}/{作品名}
プロジェクトの./output/{git_commit_id}_{part_id_or_range}以下に一部の中間ファイル、出力ファイルが出力される。
- ./output/latest には出力ファイルが上書きされる
- {設定名}を指定した場合は、./output/{設定名}_{git_commit_id}_{part_id_or_range}, ./output/{設定名}_latest に出力される。

./batch_first_pdf.sh {作者名}/{作品名} を使うとpdfを生成し、ログを./projects/{作者名}/{作品名}/tmp/batch_first_pdf.log に保存できる。
- 最初はこれかな。tex処理漏れ等を手軽に確認するために使う。
./batch_first_timekeeper.sh {作者名}/{作品名} を使うと、pdf, 音声, timekeeperを生成し、ログを./projects/{作者名}/{作品名}/tmp/batch_first_timekeeper.log に保存できる。
- 500万文字用の大量変換、timekeeperのエラーチェック、パート数の事前確認に使う。
./batch_first_voice_check.sh {作者名}/{作品名} を使うと、pdf, 音声, timekeeper, voice_check関連ファイルを作成し、ログを./projects/{作者名}/{作品名}/tmp/batch_first_voice_check.log に保存できる。
- たくさんの作品のvoice_checkを一括で作りたいときに便利

youtube upload

予め、↓の方に書いてある準備をする
start_part_id から end_part_id まで、start_publish_at(JST)から1日おきに公開されるよう設定される
ただし、制限により1日6個までしかアップロードできないみたいなので間違えないように注意！
- 特に、「第{part_id + 1}回」であることに注意！

python upload.py {作者名}/{作品名} {version} {start_publish_at} {start_part_id} {end_part_id}
- 例: python upload.py 新美南吉/ごん狐 latest 2019-08-25T18:00:00 0 0
python list.py で現在のアップロード済み動画一覧、公開状態、公開日をリストアップできる。

Youtube Upoload準備

https://code.google.com/apis/console
- プロジェクトを作成
  - プロジェクト名
    - listening-paperback
https://console.developers.google.com/?hl=ja
- プロジェクト listening-paperback を選択
- ライブラリ -> YouTube Data API v3 を選択 -> 有効化
- 認証情報 -> 認証情報を作成 -> OAuth2 -> JSONをダウンロード -> ./certs/youtube_client_secrets.json に配置
- OAuth同意画面を適当に作成する。スコープには ../auth/youtube が必要
youtube uploaderインストール

cd ~/Downloads
pip install --upgrade oauth2client google-api-python-client==1.7.4 progressbar2
wget https://github.com/tokland/youtube-upload/archive/master.zip
unzip master.zip
cd youtube-upload-master
python setup.py install

credentialsを作成

youtube-upload --title="test" --client-secret='./certs/youtube_client_secrets.json'
# 表示されたURLにアクセスし、ログイン、verification code を入れる
# ~/.youtube-upload-credentials.json にファイルが生成され、以降それが使用される

メモ

az2tex.py
- 青空文庫形式を網羅しているわけではないので、うまく変換できないケースが出たら随時修正する。
- 重いファイルだと一行ごと逐次にする必要あるかも。
チャンネルのアイコン
- http://icooon-mono.com/11129-%e7%a9%8d%e3%81%bf%e9%87%8d%e3%81%ad%e3%81%9f%e6%9c%ac%e3%81%ae%e3%82%a2%e3%82%a4%e3%82%b3%e3%83%b3%e7%b4%a0%e6%9d%90/
yamitzky/mecab-bottle を2019/10/19に確認したところこわれていたので、過去のイメージを自分のリポジトリにpushしておいてそれを使用する

docker tag ec141d2a9de9 mcre/mecab-bottle:20190822
docker push mcre/mecab-bottle:20190822

声が高くなるとき
- 一文があまりにも長いと高くなる傾向がある。途中の「〜〜、」などを「〜〜。」に変換しておけばうまくいく。

Provide feedback

Saved searches

Use saved searches to filter your results more quickly

Uh oh!

Repository files navigation

「聴く」名作文庫

使い方

プロジェクトの作成

動画作成

youtube upload

Youtube Upoload準備

メモ

About

Uh oh!

Releases

Languages

Name		Name	Last commit message	Last commit date
Latest commit History 407 Commits
Dockerfiles		Dockerfiles
corrector		corrector
materials		materials
src		src
.gitignore		.gitignore
README.md		README.md
batch.sh		batch.sh
batch_first_pdf.sh		batch_first_pdf.sh
batch_first_timekeeper.sh		batch_first_timekeeper.sh
batch_first_voice_check.sh		batch_first_voice_check.sh
create_project.py		create_project.py
list.py		list.py
ruby.py		ruby.py
upload.py		upload.py
youtube_util.py		youtube_util.py

mcre/listening-paperback

Folders and files

Latest commit

History

Repository files navigation

「聴く」名作文庫

使い方

プロジェクトの作成

動画作成

youtube upload

Youtube Upoload準備

メモ

About

Topics

Resources

Uh oh!

Stars

Watchers

Forks

Releases

Languages