Skip to content

xbarusui/study_gpt2_japanese_V2

Repository files navigation

study_gpt2-japanese_V2

こちらは、 GPT2 で利用するコードを格納しています。

このコードは Google colab および rinna で提供された学習済みモデルを使わせていただいてます。

はじめに

  • こちらのページは 「うすいのお茶の間開発日誌」https://novelup.plus/story/942595339 で企画した colab版 AI 学習実験のためのページです
  • ご自分の作品の text を読み込ませることで創作作家 AI を作り、文章生成を試すことができます
  • 学習に当たっては、以下の機能概要にある ipynb ファイルを使用しますので、 こちら をクリックして開いてください

使い方

  • study_gpt2_japaneseV2_AuthorAI.ipynb をクリックしてください

  • study_gpt2_japaneseV2_AuthorAI.ipynbページ内の「Open in Colab」ボタンを押してください。(下はイメージです)

Google Colabボタンスクリーンショット

  • コピーした後は資料の手順に従い実行してみてください

学習済みモデルについて

rinna japanese-pretrained-models

機能概要

study_gpt2_japaneseV2_AuthorAI.ipynb

  • 1.前準備( google ドライブ)
  • 2.前準備(モジュールインストール)
  • 3.作家 AI 学習(学習不要な場合はスキップできます)
  • 4.作家 AI 文章生成

License

The Apache 2.0 license

変更履歴

V2.00 transformer 内の run_clm.py を修正し gpt2japanese_study.py に変更

About

GPT2の学習用のコードを格納しています

Resources

License

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published