メインコンテンツへスキップ
見出し画像
Photo bypro_firmamento

【アーカイブ記事】MYCOEの学習とGoogle Colab課金についての備忘録(2025/8/23時点)

    【これは旧バージョンのアーカイブ記事です!】

    この記事は2025年8月23日版のアーカイブです。
    最新記事はこちら。

    0. 初めに

    Google Colabを使用してMYCOEIROINKを作りたい方、課金やランタイムなどの用語が分からないという方への参考にどうぞ。
    「どうやったら効率的に学習が出来るか」が、このページの作成理由です。

    • しゅがもあの主観、及び備忘録です

    • 1回(約1200円)の課金で効率的に学習させることが主目的です。

    • Google Colabの仕様変更があったらこのページの内容が通じなくなる可能性があります。

    • 各自のPCやネット通信環境、学習させるファイル数、コーパスの組み合わせ、Google Colabへ接続した時間などで学習時間、学習可能時間が変化し、この内容通りにならない場合があります。

    • 2023年3月~2025年8月に掛けて月0~3回の頻度で学習した記録であるため、情報が古いままの可能性があります。

    • 不具合が出た、上手く学習が出来なかったなどの責任は負い兼ねます。

    • 個人のPCで行う「ローカル学習」についてはサポートしておりません。他の方の解説をご確認ください。


    1. ここで使用する単語

    • COEIROINK:https://coeiroink.com/

    • MYCOE(マイコエ):MYCOEIROINKの略。

    • Google Colab:MYCOE学習を行うプログラムコードが書かれたもの。または、その学習を行うGoogle が提供するサービス。

    • CPU:コンピューティング。学習に使うエネルギー(RPGで言うとMP)みたいな認識。

    • GPU:Google Colabのスペックみたいな認識。種類が複数あり、学習スピードが速くてCPUの消費が多いものや、遅いがCPUの消費が少ないなど、スペックや動きに違いがある。

    • ランタイム:MYCOEを学習させるマシンや電源ボタンみたいな認識。ランタイムに接続しているとCPUを自動で消費する。

    • epoch(エポック):MYCOE学習の進み具合。100epochになると終了。もちろん好きなepoch数で配布しても良い。高いほどクオリティアップしていく。

    • hhmm:h=時間、m=分 1h⇒1時間の意味。

    2. 課金について

    Google Colabの課金の種類は4つあるようだ。
    ここでは、しゅがもあが使用しているColab Proのみで説明する。
    1番安い金額プランとして、1179円(税込み)で、
    Colab Pro(月額課金)とPay As You Go(追加課金)の2つがある。
    同額を払って100CPUを買うなら、Colab Pro(月額課金)の方を勧める。

    Colab Pro(月額課金)について

    利点:
    ・無課金と比べて長時間学習可能。
    ・CPUを完全消費した後もハイメモリを選べる。

    欠点:
    ・手動で課金を止めないと月額払いが継続される。

    Pay As You Goについては、
    以前間違って家族のアカウントにPay As You Goで1200円100CPU分を追加課金したが、3hでランタイムの接続が切れて強制終了したことがあり、足りなくなったCPUを追加購入するプランという認識を持っている。

    3. 学習する前に

    もしかしたら初めて学習する人もいるかもしれないので、事前に注意書きを記載する。

    ・課金する前に、Google Colabを使ってMYCOE学習が出来るか確認する。
    ⇒一度ランタイムと接続すると、ランタイムを切断する/切断されるまで、どんどんCPUを消費していく。アップロードした音声ファイルにミスがあって学習が開始出来ないとCPUとお金がもったいない。

    ・課金する前に、1~5epoch程作成して自分の声(そのスタイル)に合うベースモデルを見極めた方が良さげ。
    ⇒ベースモデルの相性次第で、ガラッと声が変わる人もいるようだ。
     しゅがもあは「model_1(つくよみちゃん)」をよく選択する。
     イメージでは、男性声は「model_2(おふとんPさん)」、幼い少女声は「model_3(MANAさん)」を選んではどうだろうか。

    ・学習の手順については、公式サイト、学習ページ内のQ&A、各有識者方のサイトや動画をご確認ください。


    ここから以下は上記の内容を理解し、100 CPU を所持した前提で話す。

    4. ランタイム接続とその種類

    ①MYCOEIROINKの学習をさせるColabのページに移動したら、
     左上の「ランタイム」⇒「ランタイムのタイプを変更」をクリック。

    ②「ランタイムのタイプを変更」という画面になるので、
     ハードウェアアクセラレータを好みに合わせて以下から選択する。

    ・ランタイムのタイプは「Python 3」のままにすること。

    ・ハードウェアアクセラレータのCPU、v6e-1 TPU、v5e-1 TPU、v2-8 TPUは選択しないこと。
     
    (MYCOEの学習に使用するのはGPUのはずなので、これらを選ぶと学習出来ない?)

    GPUの種類

    GPUの種類:1時間で消費するCPUポイント|1epochのデータが生成される平均時間|CPU完全消費時間目安

    しゅがもあの学習データ(ITA80+MANA60=約140wav)の場合
    ①A100 GPU:約5.97 CPU/1h|1epoch= 9m ハイメモリ固定|約16.7h
    ②L4 GPU :約1.90 CPU/1h|1epoch=14m ハイメモリ固定|約52.6h
    ③T4 GPU :約1.57 CPU/1h|1epoch=33m ハイメモリ  |約63.6h
    ④T4 GPU :約1.32 CPU/1h|1epoch=未確認 通常メモリ |約??h

    ※T4かつ通常メモリは無課金でも選択可能。
    (⇒無課金は④のT4しか選択できない)

    例えば、最初から学習させる時にA100 GPUを選択した場合、
    1epoch作るのに約9分掛かり、1時間学習させるとCPUを5.97消費する。
    つまり1時間で6epochぐらい学習が進み、CPUを約16.7時間で使い切る。

    5. 今までの経験則からColabの仕様予測

    • ランタイムに接続してから「Googleドライブのマウント」や「モデルの作成のための環境構築」の準備段階でもCPUを消費している。
      「モデルの学習スタート」のために左の再生ボタンをおしてください」を押してMYCOEの学習が始まるまで、毎回10~15分程のCPUを消費していると思った方が良い。

    • 最大何時間学習出来るかは不明。接続状況や環境次第であるため、ここでは明記出来ない。
      12時間以上出来た時もあれば、数時間で切断されたこともあった。

    • CPUを使い切り0になった後も学習を継続して放置すると、ランタイムの切断が行われるようになった?
      25年7月時点ではCPUが0になって数時間後、切断が行われた。

    • Colab Proであっても連日長時間学習をしているとランタイムに接続出来なくなり、数日学習出来ないペナルティが発生する。

    • 3h以上PCを放置するとランタイムの接続が強制的に切れるので、「寝てる間に学習」は不可。PCを動かし続けたり、Colabの画面をクリックしたりする必要がある。
      25年7月時点では長時間放置しても学習が継続していた。

    • Google Driveの容量が限界だと新しいepochが追加されない。
      1epoch=300MBなので、3epochで1GB。また、学習準備時点でGB分のデータがダウンロードされる。
      課金学習だとすぐ限界になりやすいので注意!課金して容量を増やしたり、こまめに不要なepoch削除すること。

    • 突然、「私はロボットではありません」の画面が出ることがある。
      (学習準備中だったり、学習中だったりと、時期によって表示されるタイミングが違った)

    • 接続する時間次第では、A100を選択しても接続出来ず、L4に変更されることがある。
      (画面下に「A100に接続出来ませんでしたので、L4にしました」みたいな文章が一瞬表示される)


    6. どういう学習方法がお得?

    これらの情報を踏まえ、しゅがもあが考える学習方法は以下です。

    ①早く完成させたい

    A100 GPUを選択し、ランタイムが切断される/100epoch完了するまで学習

    A100 GPU:約5.97 CPU/1h 消費|1epoch = 9m
    1epoch作るのに、約9分掛かって約1.0CPUを消費する。
    ⇒合計約15時間学習させ、100CPUほぼ使い切る。

    学習準備段階で時間が掛かったり、何度も学習を中断すると足りなくなるかもしれないが、理論上1日で完成させることが可能。

    ②お得に完成させたい

    L4 GPUを選択し、ランタイムが切断される/100epoch完了するまで学習

    L4 GPU :約1.90 CPU/1h|1epoch=14m
    1epoch作るのに、約14分掛かって約0.48CPUを消費する。
    ⇒合計24時間学習させ、約50CPUを消費する。

    こちらだと、CPUの無駄な消費が無ければ1回の課金で2つのスタイルが100epochまで作れることになる。


    7. MYCOE学習に関する仕様

    • 学習を止める場合はepoch更新された直後ぐらいに止めた方が良い。
      ⇒再開した時、epochの最初の時間からの学習になるため。
      (中間セーブポイントみたいな役割を持つ「checkpoint.pth」の更新タイミングがepoch作成タイミングと同じため。)
      実例:L4(1epochが14mで作成される)だと、
      epochが更新されて1分で学習を止めたデータと、epochが更新されて12分で止めたデータで後日学習を再開しても、次のepochが作られるのは等しく14分後である

    • 学習を止める場合は「ランタイムを接続解除して削除」をすぐに実行すること!
      プログラムのストップボタンを押しただけではランタイムの接続が継続しておりCPUが消費され続けるので、もったいないことになる

    8. 記載者&質問先

    不明点などは、X(旧Twitter)で@SUGAmoremusicか、Discordで@sugamoreにリプライやメンションしてご連絡ください。

    また、いろんなユーザーモデル製作者さんがおられる、
    Discordサーバー「個人配布モデル交流所【TALQu・MYCOE・CoeFont】」で皆さんに質問出来ます。
    URL:https://discord.gg/ZjVN6YbY8j

    上記方法・サーバー以外では、しゅがもあは質問対応いたしかねます。


    9. ただの宣伝

    しゅがもあの声を収録したMYCOEIROINK音源:祝賀最愛(しゅくが・もあ)がいます。
    50スタイル以上作っているので興味が湧いたらぜひ。
    配布所:https://sites.google.com/view/gamoa-shukugamo/

    あなたへのおすすめ