メインコンテンツへスキップ

MYCOEIROINKの学習途中で再開できなくなる不具合について【2026/07/13時点】

    問題

    G4 GPU(CUDA12.8)で学習した後に中断、翌日にモデルの学習をcheckpointから再開しようとしたところ、エラーになり学習が途中で終了。

    Notebookに書かれていた対処法『checkpointを巻き戻す』も機能しなかった。

    内部

    _pickle.UnpicklingError:
    Weights only load failed.

    (1) In PyTorch 2.6, we changed the default value of the
    `weights_only` argument in `torch.load`
    from `False` to `True`.

    この行で、

    『重みだけロードする設定になっている』
    『Pytorch 2.6から、torch.loadのデフォルト値がFalse→Trueに変わった』

    と記載があった。

    修正方法

    trainer.pyに移動する。
    おそらく『学習スタート』直前までコードを実行しないと生成されていない。

    /usr/local/lib/python3.10/dist-packages/espnet2/train/trainer.py

    画像

    この行を修正する。
    137行目に

    weights_only=False,

    をつける。

    原因の考察

    どうやら、何らかの原因でPytorch 2.6へ勝手に移行してたことが原因らしい。

    前述の通り、2.6では、学習に使用しているESPnetの『torch.load()』のデフォルト設定が

    2.5 → weights_only=False
    
    2.6 → weights_only=True

    となったらしく、Trueの場合は全てを読み込まない安全モードで実行される。

    安全モードではCheckpointの中身すべてを読み込めないため、エラーになっていた。

    あとがき

    MYCOE構築用のNotebookも古いっぽいし、こうやって口伝で使えるしかないのかな。

    というか私だけなのかなこれ発生したの。他でまったく聞かなかった。

    しゅがもあ氏のNoteも見たけどそれっぽいエラーは書かれてなかったし、けっこう最近のバグ?


     
     

    Salv

     
     
    雑多人

    あなたへのおすすめ