ワイ雰囲気でやっとるから正しい見方か知らんけど
発散(?)した場合のTensorBoardのグラフこんなんなってるわ
https://i.imgur.com/h7KwfDk.png
これの600stepぐらいの底打ってるところで保存されたloraで画像出してみたら無事に死んどったで