Deep LearningKaggleのTPUでPermissionDeniedError Error executing an HTTP request: HTTP response code 403
KaggleのNotebookでTPUを使っていたときに表題のエラー。 PermissionDeniedError: {{function_node __inference_train_function_81...
Deep Learning
Python複数GPUを積んだマシンのDocker runで実行するGPUを指定する
複数GPUを積んだマシンでDockerを使う時、どのGPUを使うのか指定したくなった。 GPUでDockerを使う方法はたくさん紹介されているが、ほとんどが--gpus allをつかっており、個別に指定する方法がわからなかっ...
Pythonmatplotlibで最初からフルスクリーンでplt.showする
matplotlibでimshowする時、引数を指定しないと常に決まった解像度で図が表示されてしまう。 最初からフルスクリーンで表示するには、以下のコードを書き込めばOK。 from matpl...
Deep LearningTensorflowやKerasでResNeXt50, ResNeXt101を使う
ResNetの改良版であるResNextは、パラメータ数はほぼ同じなのに精度が向上している。 試したくなったが、TensorflowやKerasだとデフォルトではkeras.applicationsに入っていないので...
Deep LearningKerasでAttributeError: The layer has never been called and thus has no defined input shape.
モデルをロードしてからpredictしようとしたら表題のエラー。 擬似コードはこんな感じ。 model = tf.keras.models.load_model model.predict(image) Attrib...
Deep LearningRTX3090/3080でCUDA11とcuDNN8に更新したらTensorflowが早くなった
RTX 3090を手に入れたが、どうにも遅い。 旧世代のTITAN RTXの方が1epochあたりの処理時間が早く、なんでかなーと思っていた。 結論から言うと、NVIDIA DRIVERは更新したけどCUDAや...
AtCoderAtCoder Beginner Contest 185の感想
ABC185に参加した。 A - ABC Preparation 一番少ない問題数に合わせる。 a = list(map(int, input().split())) ans = min(a) print(ans...
Deep LearningTensorflowでload_modelが上手く行かずpredictがNaNになる
GCPでkerasを回した後、ローカルのMacbookでpredictしたら全ての値がNaNになってしまった。 model.summary()は元のモデルと同じ構造になっているし、model.weightでテンソルの値を見て...
Deep Learningtf.image.decode_imageでエラーValueError: ‘images’ contains no shape.
jpegやpngなど何種類かの拡張子の画像をまとめてTensorflowに流したかったが、decode_jpegやdecode_pngを拡張子に合わせて実装するのは面倒くさい。 decode_imageならbmpでもjpeg...
PythonXGBoostがモデルを開放せずGPUメモリを専有してしまう
joblibでXGBを複数走らせる、forループでXGBを呼ぶ、hyperoptでパラメータ探索を行う....など、何回もXGBを呼んでしまうとGPUメモリを開放してくれずにエラーになることがあった。 predictが終わっ...