2020-10

Python

LightGBMでCannot use Dataset instance for prediction, please use raw data instead

LightGBMで2値分類の学習をさせていた際、表題のエラー。 import lightgbm as lgb lgb_train = lgb.Dataset(X_train, label=y_train) lgb_eval = lgb.Da...
Deep Learning

sklearnやkearsのCross Validationを並列で実行して高速化する

Kaggleに取り組んでいた時、実行時間制限付きのノートブックコンペがあり、モデルを高速に実行する必要が出てきた。 そこで、クロスバリデーションなら同時に更新する値や配列が無いため、なんとか並列実行出来ないか調べてみたところ、joblibを...
Deep Learning

TensorflowやKerasで乱数シードを固定して同じ結果が出るようにする

機械学習やディープラーニングに取り組む時、様々なモデルを作って精度を比較することが多い。 しかし、TensorflowやKerasではGPUを用いた学習の時に乱数を固定する方法がなく、結果が変わってもモデルの改良によるものなのか乱数による偶...
AtCoder

AtCoder Beginner Contest 180の感想

ABC180をコンテスト後に解いた。 A - box やるだけ。 n, a, b = map(int, input().split()) ans = n - a + b print(ans) B - Various distances nu...
Python

sklearnのlog_lossでValueError: y_true contains only one label (0).

2値分類タスクでKfold分割してloglossを計算した時にエラー。 from sklearn.metrics import log_loss loss = log_loss(y_valdation, oof_prediction) Va...
Python

Macのpyenvでconfigure: error: C compiler cannot create executables

Macでpyenv installしようとしたところ表題のエラー。 % pyenv install 3.8.4 python-build: use openssl@1.1 from homebrew python-build: use re...
Deep Learning

転移学習やファインチューニングをしたモデルでGrad-CAMをしたらValueError: Graph disconnected

転移学習やファインチューニングをしたモデルでGrad-CAMを試そうとしたところ、エラー発生。 構築したモデルはこれ。 base = VGG16(input_shape=(224, 224, 3), weights='imagenet', ...
Deep Learning

Kerasでのload_modelでエラー ValueError: Cannot create group in read-only mode.

ModelCheckpointで保存した重みを tensorflow.keras.models.load_model で読み込むと表題のエラー。 ModelCheckpoint の save_weight_only = True にしていた...
Deep Learning

KerasでエラーUnboundLocalError: local variable ‘logs’ referenced before assignment

tensorflow.kerasでmodel.fit()を実行した時に表題のエラー。 (中略)in fit epoch_logs = copy.copy(logs) UnboundLocalError: local variable 'lo...