加賀百万石ですが何か？

【PyTorch】大規模データの取り扱い方

2019/1/9 IT

PyTorchでメモリに乗り切らないデータを扱うときのDataLoaderの作り方です。ここでは画像データを扱う問題を例にして説明します。

勢いで会社を辞めてから1ヶ月ほど経ちました。色々焦りとか出てくるのかなと思っていたのですが，意外と平穏な日々を過ごしていますので，どんな気分なのかだらだらと書いてみました。

2019/1/7 IT

ディープラーニングで画像処理をしているときに，画像処理の部分でボトルネックになっている処理があったので処理速度を比較してみました。

2019/1/6 IT

Windows環境を使用してPyTorchでボトルネック解析をするときに，PicklingErrorが発生した場合の”暫定的な”対処方法です。

2019/1/6 IT

Windows環境を使用してPyTorchでボトルネック解析をするときに，UnicodeDecodeErrorが発生した場合の対処方法です。

2019/1/5 IT

PyTorchのMNIST分類用サンプルコードです。自分の学習も兼ねて，パッと見て分かるように細かくコメントも記載してみました。

クロスバイクのカメレオンテ2をドロップハンドル化して，コンポーネントをSORAに換装しました。クロスバイクの改造をしてみたいけどよく分からないという人も多いかと思いますので，どんな感じで作業するのかをまとめてみました。

金沢の中心市街地付近から出発して，手取川沿いを走りに行くルートです。まっすぐ手取川に向かわずに，比較的自転車で走りやすい「しおさいロード」を通っていくルートです。

人間関係が嫌になって，上司に相談しても精神論を強制されて終わるだけの会社だから，さっさと見切りをつけて辞めていく人ってこういう心境だったんだなぁというのが実感できました。

クロスバイクのカメレオンテ2をドロップハンドル化して，コンポーネントをSORAに換装しました。クロスバイクの改造をしてみたいけどよく分からないという人も多いかと思いますので，どういうパーツや工具を使ったかをまとめてみました。