CNTK 2.4の最近のブログ記事

CNTK_106A_LSTM_Timeseries_with_Simulated_Data を勉強を兼ねて改造してみました。

改造の目的は、最後の学習済みモデルを使った確認方法を変えてみます。
新しく取り入れる確認方法は、
『詳解ディープラーニング TensorFlow・Kerasによる時系列データ処理』 巣籠悠輔 著 
第５章リカレントニューラルネットワーク -> 5.1.4.2 TensorFlow による実装
に出ている方法を取り入れてみます。

違いは、オリジナルは、確認のために使う入力のサイン波データを、全てトレーニング用の元データを使いますが、後者の方は、入力の最初の数ステップ(N+M-1)は、元のオリジナルのサイン波形を使いますが、その後は、全て、モデルからの予測データを入力にフィードバックさせて、サイン波を生成している点です。

CNTK2.5 のチュートリアルのプログラム CNTK_201B_CIFAR-10_ImageHandsOn を学習データのアクセス部分を、
keras.datasets.cifar10 ライブラリーを使う方法に変えてみました。

CNTK_201B_CIFAR-10_ImageHandsOn を色々試していましたが、何回か実行する度に、どういう訳か、Windows10 のディスクアクセスが 100% になるので困っていましたが、
データアクセスの部分を Keras でも出来る様なので、早速試してみました。

それでは、早速コードを記載してみます。こらの方が、オリジナルより理解しやすいのでは?

CNTK 2.5 の勉強も少しは、こなしたので、今までの勉強を生かして、
具体的な、システムへの応用として、
「cntk 2.5 を使った砂防ダムの監視カメラによる水量の観測から、鉄砲水発生を予測」
なるものを考えてみました。

今はまだ、実現可能性を考えずに、只単純に、こんなシステムが出来ればとの、発案です。
どのような物かと言えば、

C:\Users\tama>activate cntk25-py (cntk25-py) C:\Users\tama>python Python 3.5.5 | packaged by conda-forge | (default, Feb 13 2018, 06:15:35) [MSC v.1900 64 bit (AMD64)] on win32 Type "help", "copyright", "credits" or "license" for more information. >>> import cntk Traceback (most recent call last): File "C:\app\Anaconda3\envs\cntk25-py\lib\site-packages\cntk\cntk_py.py", line 18, in swig_import_helper return importlib.import_module(mname) File "C:\app\Anaconda3\envs\cntk25-py\lib\importlib\__init__.py", line 126, in import_module return _bootstrap._gcd_import(name[level:], package, level) File "<frozen importlib._bootstrap>", line 985, in _gcd_import File "<frozen importlib._bootstrap>", line 968, in _find_and_load File "<frozen importlib._bootstrap>", line 955, in _find_and_load_unlocked ImportError: No module named 'cntk._cntk_py' During handling of the above exception, another exception occurred: Traceback (most recent call last): File "<stdin>", line 1, in <module> File "C:\app\Anaconda3\envs\cntk25-py\lib\site-packages\cntk\__init__.py", line 17, in <module> from . import cntk_py File "C:\app\Anaconda3\envs\cntk25-py\lib\site-packages\cntk\cntk_py.py", line 21, in <module> _cntk_py = swig_import_helper() File "C:\app\Anaconda3\envs\cntk25-py\lib\site-packages\cntk\cntk_py.py", line 20, in swig_import_helper return importlib.import_module('_cntk_py') File "C:\app\Anaconda3\envs\cntk25-py\lib\importlib\__init__.py", line 126, in import_module return _bootstrap._gcd_import(name[level:], package, level) ImportError: DLL load failed: ダイナミック リンク ライブラリ (DLL) 初期化ルーチンの実行に失敗しました。

# # Train and evaluate the network. # def train_and_evaluate(reader_train, reader_test, max_epochs, model_func): .... # Set training parameters #lr_per_minibatch = C.learning_parameter_schedule([0.01]*10 + [0.003]*10 + [0.001], # epoch_size) #changed by nishi lr_per_minibatch = C.learning_parameter_schedule([0.01]*10 + [0.003]*10 + [0.001], epoch_size=epoch_size) .....
上記 C.learning_parameter_schedule() のパラメータが、変わったようです。
epoch_size=epoch_size にしないといけないみたいです。