Skip to content

Instantly share code, notes, and snippets.

@lissyx

lissyx/gist:691ec0ba93d3dc28c3b19abde2f24ae2

Created October 8, 2018 09:09
Show Gist options
  • Save lissyx/691ec0ba93d3dc28c3b19abde2f24ae2 to your computer and use it in GitHub Desktop.
Save lissyx/691ec0ba93d3dc28c3b19abde2f24ae2 to your computer and use it in GitHub Desktop.
Download ZIP
deepspeech 0.2.0 english fine-tuning to fr
Raw
gistfile1.txt
(tf-venv-master) alexandre@serveur:~/Documents/codaz/Mozilla/DeepSpeech/DeepSpeech-lissyx$ python -u DeepSpeech.py --decoder_library_path /home/alexandre/tmp/deepspeech-0.2.1/libctc_decoder_with_kenlm.so --alphabet_config_path data/alphabet.txt --train_files /home/alexandre/tmp/deepspeech-fr/d
ata/training_speech_2018-09-28_fr_FR_train.csv --dev_files /home/alexandre/tmp/deepspeech-fr/data/training_speech_2018-09-28_fr_FR_dev.csv --test_files /home/alexandre/tmp/deepspeech-fr/data/training_speech_2018-09-28_fr_FR_test.csv --train_batch_size 64 --dev_batch_size 64 --test_bat
ch_size 64 --n_hidden 2048 --epoch 30 --learning_rate 0.0001 --display_step 0 --validation_step 1 --dropout_rate 0.2 --checkpoint_step 1 --checkpoint_dir ~/tmp/deepspeech-fr/checkpoints/ --export_dir ~/tmp/deepspeech-fr/model/ --initialize_from_frozen_model ~/tmp/deepspeech-0.2/models/output_
graph.pb
Preprocessing ['/home/alexandre/tmp/deepspeech-fr/data/training_speech_2018-09-28_fr_FR_train.csv']
Preprocessing done
Preprocessing ['/home/alexandre/tmp/deepspeech-fr/data/training_speech_2018-09-28_fr_FR_dev.csv']
Preprocessing done
Preprocessing ['/home/alexandre/tmp/deepspeech-fr/data/training_speech_2018-09-28_fr_FR_test.csv']
Preprocessing done
I Initializing from frozen model: /home/alexandre/tmp/deepspeech-0.2/models/output_graph.pb
I STARTING Optimization
I Training epoch 0...
I Training of Epoch 0 - loss: 63.262317
100% (701 of 701) |#############################################################################################################################################################################################################################################| Elapsed Time: 0:16:53 Time: 0:16:53
I Validating epoch 0...
22% (20 of 88) |###################################################### | Elapsed Time: 0:00:02 ETA: 0:00:08W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 701 vs previous value: 701. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
45% (40 of 88) |############################################################################################################ | Elapsed Time: 0:00:06 ETA: 0:00:09W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 701 vs previous value: 701. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
68% (60 of 88) |################################################################################################################################################################## | Elapsed Time: 0:00:11 ETA: 0:00:08W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 701 vs previous value: 701. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
90% (80 of 88) |######################################################################################################################################################################################################################### | Elapsed Time: 0:00:19 ETA: 0:00:03W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 701 vs previous value: 701. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
I Validation of Epoch 0 - loss: 40.604641
100% (88 of 88) |###############################################################################################################################################################################################################################################| Elapsed Time: 0:00:26 Time: 0:00:26
I Training epoch 1...
I Training of Epoch 1 - loss: 45.003056
100% (701 of 701) |#############################################################################################################################################################################################################################################| Elapsed Time: 0:17:16 Time: 0:17:16
I Validating epoch 1...
22% (20 of 88) |###################################################### | Elapsed Time: 0:00:06 ETA: 0:00:11W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 1402 vs previous value: 1402. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
45% (40 of 88) |############################################################################################################ | Elapsed Time: 0:00:09 ETA: 0:00:09W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 1402 vs previous value: 1402. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
68% (60 of 88) |################################################################################################################################################################## | Elapsed Time: 0:00:15 ETA: 0:00:08W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 1402 vs previous value: 1402. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
90% (80 of 88) |######################################################################################################################################################################################################################### | Elapsed Time: 0:00:23 ETA: 0:00:03W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 1402 vs previous value: 1402. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
I Validation of Epoch 1 - loss: 38.994456
100% (88 of 88) |###############################################################################################################################################################################################################################################| Elapsed Time: 0:00:30 Time: 0:00:30
I Training epoch 2...
I Training of Epoch 2 - loss: 37.013173
100% (701 of 701) |#############################################################################################################################################################################################################################################| Elapsed Time: 0:17:15 Time: 0:17:15
I Validating epoch 2...
22% (20 of 88) |###################################################### | Elapsed Time: 0:00:06 ETA: 0:00:11W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 2103 vs previous value: 2103. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
45% (40 of 88) |############################################################################################################ | Elapsed Time: 0:00:09 ETA: 0:00:09W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 2103 vs previous value: 2103. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
68% (60 of 88) |################################################################################################################################################################## | Elapsed Time: 0:00:15 ETA: 0:00:08W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 2103 vs previous value: 2103. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
90% (80 of 88) |######################################################################################################################################################################################################################### | Elapsed Time: 0:00:23 ETA: 0:00:03W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 2103 vs previous value: 2103. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
I Validation of Epoch 2 - loss: 34.295620
100% (88 of 88) |###############################################################################################################################################################################################################################################| Elapsed Time: 0:00:30 Time: 0:00:30
I Training epoch 3...
I Training of Epoch 3 - loss: 31.845667
100% (701 of 701) |#############################################################################################################################################################################################################################################| Elapsed Time: 0:17:15 Time: 0:17:15
I Validating epoch 3...
22% (20 of 88) |###################################################### | Elapsed Time: 0:00:06 ETA: 0:00:11W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 2804 vs previous value: 2804. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
45% (40 of 88) |############################################################################################################ | Elapsed Time: 0:00:09 ETA: 0:00:09$
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 2804 vs previous value: 2804. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize. [378/1953]
45% (40 of 88) |############################################################################################################ | Elapsed Time: 0:00:09 ETA: 0:00:09W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 2804 vs previous value: 2804. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
68% (60 of 88) |################################################################################################################################################################## | Elapsed Time: 0:00:15 ETA: 0:00:08W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 2804 vs previous value: 2804. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
90% (80 of 88) |######################################################################################################################################################################################################################### | Elapsed Time: 0:00:23 ETA: 0:00:03W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 2804 vs previous value: 2804. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
I Validation of Epoch 3 - loss: 31.432619
100% (88 of 88) |###############################################################################################################################################################################################################################################| Elapsed Time: 0:00:30 Time: 0:00:30
I Training epoch 4...
I Training of Epoch 4 - loss: 27.987728
100% (701 of 701) |#############################################################################################################################################################################################################################################| Elapsed Time: 0:17:13 Time: 0:17:13
I Validating epoch 4...
22% (20 of 88) |###################################################### | Elapsed Time: 0:00:06 ETA: 0:00:11W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 3505 vs previous value: 3505. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
45% (40 of 88) |############################################################################################################ | Elapsed Time: 0:00:09 ETA: 0:00:09W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 3505 vs previous value: 3505. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
68% (60 of 88) |################################################################################################################################################################## | Elapsed Time: 0:00:15 ETA: 0:00:08W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 3505 vs previous value: 3505. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
90% (80 of 88) |######################################################################################################################################################################################################################### | Elapsed Time: 0:00:23 ETA: 0:00:03W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 3505 vs previous value: 3505. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
I Validation of Epoch 4 - loss: 29.561565
100% (88 of 88) |###############################################################################################################################################################################################################################################| Elapsed Time: 0:00:30 Time: 0:00:30
I Training epoch 5...
I Training of Epoch 5 - loss: 24.861915
100% (701 of 701) |#############################################################################################################################################################################################################################################| Elapsed Time: 0:17:14 Time: 0:17:14
I Validating epoch 5...
22% (20 of 88) |###################################################### | Elapsed Time: 0:00:06 ETA: 0:00:11W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 4206 vs previous value: 4206. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
45% (40 of 88) |############################################################################################################ | Elapsed Time: 0:00:09 ETA: 0:00:09W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 4206 vs previous value: 4206. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
68% (60 of 88) |################################################################################################################################################################## | Elapsed Time: 0:00:15 ETA: 0:00:08W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 4206 vs previous value: 4206. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
90% (80 of 88) |######################################################################################################################################################################################################################### | Elapsed Time: 0:00:23 ETA: 0:00:03W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 4206 vs previous value: 4206. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
I Validation of Epoch 5 - loss: 28.456980
100% (88 of 88) |###############################################################################################################################################################################################################################################| Elapsed Time: 0:00:30 Time: 0:00:30
I Training epoch 6...
I Training of Epoch 6 - loss: 22.320659
100% (701 of 701) |#############################################################################################################################################################################################################################################| Elapsed Time: 0:17:14 Time: 0:17:14
I Validating epoch 6...
22% (20 of 88) |###################################################### | Elapsed Time: 0:00:06 ETA: 0:00:11W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 4907 vs previous value: 4907. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
45% (40 of 88) |############################################################################################################ | Elapsed Time: 0:00:09 ETA: 0:00:09W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 4907 vs previous value: 4907. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
68% (60 of 88) |################################################################################################################################################################## | Elapsed Time: 0:00:15 ETA: 0:00:08W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 4907 vs previous value: 4907. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
90% (80 of 88) |######################################################################################################################################################################################################################### | Elapsed Time: 0:00:23 ETA: 0:00:03W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 4907 vs previous value: 4907. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
I Validation of Epoch 6 - loss: 27.462191
100% (88 of 88) |###############################################################################################################################################################################################################################################| Elapsed Time: 0:00:30 Time: 0:00:30
I Training epoch 7...
I Training of Epoch 7 - loss: 20.443973
100% (701 of 701) |#############################################################################################################################################################################################################################################| Elapsed Time: 0:17:15 Time: 0:17:15
I Validating epoch 7...
22% (20 of 88) |###################################################### | Elapsed Time: 0:00:06 ETA: 0:00:11W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 5608 vs previous value: 5608. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
45% (40 of 88) |############################################################################################################ | Elapsed Time: 0:00:09 ETA: 0:00:10W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 5608 vs previous value: 5608. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
68% (60 of 88) |################################################################################################################################################################## | Elapsed Time: 0:00:15 ETA: 0:00:08W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 5608 vs previous value: 5608. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
90% (80 of 88) |######################################################################################################################################################################################################################### | Elapsed Time: 0:00:23 ETA: 0:00:03W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 5608 vs previous value: 5608. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
I Validation of Epoch 7 - loss: 26.527201
100% (88 of 88) |###############################################################################################################################################################################################################################################| Elapsed Time: 0:00:30 Time: 0:00:30
I Validation of Epoch 7 - loss: 26.527201 [315/1953]
100% (88 of 88) |###############################################################################################################################################################################################################################################| Elapsed Time: 0:00:30 Time: 0:00:30
I Training epoch 8...
I Training of Epoch 8 - loss: 18.469074
100% (701 of 701) |#############################################################################################################################################################################################################################################| Elapsed Time: 0:17:14 Time: 0:17:14
I Validating epoch 8...
22% (20 of 88) |###################################################### | Elapsed Time: 0:00:06 ETA: 0:00:11W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 6309 vs previous value: 6309. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
45% (40 of 88) |############################################################################################################ | Elapsed Time: 0:00:09 ETA: 0:00:09W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 6309 vs previous value: 6309. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
68% (60 of 88) |################################################################################################################################################################## | Elapsed Time: 0:00:15 ETA: 0:00:08W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 6309 vs previous value: 6309. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
90% (80 of 88) |######################################################################################################################################################################################################################### | Elapsed Time: 0:00:23 ETA: 0:00:03W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 6309 vs previous value: 6309. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
I Validation of Epoch 8 - loss: 26.236450
100% (88 of 88) |###############################################################################################################################################################################################################################################| Elapsed Time: 0:00:30 Time: 0:00:30
I Training epoch 9...
I Training of Epoch 9 - loss: 17.073102
100% (701 of 701) |#############################################################################################################################################################################################################################################| Elapsed Time: 0:17:15 Time: 0:17:15
I Validating epoch 9...
22% (20 of 88) |###################################################### | Elapsed Time: 0:00:06 ETA: 0:00:11W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 7010 vs previous value: 7010. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
45% (40 of 88) |############################################################################################################ | Elapsed Time: 0:00:09 ETA: 0:00:09W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 7010 vs previous value: 7010. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
68% (60 of 88) |################################################################################################################################################################## | Elapsed Time: 0:00:15 ETA: 0:00:08W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 7010 vs previous value: 7010. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
90% (80 of 88) |######################################################################################################################################################################################################################### | Elapsed Time: 0:00:23 ETA: 0:00:03W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 7010 vs previous value: 7010. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
I Validation of Epoch 9 - loss: 25.743079
100% (88 of 88) |###############################################################################################################################################################################################################################################| Elapsed Time: 0:00:30 Time: 0:00:30
I Training epoch 10...
I Training of Epoch 10 - loss: 15.369161
100% (701 of 701) |#############################################################################################################################################################################################################################################| Elapsed Time: 0:17:15 Time: 0:17:15
I Validating epoch 10...
22% (20 of 88) |###################################################### | Elapsed Time: 0:00:06 ETA: 0:00:11W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 7711 vs previous value: 7711. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
45% (40 of 88) |############################################################################################################ | Elapsed Time: 0:00:09 ETA: 0:00:09W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 7711 vs previous value: 7711. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
68% (60 of 88) |################################################################################################################################################################## | Elapsed Time: 0:00:15 ETA: 0:00:08W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 7711 vs previous value: 7711. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
90% (80 of 88) |######################################################################################################################################################################################################################### | Elapsed Time: 0:00:23 ETA: 0:00:03W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 7711 vs previous value: 7711. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
I Validation of Epoch 10 - loss: 25.500691
100% (88 of 88) |###############################################################################################################################################################################################################################################| Elapsed Time: 0:00:30 Time: 0:00:30
I Training epoch 11...
I Training of Epoch 11 - loss: 13.983065
100% (701 of 701) |#############################################################################################################################################################################################################################################| Elapsed Time: 0:17:15 Time: 0:17:15
I Validating epoch 11...
22% (20 of 88) |###################################################### | Elapsed Time: 0:00:06 ETA: 0:00:11W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 8412 vs previous value: 8412. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
45% (40 of 88) |############################################################################################################ | Elapsed Time: 0:00:09 ETA: 0:00:10W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 8412 vs previous value: 8412. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
68% (60 of 88) |################################################################################################################################################################## | Elapsed Time: 0:00:15 ETA: 0:00:08W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 8412 vs previous value: 8412. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
90% (80 of 88) |######################################################################################################################################################################################################################### | Elapsed Time: 0:00:23 ETA: 0:00:03W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 8412 vs previous value: 8412. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
I Validation of Epoch 11 - loss: 25.688272
I Early stop triggered as (for last 4 steps) validation loss: 25.688272 with standard deviation: 0.306142 and mean: 25.826740
I FINISHED Optimization - training time: 3:32:41
100% (88 of 88) |###############################################################################################################################################################################################################################################| Elapsed Time: 0:00:42 Time: 0:00:42
I Testing epoch 12...
13% (12 of 88) |################################ | Elapsed Time: 0:04:04 ETA: 0:28:29W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 8412 vs previous value: 8412. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
36% (32 of 88) |###################################################################################### | Elapsed Time: 0:15:38 ETA: 0:40:26W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 8412 vs previous value: 8412. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
36% (32 of 88) |###################################################################################### | Elapsed Time: 0:15:38 ETA: [252/1953]
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 8412 vs previous value: 8412. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
59% (52 of 88) |############################################################################################################################################# | Elapsed Time: 0:33:49 ETA: 0:38:32W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 8412 vs previous value: 8412. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
81% (72 of 88) |################################################################################################################################################################################################### | Elapsed Time: 0:59:55 ETA: 0:24:39W
ARNING:tensorflow:It seems that global step (tf.train.get_global_step) has not been increased. Current value (could be stable): 8412 vs previous value: 8412. You could increase the global step by passing tf.train.get_global_step() to Optimizer.apply_gradients or Optimizer.minimize.
I Test of Epoch 12 - WER: 0.284177, loss: 22.44702798128128, mean edit distance: 0.116245
I --------------------------------------------------------------------------------
I WER: 0.166667, loss: 0.158657, mean edit distance: 0.033333
I - src: "qui me repondra de cette somme"
I - res: "qui ne repondra de cette somme"
I --------------------------------------------------------------------------------
I WER: 0.250000, loss: 0.069031, mean edit distance: 0.047619
I - src: "il n'y a plus personne monsieur le vicomte"
I - res: "il n y a plus personne monsieur le vicomte "
I --------------------------------------------------------------------------------
I WER: 0.250000, loss: 0.195296, mean edit distance: 0.105263
I - src: "ah dit monte cristo"
I - res: "ah it monte cristo "
I --------------------------------------------------------------------------------
I WER: 0.666667, loss: 0.190327, mean edit distance: 0.055556
I - src: "voila bientot midi"
I - res: "voila bien tot midi"
I --------------------------------------------------------------------------------
I WER: 0.928571, loss: 0.000000, mean edit distance: 0.846154
I - src: "allons dit le comte je vois que vous etes toujours le meme monsieur l'assassin"
I - res: "monsieur l'abbe "
I --------------------------------------------------------------------------------
I WER: 0.928571, loss: 0.000000, mean edit distance: 0.846154
I - src: "allons dit le comte je vois que vous etes toujours le meme monsieur l'assassin"
I - res: "monsieur l'abbe "
I --------------------------------------------------------------------------------
I WER: 1.000000, loss: 0.000000, mean edit distance: 1.000000
I - src: "et pardieu"
I - res: ""
I --------------------------------------------------------------------------------
I WER: 1.000000, loss: 0.000000, mean edit distance: 1.000000
I - src: "et pardieu"
I - res: ""
I --------------------------------------------------------------------------------
I WER: 1.000000, loss: 0.098562, mean edit distance: 0.200000
I - src: "ou ca"
I - res: "ouca"
I --------------------------------------------------------------------------------
I WER: 1.000000, loss: 0.098562, mean edit distance: 0.200000
I - src: "ou ca"
I - res: "ouca"
I --------------------------------------------------------------------------------
100% (88 of 88) |###############################################################################################################################################################################################################################################| Elapsed Time: 1:28:54 Time: 1:28:54
I Exporting the model...
I Models exported at /home/alexandre/tmp/deepspeech-fr/model/
Sign up for free to join this conversation on GitHub. Already have an account? Sign in to comment