- TensorFlow GraphDef proto buffer 文本文件
- TensorFlow 預(yù)訓(xùn)練 checkpoint shards
- 評(píng)估預(yù)訓(xùn)練模型的代碼
- 詞匯表
- LM-1B 評(píng)估測試
代碼支持 4 種評(píng)估模式：
- 提供數(shù)據(jù)庫，計(jì)算模型的 perplexity
- 提供前綴，預(yù)測后面一個(gè)單詞
- softmax 嵌入項(xiàng)，字符級(jí)別的 CNN 單詞嵌入項(xiàng)
- 輸入句子，將轉(zhuǎn)存 LSTM 狀態(tài)的嵌入項(xiàng)
結(jié)果
更多信息請(qǐng)?jiān)L問：https://github.com/tensorflow/models/tree/master/lm_1b