ICode9

精准搜索请尝试: 精确搜索
首页 > 其他分享> 文章详细

学习笔记(6)- pytext训练会话助手

2020-01-25 19:57:31  阅读:254  来源: 互联网

标签:json 笔记 会话 pytext train tsv model data


https://github.com/facebookresearch/pytext

https://pytext.readthedocs.io/en/master/

https://pytext.readthedocs.io/en/master/train_your_first_model.html

(pytext) $ pytext
 
Usage: pytext [OPTIONS] COMMAND [ARGS]...
 
Configs can be passed by file or directly from json. If neither --config-
file or --config-json is passed, attempts to read the file from stdin.
 
Example:
 
pytext train < demos/docnn.json
 
Options:
--config-file TEXT
--config-json TEXT
--help Show this message and exit.
 
Commands:
export Convert a pytext model snapshot to a caffe2 model.
predict Start a repl executing examples against a caffe2 model.
test Test a trained model snapshot.
train Train a model and save the best snapshot.

训练数据:
/Users/huihui/git/pytext/tests/data/train_data_tiny.tsv
/Users/huihui/git/pytext/tests/data/test_data_tiny.tsv

参数设置:/Users/huihui/git/pytext/demo/configs/docnn.json

(pytext) $ cat demo/configs/docnn.json
{
  "version": 8,
  "task": {
    "DocumentClassificationTask": {
      "data": {
        "source": {
          "TSVDataSource": {
            "field_names": ["label", "slots", "text"],
            "train_filename": "tests/data/train_data_tiny.tsv",
            "test_filename": "tests/data/test_data_tiny.tsv",
            "eval_filename": "tests/data/test_data_tiny.tsv"
          }
        }
      },
      "model": {
        "DocModel": {
          "representation": {
            "DocNNRepresentation": {}
          }
        }
      }
    }
  }
}

测试结果

标签:json,笔记,会话,pytext,train,tsv,model,data
来源: https://www.cnblogs.com/xuehuiping/p/12205347.html

本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享;
2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关;
3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关;
4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除;
5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有