LTR读书笔记-豆柴文库

您所在位置：网站首页 / LTR读书笔记.docx / 文档详情

免费试读已结束，剩余 11 页请下载文档后查看

16 金币

下载文档

/ 16

下载提示

如果您无法下载资料，请参考说明：

1、部分资料下载需要金币，请确保您的账户上有足够的金币

2、已购买过的文档，再次下载不重复扣费

3、资料包下载后请先用软件解压，在使用对应软件打开

文本预览

LTR读书笔记
配置
1.1路径
ltr/ml/conf
1.2内容
[DEFAULT]
IN_DATA:输入数据
DATA_PATH:数据路径
TRAIN_EXT:训练集
TEST_EXT:测试集
[global_config]
tool_num:调用工具数量
run_flow:产品线
flow_zhidao:工具顺序；如flow_zhidao=split_data,trans_data_train,trans_data_test,train_svmrank,test_svmrank,testeval_test
[id:13]
tool_name=split_data
tool_addr=tools/RankDataExtractionProcess.sh
split_para=1,1
in_data=%(IN_DATA)s
train_data=%(DATA_PATH)s%(TRAIN_EXT)s
test_data=%(DATA_PATH)s%(TEST_EXT)s
1.3工具
1.3.1sample_data
holmes/data_sample/batch.sh
1.3.2train_flow
holmes/rerank/max-entropy-holmes.1.0/bin.new/main.py
1.3.3data2svm_train_class
holmes/data2svm/main.py
1.3.4data2svm_test_class
holmes/data2svm/main.py
1.3.5train_maxe
holmes/train_maxe/main.py
1.3.6test_maxe
holmes/test_maxe/main.py
1.3.7train_svmrank训练集
common_lib/train.py
holmes/conf/rank_svm.cfg
#!./third_party_lib/python/bin/python

importsys
importConfigParser
importsubprocess
importos
importgetopt
importtempfile
fromcommon_lib.configimport*

deftrain_basicwei(train_file,config,model):
return"fakebasci_weitrain"

deftrain_svm(train_file,config,model_file):
options=config.items('svm')
options.append(('training_file',train_file))
options.append(('model_out',model_file))

cmds=[]
cmds.append(os.getcwd()+os.sep+SVM_TRAIN_PATH)

forname,valueinoptions:
cmds.append('--'+name)
cmds.append(value)

printsubprocess.check_output(cmds)

deftrain_svm_ori(train_file,config,model_file):
options=config.items('svm')
options.append(('training_file',train_file))
options.append(('model_out',model_file))

cmds=[]
cmds.append(os.getcwd()+os.sep+SVM_ORI_TRAIN_PATH)

forname,valueinoptions:
cmds.append('--'+name)
cmds.append(value)

printsubprocess.check_output(cmds)


RF_MODEL_FILE='rf_model.conf'

deftrain_rf(train_file,config,model_file):
options=config.items('rf')

ifos.path.isabs(train_file):
dir=os.path.dirname(train_file)
else:
dir=os.path.dirname(os.getcwd()+os.sep+train_file)

model_conf=dir+os.sep+RF_MODEL_FILE

MC=open(model_conf,'w')

print>>MC,'train_data:',os.path.basen