- mord
- treetaggerwrapper
- sklearn
python run.py -i test.dat
{'grade': 'A1', 'grmitem': [('13 \xe4\xb8\x8d\xe5\xae\x9a\xe5\x86\xa0\xe8\xa9\x9e', 18), ('150 \xe7\xad\x89\xe4\xbd\x8d\xe6\x8e\xa5\xe7\xb6\x9a\xe8\xa9\x9e', 16), ('14 \xe5\xae\x9a\xe5\x86\xa0\xe8\xa9\x9e', 14), ('88 to\xe4\xb8\x8d\xe5\xae\x9a\xe8\xa9\x9e(to DO)', 9), ('32 \xe5\x89\xaf\xe8\xa9\x9e(\xe9\xa0\xbb\xe5\xba\xa6)', 5), ('127 \xe5\x8a\xa9\xe5\x8b\x95\xe8\xa9\x9e\xe9\xa1\x9e(have to)', 5), ('33 \xe5\x89\xaf\xe8\xa9\x9e(\xe5\xbc\xb7\xe6\x84\x8f)', 5), ('105 \xe5\x8b\x95\xe8\xa9\x9e-ing\xe5\xbd\xa2', 4), ('6 \xe4\xba\xba\xe7\xa7\xb0\xe4\xbb\xa3\xe5\x90\x8d\xe8\xa9\x9e\xe6\x89\x80\xe6\x9c\x89\xe6\xa0\xbc(my/our/your/her/their)', 4), ('169 \xe5\x90\x8d\xe8\xa9\x9e\xe3\x82\x92\xe5\xbe\x8c\xe7\xbd\xae\xe4\xbf\xae\xe9\xa3\xbe\xe3\x81\x99\xe3\x82\x8b\xe7\x8f\xbe\xe5\x9c\xa8\xe5\x88\x86\xe8\xa9\x9e', 3), ('179 \xe9\x96\xa2\xe4\xbf\x82\xe4\xbb\xa3\xe5\x90\x8d\xe8\xa9\x9e(\xe7\x9b\xae\xe7\x9a\x84\xe6\xa0\xbc)\xe3\x81\xae\xe7\x9c\x81\xe7\x95\xa5', 3), ('127-1 \xe5\x8a\xa9\xe5\x8b\x95\xe8\xa9\x9e\xe9\xa1\x9e(have to)', 1), ('101 \xe5\x8b\x95\xe8\xa9\x9e+to\xe4\xb8\x8d\xe5\xae\x9a\xe8\xa9\x9e', 1), ('35 \xe5\x89\xaf\xe8\xa9\x9e(\xe5\x90\xa6\xe5\xae\x9a)', 1), ('156 \xe5\x89\xaf\xe8\xa9\x9e\xe7\xaf\x80(if)', 1), ('123 \xe5\x8a\xa9\xe5\x8b\x95\xe8\xa9\x9e\xe9\xa1\x9e(can)', 1), ('24 \xe4\xb8\x8d\xe5\xae\x9a\xe4\xbb\xa3\xe5\x90\x8d\xe8\xa9\x9e(-thing/-one/-body)', 1), ('5 \xe4\xba\xba\xe7\xa7\xb0\xe4\xbb\xa3\xe5\x90\x8d\xe8\xa9\x9e\xe4\xb8\xbb\xe6\xa0\xbc(they)+be: they are', 1), ('123-1 \xe5\x8a\xa9\xe5\x8b\x95\xe8\xa9\x9e\xe9\xa1\x9e(can)', 1), ('168 \xe5\x90\x8d\xe8\xa9\x9e\xe3\x82\x92\xe5\x89\x8d\xe7\xbd\xae\xe4\xbf\xae\xe9\xa3\xbe\xe3\x81\x99\xe3\x82\x8b\xe7\x8f\xbe\xe5\x9c\xa8\xe5\x88\x86\xe8\xa9\x9e', 1), ('1 \xe4\xba\xba\xe7\xa7\xb0\xe4\xbb\xa3\xe5\x90\x8d\xe8\xa9\x9e\xe4\xb8\xbb\xe6\xa0\xbc(I)+be: I am', 1)], 'stats': [66, 465, 0.44516129032258067], 'word_diff': [0.30752688172043013, 0.06236559139784946, 0.02795698924731183, 0.03655913978494624, 0.0989247311827957]}