这个repo汇集的是我个人在文本相似度上的一些研究相关的代码.
/dataset
/sick --- SICK 数据集,包括train和test两部分
/baseline --- 常数模型
/metrics --- 评估指标和校准的工具
/stats --- 数据集统计分析
/levendistance --- 编辑距离算法
/tf-idf --- tf-idf cosine算法
/lda --- LDA算法
/doc2vec --- doc2vec算法
/nnondoc2vec --- NNonDoc2vec算法
/DAN --- 词向量平均网络
/common --- tokenization工具
/rnn --- LSTM-RNN算法
/vecrep --- 比较w2c,d2c,w2c+d2c的实验
/skipthought --- skip-thoughts的cosine和softmax两种算法