日韩性视频-久久久蜜桃-www中文字幕-在线中文字幕av-亚洲欧美一区二区三区四区-撸久久-香蕉视频一区-久久无码精品丰满人妻-国产高潮av-激情福利社-日韩av网址大全-国产精品久久999-日本五十路在线-性欧美在线-久久99精品波多结衣一区-男女午夜免费视频-黑人极品ⅴideos精品欧美棵-人人妻人人澡人人爽精品欧美一区-日韩一区在线看-欧美a级在线免费观看

歡迎訪問 生活随笔!

生活随笔

當前位置: 首頁 > 编程语言 > python >内容正文

python

机器学习算法Python实现:word2vec 求词语相似度

發布時間:2024/1/17 python 30 豆豆
生活随笔 收集整理的這篇文章主要介紹了 机器学习算法Python实现:word2vec 求词语相似度 小編覺得挺不錯的,現在分享給大家,幫大家做個參考.
#!/usr/bin/env Python3 # coding=utf-8 import jieba jieba.load_userdict("C:\\Users\\Desktop\\s_proj\\dict.txt") #自定義分詞詞典#分詞并將結果存入txt f1 =open("C:\\Users\\Desktop\\neg.txt","r",encoding='utf-8',errors='ignore') f2 =open("C:\\Users\\Desktop\\car_fenci.txt", 'w',encoding='utf-8',errors='ignore') lines =f1.readlines() # 讀取全部內容 w='' for line in lines:line.replace('\t', '').replace('\n', '').replace(' ','')seg_list = jieba.cut(line, cut_all=False)f2.write(" ".join(seg_list)) f1.close() f2.close()from gensim.models import word2vec import logging logging.basicConfig(format='%(asctime)s:%(levelname)s: %(message)s', level=logging.INFO)#訓練word2vec模型 sentences=word2vec.Text8Corpus(u"C:\\Users\\Desktop\\car_fenci.txt") model =word2vec.Word2Vec(sentences,size=400, window=10, min_count=1) #訓練skip-gram模型,默認window=5 print (model)#保存模型 model.save("model_word") # 以一種C語言可以解析的形式存儲詞向量 model.wv.save_word2vec_format("model_word.bin", binary=True) if __name__ == "__main__": pass #打開要計算相似度的2個文本 f3 =open(r"C:\Users\Desktop\s_proj\keyword.txt","r",encoding='utf-8',errors='ignore') f4=open(r"C:\Users\Desktop\s_proj\c.txt","r",encoding='utf-8',errors='ignore')#要計算的2個文本預處理 f=[] ff=[] for i in f3.readlines():i=i.replace('\n','')f.append(i)for j in f4.readlines():j=j.replace('\n','')ff.append(j) #相似度計算 for ii in f:for jj in ff:try:y1 = model.wv.similarity(ii, jj) print (ii+' '+jj,y1) except:print (ii+' '+jj,0)

總結

以上是生活随笔為你收集整理的机器学习算法Python实现:word2vec 求词语相似度的全部內容,希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯,歡迎將生活随笔推薦給好友。