python discuz搜索api_python如何模拟搜索引擎分词
大家知道python非常的強(qiáng)大,特別針對(duì)seo也非常的有用。
1、python可以自動(dòng)收集與處理信息,比如文章標(biāo)題與內(nèi)容
2、python可以自動(dòng)登錄后臺(tái)發(fā)布文章
之前有寫過(guò)相關(guān)利用python采集信息的文章,這里就不多說(shuō)了,今天說(shuō)一下怎么利用python分詞。
最早我在利用python自動(dòng)收集與發(fā)布文章的時(shí)候,是利用的discuz的分詞api來(lái)分詞的,這樣我就不用人工對(duì)每篇文章填入關(guān)鍵詞,非常的方便,而且還是比較精準(zhǔn)的。
但是這種方法覺(jué)得不是太通用
1、效率好像有點(diǎn)慢
2、要自己有個(gè)論壇,并且會(huì)抓包分析才行,門檻高
最近發(fā)現(xiàn)python有個(gè)包非常好用,可以直接模擬搜索引擎進(jìn)行分詞,所以就利用python專門寫了個(gè)分詞程序。
舉個(gè)例子,我昨天寫了一篇文章標(biāo)題是:python批量查詢網(wǎng)頁(yè)收錄情況并計(jì)算收錄率
我用寫好的分詞程序可以實(shí)現(xiàn)自動(dòng)分詞,運(yùn)行結(jié)果如下圖:
其原理就是利用結(jié)巴分詞來(lái)實(shí)現(xiàn)的。
具體代碼分享給大家吧:
#coding:utf8
”’
author:liyatao wx:841483350
”’
#python利用結(jié)巴分詞關(guān)鍵詞自動(dòng)提取 請(qǐng)確認(rèn)安裝jieba,安裝方法pip install jieba
import jieba
def cutword(word):
tags=[]
seg_list = jieba.cut(word)
seg_list={}.fromkeys(seg_list).keys() #去除列表中重復(fù)的元素
for x in seg_list:
if len(x)>=2: #如果分出來(lái)的詞的元素大于等于2個(gè)字
tags.append(x) #添加到新的列表中
else:
pass
tags.sort(key=lambda x:len(x)) #按列表中元素字符串的長(zhǎng)度從小到大排序
print ‘,’.join(tags)
# return tags
if __name__==”__main__”:
word=”python批量查詢網(wǎng)頁(yè)收錄情況并計(jì)算收錄率 ””
cutword(word)
好了,今天就分享到這里,希望本文對(duì)大家有所幫助,如果大家覺(jué)得有用可以點(diǎn)個(gè)關(guān)注
總結(jié)
以上是生活随笔為你收集整理的python discuz搜索api_python如何模拟搜索引擎分词的全部?jī)?nèi)容,希望文章能夠幫你解決所遇到的問(wèn)題。
- 上一篇: shell 编写脚本批量ping ip
- 下一篇: HTTP标准相关的基础概念