python 利用百度API進(jìn)行淘寶評(píng)論關(guān)鍵詞提取
利用百度API自然語(yǔ)言處理技術(shù)中的評(píng)論觀點(diǎn)抽取方面,對(duì)淘寶購(gòu)物的評(píng)論進(jìn)行分析,把關(guān)鍵詞進(jìn)行提取,方便買(mǎi)家快速了解該商品的相關(guān)特點(diǎn),具體實(shí)現(xiàn)過(guò)程如下:
1、創(chuàng)建相關(guān)新應(yīng)用首先,需要登錄百度AI平臺(tái),創(chuàng)建一個(gè)關(guān)于自然語(yǔ)言處理技術(shù)的應(yīng)用(領(lǐng)取免費(fèi)額度),獲得AppID、API Key和Secret Key如下:
然后下載Python的SDK,然后可以通過(guò)閱讀API的使用手冊(cè)和自然語(yǔ)言處理技術(shù)的觀點(diǎn)抽取相關(guān)案例:
使用百度API時(shí)需要先獲取Access Token,并且需要用到上一步獲取的參數(shù)API Key和Secret Key,在百度給出的使用說(shuō)明中,建議用POST的方式對(duì)URL進(jìn)行請(qǐng)求來(lái)獲取access_token,同時(shí)可以加入Header,該方式支持UTF-8編碼,具體實(shí)現(xiàn)代碼如下:
import jsonimport timeimport requestsfrom urllib.request import urlopen#定義獲取token函數(shù)def get_token(): req = Request(Token_url) req.add_header(’Content-Type’, ’application/json; charset=UTF-8’) try: f = urlopen(req,timeout=5) result_str = f.read().decode(’utf-8’) except URLError as err: print(err) result = json.loads(result_str) #返回Access Token字符串 return result[’access_token’]3、分析評(píng)論并進(jìn)行觀點(diǎn)抽取
在獲取Access Token后就可以使用百度API對(duì)評(píng)論進(jìn)行分析并抽取關(guān)鍵詞。在使用說(shuō)明中,調(diào)用API時(shí)需要輸入?yún)?shù)text和type,其中text為需要分析的文本,而type分成了13各類(lèi)別,具體取值說(shuō)明如下:
因?yàn)楸疚姆治龅氖翘詫氋?gòu)物評(píng)論文本數(shù)據(jù),所以該參數(shù)取值選擇了12。其次,返回格式需要指定輸入為UTF-8編碼,對(duì)于調(diào)用后返回的參數(shù),本文用到了prop、adj和sentiment三個(gè)參數(shù),解釋如下:
具體實(shí)現(xiàn)代碼如下:
def analysis_comment(host,comment): #定義分析類(lèi)別(購(gòu)物) data = json.dumps( { 'text':comment, 'type':12 }) request = Request(url=host,data=data.encode(’utf-8’)) request.add_header(’Content-Type’, ’application/json; charset=UTF-8’) response = urlopen(request) content = response.read().decode(’utf-8’) rdata = json.loads(content) print('--------------------------------------------------------------') print('評(píng)論:') print(' ' + comment) print('n評(píng)論關(guān)鍵字:') #把積極、中性、消極關(guān)鍵詞分類(lèi)出來(lái)并打印 for item in rdata[’items’]: if item[’sentiment’] == 2: print(u' 積極的評(píng)論關(guān)鍵詞:' + item[’prop’] + item[’adj’]) if item[’sentiment’] == 1: print(u' 中性的評(píng)論關(guān)鍵詞:' + item[’prop’] + item[’adj’]) if item[’sentiment’] == 0: print(u' 消極的評(píng)論關(guān)鍵詞:' + item[’prop’] + item[’adj’])4、運(yùn)行結(jié)果
在對(duì)上述函數(shù)進(jìn)行定義后,運(yùn)行改代碼,調(diào)用函數(shù):
if __name__ == ’__main__’: #定義訪問(wèn)url(API Key和Secret Key換成自己的) Comment_url = 'https://aip.baidubce.com/rpc/2.0/nlp/v2/comment_tag' Token_url = 'https://aip.baidubce.com/oauth/2.0/token?grant_type=client_credentials&client_id=your_API_Key&client_secret=your_Secret_Key' A_t = get_token() host = Comment_url + '?charset=UTF-8&access_token='+A_t comment1 = {'text':'版型不錯(cuò),顏色很好看,面料非常舒服而且厚度適中'} comment2 = {'text':'上身效果一般,做工也一般,會(huì)有點(diǎn)起球,沒(méi)有想象中好'} comment3 = {'text':'設(shè)計(jì)做工一點(diǎn)都不好,袖子特別長(zhǎng),衣服比例設(shè)計(jì)非常差,性價(jià)比不高'} comment1 = comment1['text'] comment2 = comment2['text'] comment3 = comment3['text'] analysis_comment(host,comment1) analysis_comment(host,comment2) analysis_comment(host,comment3)
運(yùn)行結(jié)果如下:
然而,從結(jié)果中可以看出,在第二句評(píng)論中,“一般”這個(gè)詞應(yīng)該定義為中性,而該模型將其定義為消極,說(shuō)明該模型在一定程度上仍存在一些瑕疵,這也是后期需要改進(jìn)的地方。
以上就是python 利用百度API進(jìn)行淘寶評(píng)論關(guān)鍵詞提取的詳細(xì)內(nèi)容,更多關(guān)于python 淘寶評(píng)論關(guān)鍵詞提取的資料請(qǐng)關(guān)注好吧啦網(wǎng)其它相關(guān)文章!
相關(guān)文章:
1. ASP刪除img標(biāo)簽的style屬性只保留src的正則函數(shù)2. 解析原生JS getComputedStyle3. jsp EL表達(dá)式詳解4. xpath簡(jiǎn)介_(kāi)動(dòng)力節(jié)點(diǎn)Java學(xué)院整理5. msxml3.dll 錯(cuò)誤 800c0019 系統(tǒng)錯(cuò)誤:-2146697191解決方法6. css代碼優(yōu)化的12個(gè)技巧7. jsp實(shí)現(xiàn)登錄驗(yàn)證的過(guò)濾器8. jsp+servlet簡(jiǎn)單實(shí)現(xiàn)上傳文件功能(保存目錄改進(jìn))9. ASP常用日期格式化函數(shù) FormatDate()10. 輕松學(xué)習(xí)XML教程
