您好,登錄后才能下訂單哦!
本篇內容主要講解“Python中Tf-idf文本特征如何提取”,感興趣的朋友不妨來看看。本文介紹的方法操作簡單快捷,實用性強。下面就讓小編來帶大家學習“Python中Tf-idf文本特征如何提取”吧!
說明
1、TF-IDF是如果詞或詞組出現在文章中的概率較高,而在其他文章中很少出現,那么它就被認為具有很好的類別區分能力,適合進行分類。
2、提取文本特征,用來評估字詞對文件集或某個語料庫中文件的重要性。
實例
def tfidf_demo(): """ 用tfidf的方法進行文本特征提取 :return: """ # 1.將中文文本進行分詞 data = ["一種還是一種今天很殘酷,明天更殘酷,后天很美好,但絕對大部分是死在明天晚上,所以每個人不要放棄今天。", "我們看到的從很遠星系來的光是在幾百萬年之前發出的,這樣當我們看到宇宙時,我們是在看它的過去。", "如果只用一種方式了解某樣事物,你就不會真正了解它。了解事物真正含義的秘密取決于如何將其與我們所了解的事物相聯系。"] data_new = [] for sent in data: data_new.append(cut_word(sent)) # print(data_new) # 2.實例化一個轉換器類 transfer = TfidfVectorizer(stop_words=["一種", '因為']) # 3.調用fit_transform data_final = transfer.fit_transform(data_new) print("data_new:\n", data_final.toarray()) print("特征名字:\n", transfer.get_feature_names()) return None
到此,相信大家對“Python中Tf-idf文本特征如何提取”有了更深的了解,不妨來實際操作一番吧!這里是億速云網站,更多相關內容可以進入相關頻道進行查詢,關注我們,繼續學習!
免責聲明:本站發布的內容(圖片、視頻和文字)以原創、轉載和分享為主,文章觀點不代表本網站立場,如果涉及侵權請聯系站長郵箱:is@yisu.com進行舉報,并提供相關證據,一經查實,將立刻刪除涉嫌侵權內容。