A.統(tǒng)計(jì)詞頻率
B.刪除停止詞與低頻詞
C.中文分詞
D.潛在語義分析
E.計(jì)算詞頻率-逆文文件頻率
您可能感興趣的試卷
你可能感興趣的試題
A.停止詞、低頻詞
B.主題模型、詞袋模型
C.文分詞、英文分詞
D.詞頻率、逆文文件頻率
E.詞頻率向量、逆頻率向量
A.判定樹
B.支持向量機(jī)
C.K均值聚類
D.樸素貝葉斯
E.二叉樹
A.詞頻統(tǒng)計(jì)的方法中,對于要將單一主題的文文件從海量的語料庫中發(fā)掘出來是很輕易的,不需要借助額外的技術(shù)來獲取詞頻向量
B.主題模型(topicmodel)是描述語料庫及其中潛在的一類數(shù)字模型,首先考慮到的是如何用數(shù)學(xué)語言去描述一個主題
C.詞頻向量是由所有的詞頻組合在一起,同時,詞頻為該字詞在文本出現(xiàn)的總數(shù)除以文檔中的總詞語數(shù)
D.文黨的詞頻、主題的比重、主題的詞頻三者之間的關(guān)系為D(文檔詞頻)=W(主題比重)*T(主題詞頻)
E.文本挖掘技術(shù)基本上屬于無監(jiān)督學(xué)習(xí)方法
A.詞袋模型(bag-of-wordsmodel)適用于描述文本的一個簡單的數(shù)學(xué)模型,也是常用的一種文本特征提取方式
B.詞袋模型對文文件進(jìn)行了很大程度的簡化,但一定程度上仍然保留了文文件的主題信息
C.對文本建構(gòu)詞袋之前,需要先借著額外的手段將文本中的詞語分開,這項(xiàng)技術(shù)稱之為分詞(word-segment)
D.在文檔中,例如『的』、『也』這樣構(gòu)成一個句子的基本字詞對文文件的主題區(qū)分并無幫助,且不攜帶任何主題信息的高頻詞稱為停止詞(Stopword),在構(gòu)建詞典時必須去除
E.一個詞在文文件中出現(xiàn)的頻率稱為詞頻率(termfrequency)其定義為該詞語在文本中出現(xiàn)的次數(shù)與這段文本中詞語的總數(shù)的商
A.手肘法
B.刪除法
C.分類樹
D.矩陣乘法
E.層次聚類算法
最新試題
在深度學(xué)習(xí)模型中,用于提高模型訓(xùn)練穩(wěn)定性的技術(shù)是:()。
Xpath 語言有()的構(gòu)成。
集成學(xué)習(xí)在強(qiáng)化學(xué)習(xí)中的一個常見應(yīng)用是什么()?
度量泛化能力的好壞,最直觀的表現(xiàn)就是模型的()。
反向傳播算法的主要目的是什么()?
在神經(jīng)網(wǎng)絡(luò)中,激活函數(shù)ReLU 的特點(diǎn)是什么()?
在自然語言處理中,哪些技術(shù)可以用于改善實(shí)體識別和文本生成任務(wù)的性能()?
屬性值約束主要有()。
進(jìn)行模型訓(xùn)練之前,需要先把標(biāo)注好的數(shù)據(jù)進(jìn)行分類。訓(xùn)練有監(jiān)督學(xué)習(xí)模型時會將數(shù)據(jù)集劃分為()。
在自然語言處理任務(wù)中,哪些技術(shù)適用于改善實(shí)體識別和關(guān)系抽取的效果()?