運行結(jié)果:

仔細(xì)觀察不難發(fā)現(xiàn),is this這類的停止詞在變換后數(shù)值變小了。
??!注意??!跟處理類別變量、數(shù)值變量一樣,我們在處理文本變量時,必須將訓(xùn)練集上的變換方式原封不動地作用到驗證集或測試集上,而不能重新對驗證集或者測試集做變換。比如在得到上面的vectorizer3后,我們將其作用在一個新的樣本 ['a new sentence']上,代碼如下
print vectorizer1.transform(['a new sentence']).toarray()