Adicionando novo texto ao Sklearn TFIDIF Vectorizer (Python)
Existe uma função para adicionar ao corpus existente? Eu já gerei minha matriz, estou procurando adicionar periodicamente à mesa sem reprocessar todo o sha-bang
por exemplo;
articleList = ['here is some text blah blah','another text object', 'more foo for your bar right now']
tfidf_vectorizer = TfidfVectorizer(
max_df=.8,
max_features=2000,
min_df=.05,
preprocessor=prep_text,
use_idf=True,
tokenizer=tokenize_text
)
tfidf_matrix = tfidf_vectorizer.fit_transform(articleList)
#### ADDING A NEW ARTICLE TO EXISTING SET?
bigger_tfidf_matrix = tfidf_vectorizer.fit_transform(['the last article I wanted to add'])