Estou tentando obter os bigrams nas frases usando frases no Gensim da seguinte maneira.

from gensim.models import Phrases
from gensim.models.phrases import Phraser
documents = ["the mayor of new york was there", "machine learning can be useful sometimes","new york mayor was present"]

sentence_stream = [doc.split(" ") for doc in documents]
#print(sentence_stream)
bigram = Phrases(sentence_stream, min_count=1, threshold=2, delimiter=b' ')
bigram_phraser = Phraser(bigram)

for sent in sentence_stream:
    tokens_ = bigram_phraser[sent]
    print(tokens_)

Apesar de pegar "new", "york" como "new york", não pega "machine", aprendendo como "machine learning"

No entanto, noexemplo mostrado no site da Gensim eles foram capazes de captar as palavras "máquina", "aprendizado" como "aprendizado de máquina".

Informe-me como obter o "aprendizado de máquina" como um bigram no exemplo acima