Простейший метод лемматизации текста в Scala и Spark
Я хочу использовать лемматизацию для текстового файла:
surprise heard thump opened door small seedy man clasping package wrapped.
upgrading system found review spring 2008 issue moody audio backed.
omg left gotta wrap review order asap . understand hand delivered dali lama
speak hands wear earplugs lives . listen maintain link long .
cables cables finally able hear gem long rumored music .
...
и ожидаемый результат:
surprise heard thump open door small seed man clasp package wrap.
upgrade system found review spring 2008 issue mood audio back.
omg left gotta wrap review order asap . understand hand deliver dali lama
speak hand wear earplug live . listen maintain link long .
cable cable final able hear gem long rumor music .
...
Кто-нибудь может мне помочь ? а кто знает самый простой способ лемматизации, который был реализован в Scala и Spark?