Como tokenizar gramáticas, como em monaco.editor.tokenize, para uso em extensões
Eu usei otokenizer em Mônaco, mas não vejo que seja acessível no vscode. Isso seria útil para provedores de ajuda de conclusão / assinatura. Como posso tokenizar uma gramática?