Python - Lexikalische Analyse und Tokenisierung

Ich möchte meinen Entdeckungsprozess hier ein wenig beschleunigen, da dies mein erstes Unternehmen in der Welt der lexikalischen Analyse ist. Vielleicht ist das sogar der falsche Weg. Zuerst beschreibe ich mein Problem: Ich habe sehr große ...

C # /. NET Lexer Generatoren

Wie implementiere ich eine If-Anweisung in Flex / bison

Ich erhalte den Fehler nicht, bitte helfen Sie mir, hier sind die .l- und .y-Dateien. %{ #include "ifanw.tab.h" extern int yylval; %} %% "=" { return EQ; } "!=" { return NE; } "<" { return LT; } "<=" { return LE; } ">" { return GT; } ">=" ...

Schreiben eines Z80-Assemblers - Lexieren von ASM und Erstellen eines Analysebaums mit Komposition?

Ich bin sehr neu im Konzept, einen Assembler zu schreiben, und selbst nachdem ich viel Material gelesen habe, habe ich immer noch Schwierigkeiten, ein paar K...

Wie definiere ich einen Regex in StandardTokenParsers, um den Pfad zu identifizieren?

Ich schreibe einen Parser, in dem ich arithmetische Ausdrücke wie: /hdfs://xxx.xx.xx.x:xxxx/path1/file1.jpg+1 analysieren möchte. Ich möchte das Infix in postfix und do ändern die Berechnung. Ich habe Hilfen von einem Teil von @ benutcode in ...

Wiederholenden Lexer mit Flex @ schreib

Ich bin neuling im flex. Ich versuche einen einfachen Lexer / Scanner mit Flex zu schreiben. Die Lexer-Definition ist unten angegeben. Ich stecke mit Kompilierungsfehlern fest, wie unten gezeigt (YYG-Problem): reentrant.l:/* Definitions */ ...

DFA-basiertes Matching mit regulären Ausdrücken - wie erhält man alle Übereinstimmungen?

Ich habe einen bestimmten DFA, der einen regulären Ausdruck darstellt. Ich möchte den DFA mit einem Eingabestream abgleichen und alle möglichen Übereinstimmu...

Wie finde ich nur "interessante" Wörter aus einem Korpus?

Ich analysiere Sätze. Ich möchte den relevanten Inhalt jedes Satzes kennen, der im Verhältnis zum Rest des Korpus lose als "semi-unique words" definiert ist. Ähnlich wie bei Amazon "statistisch unwahrscheinliche Phrasen", die den Charakter eines ...

Wie verwende ich Backslash-Escapezeichen für neue Zeilen in JavaCC?

Ich habe die Aufgabe, einen lexikalischen Analysator zu erstellen, und ich habe bis auf ein Bit alles zum Laufen gebracht. Ich muss eine Zeichenfolge erstell...

Wie würden Sie die Abseitsregel implementieren?

Ich habe bereits einen Generator geschrieben, der den Trick macht, aber ich möchte wissen, wie die Off-Side-Regel am besten implementiert werden kann. Kurz:Abseitsregel [http://en.wikipedia.org/wiki/Off-side_rule]bedeutet in diesem Zusammenhang, ...