lexical-analysis

4La chaleur

1Répondre

Existe-t-il un moyen de renvoyer plusieurs jetons dans OCamlLex? J'essaye d'écrire un lexeur et un analyseur pour un langage basé sur l'indentation, et je voudrais que mon lexer retourne plusieurs jet

2La chaleur

2Répondre

Variantes lexème correspondantes avec Antlr3

J'essaie de faire correspondre les mesures dans le texte d'entrée en anglais, en utilisant Antlr 3.2 et Java1.6. J'ai des règles lexicales comme ce qui suit: fragment MILLIMETRE : 'millimetre' |

10La chaleur

4Répondre

Comment puis-je trouver seulement des mots "intéressants" d'un corpus?

Je suis en train d'analyser des phrases. Je veux connaître le contenu pertinent de chaque phrase, défini vaguement comme des «mots semi-uniques» par rapport au reste du corpus. Quelque chose de simila

16La chaleur

1Répondre

Différence pratique entre les règles de l'analyseur et les règles lexer dans ANTLR?

Je comprends la théorie derrière la séparation des règles et des règles de l'analyseur en théorie analyseurs lexicaux, mais quelles sont les différences pratiques entre ces deux déclarations dans ANTL

5La chaleur

3Répondre

Analyseurs lexicaux basés sur C/C++/C#/VB

Pendant les heures de conception du compilateur, j'utilise JLex comme générateur d'analyseur lexical, qui produit un programme Java à partir d'une spécification lexicale. Je voudrais savoir s'il exist

0La chaleur

1Répondre

Comment utiliser JRuby org.jruby.lexer.yacc.RubyYaccLexer

J'utilise ripper pour faire lexie ruby-code dans mri-1.9. *, Je voudrais faire la même chose dans JRuby, j'ai remarqué qu'il y a cette org.jruby.lexer.yacc.RubyYaccLexer utilisé dans org.jruby.parser.

0La chaleur

1Répondre

Javascript Compiler/Lexer

Je suis à la recherche d'un compilateur Javascript/ECMAScript open-source ou d'un analyseur lexical, afin de compiler du code javascript vers un exécutable pouvant fonctionner sous Linux. Je comprends

1La chaleur

3Répondre

Comment détecter des informations vulnérables/personnels dans les CV par programme (par analyse syntaxique/analyse syntaxique etc ...)

Circonstance plus précis: Comment détecter des noms de personnes (semble comme simple cas de nom extraction d'entité?) Comment détecter des adresses: ma meilleure estimation - trouver le code postal (

0La chaleur

3Répondre

C Analyseur lexical en python

Je crée un analyseur C Lexical en utilisant python dans le cadre du développement d'un analyseur.Voici mon code, j'ai écrit quelques méthodes pour identifier des mots-clés, nombres, opérateurs, etc ..

3La chaleur

1Répondre

Comment combiner Regexp et mots-clés dans les combinateurs d'analyseurs Scala

J'ai vu deux approches pour construire des analyseurs syntaxiques à Scala. Le premier est de s'étendre à partir de RegexParsers et de définir vos modèles lexicaux gagnés. Le problème que je vois avec