Preguntas con respuestas sobre "lexical-analysis"

He escrito un script que calcula la diversidad léxica y algunas otras estadísticas significativas. Mi problema es que en algunos archivos falla cuando golpea lo que solo puedo suponer que es una línea json incorrecta. Cada uno de mis archivos de datos contiene cadenas de json, cada una en sus propias líneas. El campo significativo para estos...

Soy nuevo en leer y analizar en su totalidad más allá de los casos pequeños. Con esa advertencia dada, mi problema es que estoy tratando de analizar un dialecto similar a JSP en Scala. Estoy leyendo el flujo de caracteres y cuando llego a una etiqueta similar a JSP, estoy atascado. ...

Recientemente hice la siguiente observación: ...

Como ejercicio educativo, me propuse escribir un lexer de Python en Python. ...

hola chicos, soy muy nuevo en el esquema de programación, así que estoy tratando de construir un analizador léxico en el esquema que básicamente lee una lista, por ejemplo <SUMA + 34> y el resultado sería algo como esto...

Entonces, para un proyecto, estoy tratando de crear un analizador léxico simple para un lenguaje de programación falso que se lee desde un archivo. Hice una pregunta a principios de semana sobre cómo puedo implementar un programa de este tipo y alivié una respuesta que me decía: ...

Tengo una tarea para crear un analizador léxico que traduzca el idioma en una serie de tokens. Estoy usando java.util.regex para recorrer una cadena encontrando los diferentes tokens y los coloco en una matriz que revisaré y usaré para asignarles sus respectivos tokens. Aquí está ...

hola chicos, soy un principiante en java :) así que lo que estoy haciendo es que estoy tratando de construir un analizador léxico usando java pero estoy atascado tratando de leer el siguiente carácter en la cadena. Traté de usar la función de búsqueda para verificar pero no sé cómo. usarlo en el principal. este es el codigo...

...

Estoy usando Visual Studio 2010 para C++. Implementé un código para un analizador léxico para la programación en C, pero recibí un error que dice "falta el especificador de tipo - int asumido. Nota: C++ no es compatible con default-int". ¿Hay algún problema con mi código? o simplemente tengo que cambiar el compilador? ...

Estoy implementando un analizador en el que el escáner (implementado con Flex) no reconoce todos los tokens a la vez. Solo está tomando el primer token de la entrada y terminando. ¿Alguien puede ayudarme a resolver esto? Aquí está mi archivo ".lex": ...

Estoy construyendo un sitio simple donde los usuarios pueden publicar comentarios sobre "cosas". ...

Intento hacer mi trabajo, que es "Análisis de código fuente en aplicaciones Java", donde analizo archivos .java o .txt sin compilar. Creé este tema, donde aprendí que voy por el camino equivocado. Por lo que escuché, pensé que la mejor manera de lidiar con el uso de ANTLR o JavaCC, pero no puedo entender ...

Casi todos los compiladores devolverán un número de línea junto con un mensaje de error. Me pregunto en la perspectiva del diseño del compilador, ¿cómo maneja el compilador el mensaje del número de línea en términos de seguir diferentes fases? Gracias. ...

No estoy seguro de si esto es posible, pero ¿hay alguna forma (biblioteca preescrita o esquema de detección científico conocido) de analizar algunas oraciones de texto y determinar si las oraciones riman? Un colega sugirió comparar la primera y la última palabra y usar un diccionario de sinónimos, pero no entiendo muy bien cómo...

Recientemente estoy lidiando con el registro de acceso de nginx analizando el trabajo con python. ...

Estoy tratando de usar ANTLR para analizar un gran conjunto de código usando la gramática completa de Java. Dado que ANTLR necesita abrir todos los archivos fuente y escanearlos, me pregunto si también puede devolver líneas de código. ...

hola, estoy tratando de hacer un analizador simple y usando lex y yacc. la cosa es que quiero imprimir mis propios mensajes de error en lugar del símbolo de error usado por yacc que imprime el error de sintaxis. por ejemplo, este es mi código yacc; ...

Necesito una biblioteca Java que compare 2 textos diferentes con algunas similitudes y me diga si están relacionados o no. ...

Actualmente estoy buscando herramientas (ya sean programas de software o marcos) sobre cómo hacer un compilador usando java. C ++ será el idioma que leerá mi compilador. Ya tengo la GUI preparada. Pero todavía no tengo ni idea de cómo empezar a crear un compilador. ...

Estoy tratando de imprimir lexemas y tokens usando el analizador léxico "flex" y el problema es que puedo encontrar lexemas y solo puedo imprimir tokens, no lexemas. este es el código simple que uso como se puede ver a continuación ...

Tengo este analizador para el análisis de cadenas usando la biblioteca Haskell Parsec. ...

Supongamos que tengo una ventana que muestra un UserControl. UserControl contiene un cuadro de texto que debe hacer referencia a un estilo con nombre definido en Window.Resources: ...

Creo que entiendo (aproximadamente) cómo funcionan los analizadores de descenso recursivos (por ejemplo, los combinadores de analizadores de Scala): analizas la cadena de entrada con un analizador, y ese analizador llama a otros analizadores más pequeños para cada "parte" de toda la entrada, y así sucesivamente, hasta llegar a los analizadores de bajo nivel que generan directamente ...

La mayoría de los recursos sobre analizadores léxicos y analizadores ilustran el uso de flujos para comunicarse entre ellos (o eso tengo entendido). ...

Estoy en una clase fabulosa en las redes sociales y estamos usando Python como nuestro medio de codificación. ¡Realmente me encanta, pero soy un principiante total! He buscado y buscado esta respuesta, pero no la obtengo del todo. ...

/ * Definiciones regulares * / ...

Tengo la siguiente línea de código: ...

Estoy trabajando para dividir un archivo de origen en tokens, en particular, escaneando identificadores. Sin embargo, existe el requisito de que los identificadores tengan MÁS DE 30 caracteres. Cuando un identificador alcanza esta longitud, hago una excepción con el mensaje: 'Los identificadores solo pueden tener 30 caracteres, ...

Necesito analizar algunos archivos fuente de C ++ para generar información muy básica. Lo que estoy tratando de hacer es así: ...