extraño comportamiento de flume-ng
Frecuentes
Visto 698 veces
1
Estoy tratando de agregar registros del servidor web apache en hdfs usando flume-ng ... pero, extrañamente, solo obtengo las primeras filas en hdfs ... más extrañamente, cada vez que inicio el agente, se crean dos archivos y el segundo archivo es siempre más pequeño que el primero. El archivo conf de mi agente se ve así:
agent1.sources = tail
agent1.channels = MemoryChannel-2
agent1.sinks = HDFS
agent1.sources.tail.type = exec
agent1.sources.tail.command = tail -f /var/log/apache2/access.log.1
agent1.sources.tail.channels = MemoryChannel-2
agent1.sinks.HDFS.channel = MemoryChannel-2
agent1.sinks.HDFS.type = hdfs
agent1.sinks.HDFS.hdfs.path = hdfs://localhost:9000/flume
agent1.sinks.HDFS.hdfs.file.Type = DataStream
agent1.channels.MemoryChannel-2.type = memory
Además, no recibo ningún mensaje de error en la terminal ... ¿Es normal o algún error de mi parte?
0 Respuestas
No es la respuesta que estás buscando? Examinar otras preguntas etiquetadas hadoop hdfs flume or haz tu propia pregunta.