Revision de informes

[zarco15]

Hola a todos, me asignaron un proyecto que trata sobre la revisión de logs en formato .csv y .xls
La cuestión es que tenemos varios automatismos funcionando que desempeñan distintas tareas.
Cada uno de estos automatismos crea un log en los formatos que menciono al principio del texto, con resultados "OK" y "ERROR".
Lo que pasa es que al tener tantos automatismos trabajando, es demasiado tedioso ir log a log comprobando estos resultados y que se ha ejecutado correctamente.
Tengo en mente la creación de un script que chequee, dentro de estos logs, los resultados. En consecuencia desearía que se cree un informe con estos resultados.

Si hay error lo podríamos detectar por el peso del archivo .csv/.log porque normalmente suele pasar de 1/2KB.

¿Alguien puede darme alguna idea mejor? En cuanto a la creación del script, agradecería un poco de luz a lo de que chequea el peso del archivo.

Muchísimas gracias de antemano,
Salu2!

[AlvaroG]

Pues si cada programa escribe su condición de error o éxito, no debería ser necesario probar el tamaño del log.

Ya tenés cada programa escribiendo su estado y su log particular, el resto debería ser lo más sencillo. Si acaso ayudaría que comentes en qué lenguaje estás pensando hacerlo.


Saludos.

[zarco15]

Hola AlvaroG, antes de nada muchas gracias por tu respuesta.
Queda descartada la solución de comprobar el peso del archivo generado. Ya obtengo los resultados en el .csv como comenté.
En el lenguaje a utilizar está la clave... estuve pensando en hacerlo en batch, ya que tenemos algunos automatismos utilizando ese lenguaje (y además me defiendo un poco :') )
¿Cómo lo plantearías tu, AlvaroG? estoy algo verde en lo referido a la búsqueda de textos o cadenas de caracteres en batch :(

Muchísimas gracias de nuevo.
Saludos!

[AlvaroG]

Pues en batch no tengo experiencia, más allá de que sé que se puede hacer. El lenguaje que elijas dependerá de qué tengas disponible, pero pienso que un lenguaje más capaz (Python es mi predilecto) te permitirá hacer más cosas de forma sencilla. Por ejemplo, si quisieras enviar el reporte por correo, en Python solamente tendrías que escribir un par de líneas de código, mientras que en batch, en caso de ser posible, seguramente sea más complejo.

[zarco15]

Hola de nuevo AlvaroG,

No me importaría utilizar Python como lenguaje, ¿qué truco/os me puedes proporcionar? Estoy con un tuto de python a vueltas

muchas gracias por tu atención, así da gusto.

Saludos! que tengas un buen día

[AlvaroG]

Pega un ejemplo del log que querés analizar, y armamos algo rápido

[zarco15]

El log que obtengo esta en formato .csv delimitado por ";".

Te muestro un ejemplo:

**********************
2015/03/02 01:10:30.75"CIERRE_ACC+CIERRE_EXP";"ACTUALIZAR/CERRAR";"1-JEHW95";"1-JEQ91D";"OK""

2015/03/02
01:11:25.77"SOLICITUD POSVENTA: FECHA FIN LIMITE SOLUCION - CIERRA LIMITE SOLUCION";"ACTUALIZAR";"1-JVWJN3";"1-JVY48E";"OK"
***********************
Muchísimas gracias por tu ayuda AlvaroG

Saludos!

[AlvaroG]

bueno, entonces por ejemplo en Python podés usar el módulo "csv" para leer el archivo línea por línea y generar una lista de los campos de cada línea.
La fecha la convertís a un objeto de fecha con datetime.datetime.strptime() (es más sencillo si necesitás hacer cálculos con esa fecha, por ejemplo ver si el programa falla x veces en una hora)

Un código rápido que solamente extrae y muestra los campos:

Código Python:

# -*- coding: utf-8 -*-
import csv
from datetime import datetime
 
with open('log.csv') as archivo_log:
        lector_csv = csv.reader(archivo_log, delimiter=';')
        for row in lector_csv:
                # obtenemos el primer campo hasta el punto (también podemos hacerlo hasta la comilla)
                campo_hora = row[0].split('.')[0]
                fecha_hora_registro = datetime.strptime(campo_hora, '%Y/%m/%d %H:%M:%S')
                # el estado es el último campo de la línea, quitamos las comillas por estética
                estado_registro = row[-1].strip('"')
                # aquí podrías hacer que ese OK se imprima de color verde y un estado de ERROR se imprima de color rojo, por ejemplo
                print fecha_hora_registro, estado_registro
 

[zarco15]

Hola AlvaroG, muchas gracias por tu ayuda. Lo he estado mirando y pienso que este lenguaje es la mejor opción para hacerlo.
También tengo informes .csv separados los campos por tabulación. Busqué en información en SanGoogle sobre cómo hacer que python distinga las tabulaciones pero no he sido capaz. El "csv.excel tab" no anda...

Saludos! buenos días

[AlvaroG]

para cambiar el caracter que se usa como delimitador de campos, usa el parámetro "delimiter" de csv.reader(), tal y como lo usé arriba para indicar que se utilizara el punto y coma