Tempo Real analisador de log - arquivo de acesso a cada poucos segundos
-
21-12-2019 - |
Pergunta
Eu estou escrevendo uma simples script em bash, para analisar alguns logs em tempo real e se perguntando sobre como abordar o fato de que a cada poucos segundos, eu tenho que encontrar o local do arquivo que eu terminar a leitura de tempo anterior.Agora eu estou fazendo algo parecido com isto:
LOG_FILE=path_to_file
DELAY=1 #time between refresh
LINES=100 #lines to read at one cycle
LAST=$(tail -n 1 $LOG_FILE)
IFS=$'\n'
while true;
do
clear;
found=0
LOG=$(tail -n $LINES $LOG_FILE)
for line in $LOG
do
if [ $line = $LAST ]; then
found=1
continue
fi
if [ $found = 0 ]; then
continue
fi
#Analyzing counting nd stuff.
echo "$stuff"
done
LAST=$line
sleep $DELAY;
done
Então, a cada ciclo, estou buscando algumas número de linhas do final do arquivo e olhando para aquele que foi o último de uma execução anterior.Isso vai funcionar muito bem, até que em um ciclo, que definiu o número de linhas serão adicionadas.Que eu possa sempre dizer algo como LINES=10000
mas neste caso não será tousands de inútil é executada para determinar se ainda não achei a última linha de execução anterior.Eu estou querendo saber se eu posso fazer isso de forma mais eficiente?
Solução
Eu acho que você está olhando para hts como este:
#!/bin/bash
GAP=10 #How long to wait
LOGFILE=$1 #File to log to
if [ "$#" -ne "1" ]; then
echo "USAGE: `basename $0` <file with absolute path>"
exit 1
fi
#Get current long of the file
len=`wc -l $LOGFILE | awk '{ print $1 }'`
echo "Current size is $len lines."
while :
do
if [ -N $LOGFILE ]; then
echo "`date`: New Entries in $LOGFILE: "
newlen=`wc -l $LOGFILE | awk ' { print $1 }'`
newlines=`expr $newlen - $len`
tail -$newlines $LOGFILE
len=$newlen
fi
sleep $GAP
done
exit 0