Partita negativa del modello multiplo di Grep

Quindi ho un sacco di registri Apache con l'utilizzo del formato di registro standard. Voglio ottenere tutte le linee di registro che non provengono da un crawler web.

Quindi diciamo che ho un file robot_patterns con voci come

Googlebot
msnbot-media
YandexBot
bingbot

Se eseguo il comando grep -f robot_patterns *.logotterrò tutte le voci dai robot che corrispondono ai modelli sopra. La mia lista attuale ha ~ 30 voci di robot e agenti che desidero ignorare.

Ma voglio trovare tutte le voci che NON provengono dai robot . Quindi provo grep -v -f robot_patterns *.loge grep non restituisce risultati. Questo non è ciò che mi aspetto o desidero, e non trovo un modo ovvio per ottenere ciò che voglio. Quando si utilizza l' -vopzione combinata con più pattern in un file, grep restituirà una riga corrispondente solo se corrisponde a OGNI pattern.

Se nel file dei motivi è presente una riga vuota, essa corrisponderà a tutte le righe, senza che venga restituita alcuna riga -v. Questo perché le linee vengono interpretate come espressioni regolari e un'espressione regolare vuota corrisponderà sempre.

-FTuttavia, questo non è un problema , perché grepignora le righe vuote con -F.
-Fcausa grepl'interpretazione delle righe come semplici stringhe da cercare e può accelerare grepse non sono necessarie espressioni regolari.

Puoi provare:

grep -vE 'Googlebot|msnbot-media|YandexBot|bingbot' yourlogfile