выбрать записи из лога за определенный период времени

[mouserok]

добрый день
такой вопрос
как выбрать записи из лога за определенный период времени

есть лог

Код: [Выделить]

127.0.0.1 0.005 [09/Jan/2014:09:29:25 +0200] "POST
127.0.0.1 0.005 [09/Jan/2014:10:54:12 +0200] "POST
127.0.0.1 0.005 [09/Jan/2014:11:21:22 +0200] "POST
127.0.0.1 0.005 [09/Jan/2014:11:32:45 +0200] "POST
127.0.0.1 0.007 [09/Jan/2014:12:21:54 +0200] "POST
как выбрать записи с
09/Jan/2014:10:54:12
по
09/Jan/2014:11:32:45

[Scorry]

Extract data from log file in specified range of time
Ну и по такой текстовой строке поиск. Регэкспы, греп вот это всё.

[Freezeman]

Что-то типа такого, но там могут быть проблемы с двоеточием:

Код: [Выделить]

cat ./blabla.log | egrep -i "09\/Jan\/2014:(10:5|11:[0123])"

[mouserok]

можно пример ??
должен был выбрать с 10:00 до 11:59, а на деле выбрал ВСЁ 

Код: [Выделить]

grep "09/Jan/2014:[10-11]"

[Freezeman]

Код: (bash) [Выделить]

--> cat ./testlog.log | egrep "09\/Jan\/2014:(10|11)"
127.0.0.1 0.005 [09/Jan/2014:10:54:12 +0200] "POST
127.0.0.1 0.005 [09/Jan/2014:11:21:22 +0200] "POST
127.0.0.1 0.005 [09/Jan/2014:11:32:45 +0200] "POST


[mouserok]

в данном случае прийдется перебирать все числа

ситуация бывает не предсказуема и лог может вырасти больших размеров
по этому, есть необходимость в указании периода до 1 секунды

как выбрать записи с
09/Jan/2014:10:54:12
по
09/Jan/2014:11:32:45

[Freezeman]

Рег.выражения в Википедии

Если кратко:
1) круглые скобочки определяют группу (как в математике)
2) верт. черта -- или
3) в квадратных скобочках указывается диапазон или тупо перечисление
4) некоторые символы в тексте надо экранировать: круглые, фигурные и квадратные скобки, прямой и обратный слэши, точку, иногда тире
5) в фигурных скобках указывается количество символов
6) grep вроде не понимает спецсимволов \d -- используйте симв.классы POSIX (в статье есть табличка-картинка)
остальное все есть в статье
Пользователь решил продолжить мысль 09 Января 2014, 20:15:27:Самое важное: регулярные выражения работают с символами, т.е. 12 -- это 1 и 2.
Пользователь решил продолжить мысль 09 Января 2014, 20:18:36:

Код: (bash) [Выделить]

--> cat ./testlog.log | grep "09\/Jan\/2014\:1[01]"
127.0.0.1 0.005 [09/Jan/2014:10:54:12 +0200] "POST"
127.0.0.1 0.005 [09/Jan/2014:11:21:22 +0200] "POST"
127.0.0.1 0.005 [09/Jan/2014:11:32:45 +0200] "POST"

--> cat ./testlog.log | grep -E "09\/Jan\/2014:11:[1-9]{2}"
127.0.0.1 0.005 [09/Jan/2014:11:21:22 +0200] "POST"
127.0.0.1 0.005 [09/Jan/2014:11:32:45 +0200] "POST"

--> cat ./testlog.log | grep -E "^[^A-Za-z]+\s\[09\/[A-Za-z]+\/2014:[0-9]{2}:[0-9]{2}"
127.0.0.1 0.005 [09/Jan/2014:09:29:25 +0200] "POST"
127.0.0.1 0.005 [09/Jan/2014:10:54:12 +0200] "POST"
127.0.0.1 0.005 [09/Jan/2014:11:21:22 +0200] "POST"
127.0.0.1 0.005 [09/Jan/2014:11:32:45 +0200] "POST"
127.0.0.1 0.007 [09/Jan/2014:12:21:54 +0200] "POST"



[mouserok]

спасибо за столь емкий ответ
НО

cat 1.txt | grep -E "^[^A-Za-z]+\s\[09\/[A-Za-z]+\/2014:[01]{2}:[0-9]{2}"
выберет не только за 10 часов, но и за 01 и 11

1.txt

Код: [Выделить]

127.0.0.1 0.005 [09/Jan/2014:01:21:22 +0200] "POST"
127.0.0.1 0.005 [09/Jan/2014:09:29:25 +0200] "POST"
127.0.0.1 0.005 [09/Jan/2014:10:54:12 +0200] "POST"
127.0.0.1 0.005 [09/Jan/2014:11:21:22 +0200] "POST"
127.0.0.1 0.005 [09/Jan/2014:11:32:45 +0200] "POST"
127.0.0.1 0.007 [09/Jan/2014:12:21:54 +0200] "POST"

вот что получим 

Код: [Выделить]

127.0.0.1 0.005 [09/Jan/2014:01:21:22 +0200] "POST"
127.0.0.1 0.005 [09/Jan/2014:10:54:12 +0200] "POST"
127.0.0.1 0.005 [09/Jan/2014:11:21:22 +0200] "POST"
127.0.0.1 0.005 [09/Jan/2014:11:32:45 +0200] "POST"


[Freezeman]

mouserok,
Ну так оставьте только десятку:

Код: (bash) [Выделить]

--> cat ./testlog.log | grep "09\/Jan\/2014\:10"Помните, я писал про то, что регулярки работают с символами? У вас в логе, где 10 часов, после первого двоеточия идет единица, а затем ноль (этого достаточно).

[mouserok]

эмм ... формирование даты выходит сложным чтоб учесть все погрешности

тут бы sh файл c параметрами(начало и конец дат) запустить чтоб получить нужный резалт
Пользователь решил продолжить мысль 11 Января 2014, 12:45:29:вот ответ на мой вопрос

Код: [Выделить]

sed -n '/2014:10:01:/ , /2014:10:11:/p' file.logПользователь решил продолжить мысль 11 Января 2014, 13:13:12:а вот awk

Код: [Выделить]

awk '/11\/Jan\/2014:10:01:/, /11\/Jan\/2014:10:11:/' file.log

[Freezeman]

mouserok,
Ну так всё равно регулярки, но для поиска по дате возможно и удобней.