Comments on: grep и регулярните изрази http://marto.lazarov.org/howto/2008/grep-regular-expressions.html Not just another WordPress weblog Wed, 04 Jan 2012 09:54:24 +0000 hourly 1 http://wordpress.org/?v=3.3.1 By: Марто http://marto.lazarov.org/howto/2008/grep-regular-expressions.html/comment-page-1#comment-978 Марто Fri, 31 Oct 2008 11:31:43 +0000 http://marto.lazarov.org/?p=308#comment-978 Копам, копам;) Тествания файл е 448M, рама total 384МБ (става дума за XEN сървър) В крайна сметка до нищо по-различно не доведаха и допълнителните тестове: time grep -E '\[[0-9]+/Jul' real 0m29.342s real 0m28.208s real 0m28.631s real 0m30.524s time grep -E '^[0-9\.]+ \- \- \[[0-9]+/Jul' real 2m1.908s real 2m6.382s real 2m0.161s real 2m4.820s (тестовете са поред - първо пускам 4 пъти еидния, след което 4 пъти другия) Копам, копам;)

Тествания файл е 448M, рама total 384МБ
(става дума за XEN сървър)
В крайна сметка до нищо по-различно не доведаха и допълнителните тестове:

time grep -E ‘\[[0-9]+/Jul’

real 0m29.342s
real 0m28.208s
real 0m28.631s
real 0m30.524s

time grep -E ‘^[0-9\.]+ \- \- \[[0-9]+/Jul’

real 2m1.908s
real 2m6.382s
real 2m0.161s
real 2m4.820s

(тестовете са поред – първо пускам 4 пъти еидния, след което 4 пъти другия)

]]> By: mail123456 http://marto.lazarov.org/howto/2008/grep-regular-expressions.html/comment-page-1#comment-973 mail123456 Thu, 30 Oct 2008 16:43:41 +0000 http://marto.lazarov.org/?p=308#comment-973 дали ? твърдението ти е вярно ... НО само след първото прочитане на въпросния файл, и при положение че нямаш други "гладни" за RAM процеси ... ако имаш достатъчно RAM твърде е вероятно въпросния файл да се "cache" ... айде поздрави и копай повече (ударение е на О-то) :) дали ?
твърдението ти е вярно … НО само след първото прочитане на въпросния файл, и при положение че нямаш други “гладни” за RAM процеси … ако имаш достатъчно RAM твърде е вероятно въпросния файл да се “cache” … айде поздрави и копай повече (ударение е на О-то) :)

]]> By: Марто http://marto.lazarov.org/howto/2008/grep-regular-expressions.html/comment-page-1#comment-970 Марто Thu, 30 Oct 2008 16:23:41 +0000 http://marto.lazarov.org/?p=308#comment-970 Както писах в поста идеята да "разкрася" регулярния израз бе да се застраховам от грешки (наличието на "неприлични" символи в Get адреса) В крайна сметка за теста вършат работа и двете (разбира се по-"красивия" е по-бавен по разбираеми причини). Това за tmpfs-a е добра идея, имам едни заделени 256мб ще ги опъна за теста. Въпреки всичко забавянето при четене на диска е достатъчно еднакво и за extended и за perl pattern-a. Не смятам, че от там идва разликата между двете:) Както писах в поста идеята да “разкрася” регулярния израз бе да се застраховам от грешки (наличието на “неприлични” символи в Get адреса) В крайна сметка за теста вършат работа и двете (разбира се по-”красивия” е по-бавен по разбираеми причини).
Това за tmpfs-a е добра идея, имам едни заделени 256мб ще ги опъна за теста.

Въпреки всичко забавянето при четене на диска е достатъчно еднакво и за extended и за perl pattern-a. Не смятам, че от там идва разликата между двете:)

]]> By: mail123456 http://marto.lazarov.org/howto/2008/grep-regular-expressions.html/comment-page-1#comment-968 mail123456 Thu, 30 Oct 2008 16:02:07 +0000 http://marto.lazarov.org/?p=308#comment-968 ако ще правиш тестове на бързината на grep се абстрахирай от диска ... в случая вадиш заключения на базата на грешна тестова постановка ... съгласен съм че egrep е по-бавен, но е абсурдо твърдението за 66 пъти разлика ... в твоите примери си пуснал egrep в началото ... ако не си "изчел" преди това този файл това определено ще доведе до внасянето на огромна грешка (забавяне) при четенето от диска ... при повторното пускане на egrep-а с другия pattern съм вече по-склонен да се съглася ... би било хубаво да повтаряш по няколко пъти едно и също за да сведеш до минимум случайните грешки (като например cashe flush) ... още по-хубаво би било ако го качиш в някой RAM диск ... в случая броя на core-тата на CPU-тата е без голямо значение ... имаш 1 процес в примерите които си дал ... CPU cache и RAM това се иска ... и btw regex-a изглежда загадъчно и красиво ... но няма нужда да го блъскаш с много правила ... keep it simple :) ако ще правиш тестове на бързината на grep се абстрахирай от диска … в случая вадиш заключения на базата на грешна тестова постановка …
съгласен съм че egrep е по-бавен, но е абсурдо твърдението за 66 пъти разлика …
в твоите примери си пуснал egrep в началото … ако не си “изчел” преди това този файл това определено ще доведе до внасянето на огромна грешка (забавяне) при четенето от диска …
при повторното пускане на egrep-а с другия pattern съм вече по-склонен да се съглася … би било хубаво да повтаряш по няколко пъти едно и също за да сведеш до минимум случайните грешки (като например cashe flush) … още по-хубаво би било ако го качиш в някой RAM диск …

в случая броя на core-тата на CPU-тата е без голямо значение … имаш 1 процес в примерите които си дал … CPU cache и RAM това се иска …

и btw regex-a изглежда загадъчно и красиво … но няма нужда да го блъскаш с много правила … keep it simple :)

]]> By: Марто http://marto.lazarov.org/howto/2008/grep-regular-expressions.html/comment-page-1#comment-967 Марто Thu, 30 Oct 2008 15:38:18 +0000 http://marto.lazarov.org/?p=308#comment-967 Да добява и това: cat /etc/SuSE-release openSUSE 10.3 (X86-64) VERSION = 10.3 В интерес на истината в къщи имам същата машина Pentium III (Coppermine) на 696.997MHz. Трябва да бутна някое логче там и да пробвам. Да добява и това:
cat /etc/SuSE-release
openSUSE 10.3 (X86-64)
VERSION = 10.3

В интерес на истината в къщи имам същата машина Pentium III (Coppermine) на 696.997MHz. Трябва да бутна някое логче там и да пробвам.

]]>