[Moscow.pm] POE::Filter::Line

Ruslan Zakirov ruz bestpractical.com
28 17:33:25 PDT 2008


Набросал бенчмарк, но только простенький и последняя версия в слайдах
была совершенно другой. Надеюсь подправите и вернете назад чтобы я мог
варианты ss1 и ss2 привести к единому варианту ответа, пока они
отличаются.

amd64, gentoo, system malloc.

       Rate   re  ss2  ss1
re   6381/s   -- -51% -81%
ss2 12961/s 103%   -- -62%
ss1 34367/s 439% 165%   --


2008/3/17 Ivan B. Serezhkin <ivan  serezhkin.com>:
> Привет.
>  Может кому и интересно ?
>  получил прирос в 25 раз на больших файлах.
>  Можете поругать стиль =)
>  На очереди сделать нормальный быстрый драйвер.
>  И кстати, это удобный темплейт для написания своих фильтров, например
>  POE::Filter::Log::Postfix =)
>  Использовать так:
>
>  Wheel ...
>  Driver => POE::Driver::SysRW->new( BlockSize => 256*1024*1024) ,
>  Filter => POE::Filter::Regexp->new(qr/RecordSeparator/),
>  ....
>
>
>
>  package POE::Filter::Regexp;
>  use strict;
>
>  sub new {
>  my ($class,$re)=@_;
>  $re ||= qr/\n/;
>  die "Param in new must be a Regexp but this is a ".ref($re) unless ref
>  $re eq 'Regexp';
>  return bless [
>  '', # raw unparsed data
>  [], # ready queue
>  $re,
>  ], $class;
>  }
>
>  sub get {
>  my ($self, $stream) = @_;
>  my @ret;
>  while($self->[0].=shift @$stream){
>  my $p=0;
>  while($self->[0]=~/$self->[2]/g) {
>  next unless $-[0]; #begin of stream
>  push @ret, substr($self->[0], $p, $-[0]-$p);
>  $p=$-[0];
>  }
>  substr($self->[0], 0, $p)=undef;
>  }
>  return \@ret;
>  }
>  1;
>
>  --
>  Ivan B. Serezhkin
>
>  --
>  Moscow.pm mailing list
>  moscow-pm  pm.org | http://moscow.pm.org
>  http://mail.pm.org/mailman/listinfo/moscow-pm



-- 
Best regards, Ruslan.
-----------   -----------
Вложение не в текстовом формате было извлечено&hellip;
Имя     : poe_filter_split.pl
Тип     : application/x-perl
Размер  : 1978 байтов
Описание: отсутствует
Url     : http://mail.pm.org/pipermail/moscow-pm/attachments/20080329/62458892/attachment.bin 


Moscow-pm