首先，谢谢各位的回复。<br><br>To Jester：<br><br>具体数据是一堆人员信息（包括总部和分公司的），现在是要找出特定一个分公司的全部人员中，简称重复的那些人员。然后交给办公室的人，办公室的人弄成唯一的之后，我再用这些唯一性的简称，为他们创建邮件帐号。就是用简称作为 <a href="mailto:aaaa@bbb.com中的aaaa部分">aaaa@bbb.com中的aaaa部分</a>。<br>原始人员信息在一个Notes的NSF库里面，我准备导出成txt处理。
<br><br><br>To <span class="sg">Achilles Xu：<br>看起来您是linux下的高手啊，可惜我对linux了解有限，客户这里也都是MS操作系统的机器。<br></span><br><br><div><span class="gmail_quote">在07-10-26，<b class="gmail_sendername">Achilles Xu</b> <<a href="mailto:formalin14@gmail.com">
formalin14@gmail.com</a>> 写道：</span><blockquote class="gmail_quote" style="border-left: 1px solid rgb(204, 204, 204); margin: 0pt 0pt 0pt 0.8ex; padding-left: 1ex;">cat aaa.log | grep keyword | awk '{print $6}' | sort | uniq -c
<br><br><div><span class="gmail_quote">在07-10-26，<b class="gmail_sendername">Jester</b> <<a href="mailto:jester@perlchina.org" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">jester@perlchina.org
</a>
> 写道：</span><div><span class="e" id="q_115db082df6ca7e1_1"><blockquote class="gmail_quote" style="border-left: 1px solid rgb(204, 204, 204); margin: 0pt 0pt 0pt 0.8ex; padding-left: 1ex;">说的不太清楚，到达比较什么？最好给点example data。
<br>做比较，最好用hash，用array需要大量的循环，非常慢的。<br><br>Jester
<br><br>----- Original Message -----<br>From: "zongzi" <<a href="mailto:honghunter@gmail.com" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">honghunter@gmail.com</a>><br>To: <<a href="mailto:python-chinese@lists.python.cn" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">
python-chinese@lists.python.cn
</a>>; <<a href="mailto:china-pm@pm.org" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">china-pm@pm.org</a>><br>Sent: Friday, October 26, 2007 12:35 PM<br>Subject: [PerlChina] 请教一个问题，脚本编程时候的大数据量比较问题
<br><br><br>> 我现在需要从十几万条数据（文本文件中的行）中，提取有特定关键字的记录，然后刷选出这些记录的特定位置重复的记录。
<br>><br>> 这是一个桌面使用的脚本，系统维护工作中使用的。<br>><br>> 我本来是想直接放进数组，然后一个一个比较的。<br>><br>> 但是突然觉得那样就算不会超出数组大小的上限，也是非常没有效率的。<br>><br>> 所以想请教一下各位，有啥好的处理思路吗？<br>><br>><br>><br>> --<br>> 这是一个有钱人的世界，与我的世界截然不同！
<br>> blog:<a href="http://www.dps4e.com/b/" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">http://www.dps4e.com/b/</a> & <a href="http://blog.dps4e.com" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">
http://blog.dps4e.com</a><br>> 饭否？ <a href="http://fanfou.com/zongzi" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">http://fanfou.com/zongzi</a><br>>
<br><br><br>--------------------------------------------------------------------------------<br><br><br>> _______________________________________________<br>> China-pm mailing list<br>> <a href="mailto:China-pm@pm.org" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">
China-pm@pm.org</a><br>> <a href="http://mail.pm.org/mailman/listinfo/china-pm" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">http://mail.pm.org/mailman/listinfo/china-pm</a><br>_______________________________________________
<br>China-pm mailing list<br><a href="mailto:China-pm@pm.org" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">
China-pm@pm.org</a><br><a href="http://mail.pm.org/mailman/listinfo/china-pm" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">http://mail.pm.org/mailman/listinfo/china-pm</a></blockquote></span></div>
</div><span class="sg"><br><br clear="all"><br>-- <br>---------------------------<br>Achilles Xu<br>
<a href="http://www.lostcode.org" target="_blank" onclick="return top.js.OpenExtLink(window,event,this)">http://www.lostcode.org</a>
</span><br>_______________________________________________<br>China-pm mailing list<br><a onclick="return top.js.OpenExtLink(window,event,this)" href="mailto:China-pm@pm.org">China-pm@pm.org</a><br><a onclick="return top.js.OpenExtLink(window,event,this)" href="http://mail.pm.org/mailman/listinfo/china-pm" target="_blank">
http://mail.pm.org/mailman/listinfo/china-pm</a><br></blockquote></div><br><br clear="all"><br>-- <br>这是一个有钱人的世界，与我的世界截然不同！<br>blog:<a href="http://www.dps4e.com/b/">http://www.dps4e.com/b/</a> & <a href="http://blog.dps4e.com">
http://blog.dps4e.com</a><br>饭否？<a href="http://fanfou.com/zongzi">http://fanfou.com/zongzi</a>