全球主机交流论坛

标题: 谁会正则表达式替换啊,帮忙替换份文本! [打印本页]

作者: 你懂的 时间: 2012-8-16 21:58
标题: 谁会正则表达式替换啊,帮忙替换份文本!
(, 下载次数: 580)

里面的文本是一份网址列表!
重复的太多!希望大虾给整理出一份唯一的网站列表!

作者: ericls 时间: 2012-8-16 22:07
直接 sort uniq

作者: ericls 时间: 2012-8-16 22:11
只要域名部分？

作者: ericls 时间: 2012-8-16 22:16
结果
   1 41123.com
   36 blog.sdwu.edu.cn
127 cnweibo.com
189 eeeeee.com.cn
   43 haobaob.com
   36 lolododo.com
646 s.ghseo.cn
   29 t.0762r.com
   42 t.51youcai.com
   43 t.633cn.com
141 t.cps.com.cn
   69 t.dfvb.cn
181 t.dsooo.com
   19 t.dz000.com
   9 t.feiyoo.com
   3 t.hty.tv
   15 t.jrryw.com
   66 t.js.boosj.com
   40 t.jxstnu.com
   1 t.laiwu.com.cn
   7 t.lqezb.gov.cn
107 t.luoao.com
216 t.mxwz.com
   93 t.pcshe.com
   54 t.taowu.com
   1 t.u0573.com
   9 t.xbsb.com.cn
   64 t.yule.com.cn
   40 t.zg185.com
   66 t.zyloushi.com
   83 t.zznews.gov.cn
   66 tsing.cc
   16 wb.anhuixinli.com
   59 wb.ph2009.com
   17 wb.xyrtv.com
   35 weibo.china-wife.com
   40 weibo.nigeriabbs.com
   76 weibo.xaad.com
   36 ws.guai.ws
   59 www.41123.com
210 www.44299.com
103 www.77wbo.com
150 **weibo.com[/url]
   22 www.dfvb.cn
115 www.dn3.cn
188 www.eeeeee.com.cn
   29 www.gaonayang.com
   36 www.haobaob.com
178 www.luheren.net
265 www.syllvin.com
   32 www.test8848.com
   35 www.weike.me
   30 www.weiqi360.com
   55 www.ziyunchayi.com
136 [url]www.zswang.com
   22 xiao-xiao.net
   32 xml.so
161 zswang.com

作者: ericls 时间: 2012-8-16 22:17
前面的数字是出现次数
命令如下
cut -d '/' in.txt -f 3 | sort | uniq -c > out.txt

作者: 老大来了 时间: 2012-8-16 22:31

excel......难道还有比这简单的吗。

作者: ericls 时间: 2012-8-16 22:32

老大来了发表于 2012-8-16 22:31
excel......难道还有比这简单的吗。

不会~

作者: javaluo 时间: 2012-8-16 22:47

ericls 发表于 2012-8-16 22:32
不会~

Excel 筛选配合公式
不过shell也可以了

作者: 满意沟通 时间: 2012-8-16 23:36
谢谢楼主的资源啊牛鼻

欢迎光临全球主机交流论坛 (https://loc.fffk.eu.org/)