shell遍历过滤日志文件取特定行

#!/bin/bash
for file in /data/wwwlogs/a.com.cn/a.com.cn.2016*
 do
  echo $file
  cat $file| grep sssss >> all.txt
done

awk '{print $5}' all.txt > 3.1.txt

匹配包含 aaa.bbb.cn 的记录的第一列 ，从第7个字节开始到结束，并去重
cat source.txt | grep aaa\.bbb\.cn/ccc| awk '{print substr($1,7)}' | uniq

zcat a.gz > a.txt