下面图中的eecs.cc为笔者自建的一台具有私有根的DNS服务器，且对外开放了区域传送权限，故有结果：cc区域传送成功。该图只是一个实验验证，下面文章正式开始！
从互联网上寻找全球Top1000Web站点列表。
搜寻，发现http://www.domainvader.com/website/top-sites.php站点有需要的信息。
处理过程如下：
·此处共计1000个统计页面，每个页面有1000个站点信息，故依次抓取这1000个html文档；
·使用grep结合正则表达式从这1000个文档之中过滤出我们需要的域名，共计1000000个。
代码如下：
其中，grab.sh的参数threads意思为并发GET进程数，视双方通讯链路状态而定，默认为1，如果链路很好，可适当提高，但不宜过高，以防GET请求超时。
grab.sh：
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16 | #!/bin/bash
declare x
declare threads=1
# process concurrency
declare mod
for x in `seq 1 1000`
do
echo "http://www.domainvader.com/website/top-${x}000-sites.php"
time GET "http://www.domainvader.com/website/top-${x}000-sites.php" > $x.html &
mod=$(( x%threads ))
if [ "$mod" -eq "0" ]
then
wait
fi
done
|
translate.sh：
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34 | #!/bin/bash
declare x
declare l
if [ -r "top100_0000sites.txt" ]
then
rm -f top100_0000sites.txt
fi
touch top100_0000sites.txt
for x in `seq 1 1000`
do
echo "analyzing ${x}.html..."
# check if readable
if ! [ -r "${x}.html" ]
then
echo "file ${x}.html doesn't exist or aren't readable :("
echo "file top100_0000sites.txt collect total `cat top100_0000sites.txt | wc -l` websites"
exit 1
fi
l=`grep -Eo --color 'target="_blank">(http://([A-Za-z0-9_-]+)(\.([A-Za-z0-9_-])+)+)' ${x}.html | wc -l`
# check content if been entirely grabbed
if [ "$l" -ne "1000" ]
then
echo "file ${x}.html's content is not entire :( please check"
echo "file top100_0000sites.txt collect total `cat top100_0000sites.txt | wc -l` websites"
exit 1
fi
grep -Eo --color 'target="_blank">(http://([A-Za-z0-9_-]+)(\.([A-Za-z0-9_-])+)+)' ${x}.html | grep -Eo --color '(([A-Za-z0-9_-]+)(\.([A-Za-z0-9_-])+)+)$' >> top100_0000sites.txt
done
echo "done :)"
echo "file top100_0000sites.txt collect total `cat top100_0000sites.txt | wc -l` websites"
|
最终效果图：
有如下命题：
if dig @${ns} ${d} axfr | grep -E --color 'IN[[:space:]]+A|IN[[:space:]]+NS' &>/dev/null
then
echo "nice! a hole"
fi
上述命题是整个检测程序的核心所在，这个命题是成立的。
dns_transfer_check.sh 代码如下：
其中，threads为并发数，默认设置为40，由于一个域名很可能对应多个ns，观察得到实际并发数大概为threads*3 ，domainFileList为参与检测的域名列表文件，可自定义之。
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27 | #!/bin/bash
declare d
declare s=0
declare ns_str
declare ns
declare mod
declare threads=40
# process concurrency
declare domainFileList="top100_0000sites.txt"
for d in `cat $domainFileList`
do
s=$(( s+1 ))
echo "${s} : ${d}"
ns_str=`dig -t ns ${d} | grep -E --color 'IN.*NS.*[[:space:]]([A-Za-z0-9_-]+)(\.([A-Za-z0-9_-])+)+\.' | awk '{print $5}' | grep -Eo --color '([A-Za-z0-9_-]+)(\.([A-Za-z0-9_-])+)+'`
for ns in $ns_str
do
echo $ns
if dig @${ns} ${d} axfr | grep -E --color 'IN[[:space:]]+A|IN[[:space:]]+NS' &>/dev/null ; then echo "nice! transfer done! :) rank: $s domain: $d ns: $ns ---->" ; fi &
done
mod=$(( s%threads ))
if [ "$mod" -eq 0 ]
then
wait
fi
done
|
程序结束。
# nohup bash dns_transfer_check.sh &>log &
运行一夜之后，扫描到了前19212个站点，然后使用grep、awk、sed等工具处理之，得到满意结果。
WooYun: 全球Top1000Websites中存在DNS区域传送漏洞的网站列表
dns_domain_check.zip
这是所有资料的链接。重点是dns_transfer_check.sh与域名列表，读者可按照自己的需要自定义参数使用。
除了world_top1000000，还包含了china_top500与china_top1344_entertainment站点列表 :)
希望这篇文章能帮助大家！
跳跳糖
