您最多选择25个主题
主题必须以字母或数字开头,可以包含连字符 (-),并且长度不得超过35个字符
|
#!/bin/bash
|
|
sitedomain=$1
|
|
wget --spider --recursive --level=inf --no-verbose --output-file=geturls.tmp $sitedomain
|
|
grep -i URL geturls.tmp | awk -F 'URL:' '{print $2}' | awk '{$1=$1};1' | awk '{print $1}' | sort -u | sed '/^$/d' > urls/$sitedomain.urls
|
|
rm geturls.tmp
|
|
rm -r $sitedomain
|
|
|