호스팅 TIP > BASH > 싸이트 긁어오기

	게시물 57건

싸이트 긁어오기

글쓴이 : 최고관리자 날짜 : 2011-04-01 (금) 15:03 조회 : 6858

글주소 :

600개의 웹호스팅 싸이트를 만들일이 있어서 뽑아둔 도메인 리스트를 가지고 페이지를 긁어오는 스크립트다.

#!/bin/bash

mkdir -p wwwdata
cd wwwdata

grep http ../url.dat | while read url extra ; do
wget -r -Q30M $url
done

# url.dat 파일에는 추출해둔 도메인 리스트

wget 옵션은 아래링크를 참고하세요