wget 사용법

URL 지정 다운로드
wget http://releases.ubuntu.com/18.04/ubuntu-18.04-desktop-amd64.iso

다수의 URL 지정 다운로드
wget <url_1> <url_2>

ftp 다운로드
wget ftp://ftp.example.com/ubuntu/ubuntu-18.04-desktop-amd64.iso

ftp 계정 및 패스워드 입력 다운로드
wget --ftp-user=booleanworld --ftp-password=passw0rd <ftp_url>

사용자 사용할 파일 이름 변경 다운로드
wget <url> -O Ubuntu.iso

사용자 디렉토리 지정 후 파일 다운로드
wget <url> -O /media/sdb1/Software/Ubuntu.iso

사용자 디렉토리 생성 후 다운로드
wget <url> -P /media/sdb1/Software

중단된 다운로드 시작
wget -c <url>

중단된 사용자 지정 파일 다운로드
wget -c <url> -O <path_to_downloaded_file>

다운로드 속도 조절
wget <url> --limit-rate=512k

백그라운드 파일 다운로드
wget -b <url>
tail -f wget-log

다운로드 확인 파일명.
wget-log, wget-log.1

실시간 파일 다운로드 확인
tail -f wget-log

인터넷 속도 문제(gwt 20회 접속)
wget -t inf --waitretry=3 --timeout=10 --retry-connrefused <url>

-t inf 스위치 : 문제 발생시 다운로드 완료할 때 까지 무한반복.
--waitretry 스위치 : 재시도 지연 3초
--timeout 스위치 : 네트워크 시간 초가 10 초 설정
--retry-connrefused 스위치 : 서버가 동작 않을때 "연결 거부 됨" 오류 발생, 연결 거부 오류가 발생시 다운로드 재시도.

재귀적 파일 다운로드.
wget 동작 방법 :
- 초기 파일 다운로드 저정 후 링크 검색.
- 각 랑크 다운로드 저장 후 링크 추출
- 기본 값으로 5개 링크 추출

페이지 반복적 다운로드
wget -r https://en.wikipedia.org/

-l 플래그 사용 재귀 호출 수 지정 7
wget -r -l 7 https://en.wikipedia.org/

-A(허용) 옵션을 사용 특정 유형의 파일 다운로드
wget -r https://en.wikipedia.org/ -A png,jpg,jpeg

-R(거부) 옵션을 사용 특정 유형의 파일 다운로드 금지
wget -r https://en.wikipedia.org/ -R pdf

-k 링크 변환기능, 웹 페이지 링크를 로컬 링크로 변환
wget -k -r https://en.wikipedia.org/

wget 사이트 차단될 경우, 사용자 문자열 지정을 통해 다운로드
wget <url> -U "<user-agent-string>"

Mac 사용자 문자열 지정 다운로드
wget <url> -U "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_13_4) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/66.0.3359.181 Safari/537.36"

웹 개발자 http 헤더 테스트
wget <url> --header "X-Foo: 123"

보호된 파일 다운로드
크롬
https://chrome.google.com/webstore/detail/curlwget/jmocjfidanebdlinpbcdgcmgdifblncg?hl=en

filrefox
https://addons.mozilla.org/en-US/firefox/addon/cliget/

웹 사이트 링크 깨짐 해결.
wget --spider -r https://example.com/

웹 사이트 링크 깨짐 해결 로그 설정.
wget --spider -r https://example.com -o wget.log

301 리다디렉션 검색.
grep -B 301 wget.log