쿠키 설정이 필요한 사이트에서 wget을 사용하여 PDF 파일 다운로드

Question 1

나는 단지 (둘 다 필요함) --keep-session-cookies보다는 세션 쿠키를 보존하기 위해 사용해야 한다고 생각합니다 .--save-cookies

기본적으로 당신은

wget --keep-session-cookies --save-cookies ..... url

로그인하여 세션 쿠키를 얻으세요.

그 다음에

wget --load-cookie ...... url

PDF를 다운로드하려면

Answer

나는 단지 (둘 다 필요함) --keep-session-cookies보다는 세션 쿠키를 보존하기 위해 사용해야 한다고 생각합니다 .--save-cookies

기본적으로 당신은

wget --keep-session-cookies --save-cookies ..... url

로그인하여 세션 쿠키를 얻으세요.

그 다음에

wget --load-cookie ...... url

PDF를 다운로드하려면

Question 2

어쩌면 이것이 도움이 될 것입니다. 제가 로그인하려고 했던 사이트에는 성공적으로 로그인하기 전에 확인해야 하는 몇 가지 숨겨진 필드가 있었습니다. 따라서 첫 번째 wget은 추가 필드를 찾기 위해 로그인 페이지를 가져오고, 두 번째 wget은 사이트에 로그인하여 쿠키를 저장하고, 세 번째 wget은 해당 쿠키를 사용하여 원하는 페이지를 가져옵니다.

#!/bin/bash

# get the login page to get the hidden field data
wget -a log.txt -O loginpage.html http://foobar/default.aspx
hiddendata=`cat loginpage.html | grep value | grep foobarhidden | tr '=' ' ' | awk '{print $9}' | sed s/\"//g`
rm loginpage.html

# login into the page and save the cookies
postData=user=fakeuser'&'pw=password'&'foobarhidden=${hiddendata}
wget -a log.txt -O /dev/null --post-data ${postData} --keep-session-cookies --save-cookies cookies.txt http://foobar/default.aspx

# get the page you're after
wget -a log.txt -O results.html --load-cookies cookies.txt http://foobar/lister.aspx?id=42
rm cookies.txt

에 대한 유용한 정보가 있습니다.이 다른그래서 게시물:

Answer

어쩌면 이것이 도움이 될 것입니다. 제가 로그인하려고 했던 사이트에는 성공적으로 로그인하기 전에 확인해야 하는 몇 가지 숨겨진 필드가 있었습니다. 따라서 첫 번째 wget은 추가 필드를 찾기 위해 로그인 페이지를 가져오고, 두 번째 wget은 사이트에 로그인하여 쿠키를 저장하고, 세 번째 wget은 해당 쿠키를 사용하여 원하는 페이지를 가져옵니다.

#!/bin/bash

# get the login page to get the hidden field data
wget -a log.txt -O loginpage.html http://foobar/default.aspx
hiddendata=`cat loginpage.html | grep value | grep foobarhidden | tr '=' ' ' | awk '{print $9}' | sed s/\"//g`
rm loginpage.html

# login into the page and save the cookies
postData=user=fakeuser'&'pw=password'&'foobarhidden=${hiddendata}
wget -a log.txt -O /dev/null --post-data ${postData} --keep-session-cookies --save-cookies cookies.txt http://foobar/default.aspx

# get the page you're after
wget -a log.txt -O results.html --load-cookies cookies.txt http://foobar/lister.aspx?id=42
rm cookies.txt

에 대한 유용한 정보가 있습니다.이 다른그래서 게시물:

쿠키 설정이 필요한 사이트에서 wget을 사용하여 PDF 파일 다운로드

편집 1

답변1

답변2

관련 정보