wget --load-cookies
쿠키를 "Netscape의 cookies.txt 파일에서 원래 사용 된 형식의 텍스트 파일"로로드합니다. 그러나 Firefox는 쿠키를 SQLite 데이터베이스 에 보관 합니다.
Firefox cookies.sqlite
파일 에서 "Netscape 's cookies.txt 파일"을 추출하는 방법이 있습니까?
wget --load-cookies
쿠키를 "Netscape의 cookies.txt 파일에서 원래 사용 된 형식의 텍스트 파일"로로드합니다. 그러나 Firefox는 쿠키를 SQLite 데이터베이스 에 보관 합니다.
Firefox cookies.sqlite
파일 에서 "Netscape 's cookies.txt 파일"을 추출하는 방법이 있습니까?
답변:
wget과 함께 사용할 수있는 cookie.txt 형식 파일을 내보내는 데 사용할 수있는 쿠키 내보내기 확장이 있습니다.
또는 직접 만들 수도 있습니다. 쿠키는에서 볼 수 있습니다 Options / Privacy / remove individual cookies
. 쿠키를 찾은 후 정보가 포함 된 .txt 파일을 만들 수 있습니다.
domain - The domain that created AND that can read the variable.
flag - A TRUE/FALSE value indicating if all machines within a given domain can access the variable. Say "true"
path - The path within the domain that the variable is valid for. Use / for any url
secure - A TRUE/FALSE value indicating if a secure connection with the domain is needed to access the variable. Use false to allow http://
expiration - The UNIX time that the variable will expire on. Set something far in the future
name - The name of the variable.
value - The value of the variable.
예를 들어 다음과 같이 보일 수 있습니다.
.domain.com TRUE / FALSE 4102358400 SESSIONID dfjdfkjsjwere090fusfdkljf
를 사용하는 경우 wget
명령 줄에 익숙 할 것입니다. 이 경우 Firefox 확장 대신 간단한 쉘 스크립트를 사용할 수 있습니다.
extract_cookies.sh > mycookies.txt
wget --load-cookies mycookies.txt examplehost.com
https://gist.github.com/hackerb9/d382e09683a52dcac492ebcdaf1b79af 에서 extract_cookies.sh 스크립트 를 다운로드 하거나 다음을 잘라 붙여 넣을 수 있습니다 .
#!/bin/sh -e
# extract_cookies.sh:
#
# Convert from Firefox's cookies.sqlite format to Netscape cookies,
# which can then be used by wget and curl. (Why don't wget and curl
# just use libsqlite if it's installed? Mysteries abound.)
# USAGE:
#
# $ extract_cookies.sh > /tmp/cookies.txt
# or
# $ extract_cookies.sh ~/.mozilla/firefox/*default*/cookies.sqlite > /tmp/cookies.txt
# USING WITH WGET:
# $ wget --load-cookies=/tmp/cookies.txt http://example.com
# USING WITH CURL:
# $ curl --cookie /tmp/cookies.txt http://example.com
# Note: If you do not specify an SQLite filename, this script will
# intelligently find it for you.
#
# A) Usually it will check all profiles under ~/.mozilla/firefox/ and
# use the cookies.sqlite that was updated most recently.
#
# B) If you've redirected stdin (with < or |) , then that will be used.
# HISTORY: I believe this is circa 2010 from:
# http://slacy.com/blog/2010/02/using-cookies-sqlite-in-wget-or-curl/
# However, that site is down now.
# Cleaned up by Hackerb9 (2017) to be more robust and require less typing.
cleanup() {
rm -f $TMPFILE
exit 0
}
trap cleanup EXIT INT QUIT TERM
if [ "$#" -ge 1 ]; then
SQLFILE="$1"
else
if tty -s; then
SQLFILE=$(ls -t ~/.mozilla/firefox/*/cookies.sqlite | head -1)
else
SQLFILE="-" # Will use 'cat' below to read stdin
fi
fi
if [ "$SQLFILE" != "-" -a ! -r "$SQLFILE" ]; then
echo "Error. File $SQLFILE is not readable." >&2
exit 1
fi
# We have to copy cookies.sqlite, because FireFox has a lock on it
TMPFILE=`mktemp /tmp/cookies.sqlite.XXXXXXXXXX`
cat "$SQLFILE" >> $TMPFILE
# This is the format of the sqlite database:
# CREATE TABLE moz_cookies (id INTEGER PRIMARY KEY, name TEXT, value TEXT, host TEXT, path TEXT,expiry INTEGER, lastAccessed INTEGER, isSecure INTEGER, isHttpOnly INTEGER);
echo "# Netscape HTTP Cookie File"
sqlite3 -separator $'\t' $TMPFILE <<- EOF
.mode tabs
.header off
select host,
case substr(host,1,1)='.' when 0 then 'FALSE' else 'TRUE' end,
path,
case isSecure when 0 then 'FALSE' else 'TRUE' end,
expiry,
name,
value
from moz_cookies;
EOF
cleanup
sqlite 파일을 찾는 방법은 대부분의 시스템에서 작동하지 않습니다.
또한 여러 개의 Firefox 프로필이 있기 때문에 sqlite 파일이 여러 개인 경우 어떻게해야합니까?
그래서 내가하는 방법은 다음과 같습니다.
모든 cookies.sqlite 파일을 가져 와서 줄 번호별로 정렬하고 가장 많은 줄이있는 것이 실제로 가장 많이 사용하는 것으로 가정합니다. 그런 다음 해당 파일의 경로를 반환하십시오.
그래서 나는 당신의 줄을 이것으로 바꿨습니다.
SQLFILE=$(find ~ -type f -name cookies.sqlite -exec wc -l {} \+ | sort -rn |grep -v total| head -1 |egrep -o "/.*")
wget
슬픔을 주는 사이트에서 쿠키를 얻기 위해 종종 파이어 폭스 파이어 폭스 프로파일을 만들 것이다 . 따라서 관련 쿠키 항아리는 작지만 가장 최근에 업데이트된다. 그런데 왜 파일 크기를 사용하는 대신 이진 데이터베이스의 줄 바꿈 수를 계산합니까? 내 스크립트를 크게 변경하지 않아도됩니다. 다만 교체 ls -t
와 함께 ls -S
. 또는 원하는 경우 내 스크립트를 필터로 파이프하여 필터로 사용할 수 있습니다 find
.