Wget에서 Firefox 쿠키를 사용하려면 어떻게합니까?


14

wget --load-cookies쿠키를 "Netscape의 cookies.txt 파일에서 원래 사용 된 형식의 텍스트 파일"로로드합니다. 그러나 Firefox는 쿠키를 SQLite 데이터베이스 에 보관 합니다.

Firefox cookies.sqlite파일 에서 "Netscape 's cookies.txt 파일"을 추출하는 방법이 있습니까?

답변:


11

wget과 함께 사용할 수있는 cookie.txt 형식 파일을 내보내는 데 사용할 수있는 쿠키 내보내기 확장이 있습니다.

또는 직접 만들 수도 있습니다. 쿠키는에서 볼 수 있습니다 Options / Privacy / remove individual cookies. 쿠키를 찾은 후 정보가 포함 된 .txt 파일을 만들 수 있습니다.

domain - The domain that created AND that can read the variable. 
flag - A TRUE/FALSE value indicating if all machines within a given domain can access the variable.  Say "true" 
path - The path within the domain that the variable is valid for.  Use / for any url
secure - A TRUE/FALSE value indicating if a secure connection with the domain is needed to access the variable. Use false to allow http://
expiration - The UNIX time that the variable will expire on.  Set something far in the future
name - The name of the variable. 
value - The value of the variable.

예를 들어 다음과 같이 보일 수 있습니다.

.domain.com TRUE  / FALSE 4102358400 SESSIONID dfjdfkjsjwere090fusfdkljf

1
수출 쿠키 파이어 폭스 확장 기능은 잘 작동하는 것 같다.
mivk

2
불행히도, 최신 버전의 FF는 이것을 더 고통스럽게 만들 것입니다-멀티 프로세스를 지원하지 않는 것으로 보이며 레거시이므로 FF 57+에서 작동이 중지됩니다.
누군가 어딘가에

8

를 사용하는 경우 wget명령 줄에 익숙 할 것입니다. 이 경우 Firefox 확장 대신 간단한 쉘 스크립트를 사용할 수 있습니다.

extract_cookies.sh > mycookies.txt
wget --load-cookies mycookies.txt examplehost.com

https://gist.github.com/hackerb9/d382e09683a52dcac492ebcdaf1b79af 에서 extract_cookies.sh 스크립트다운로드 하거나 다음을 잘라 붙여 넣을 수 있습니다 .

#!/bin/sh -e
# extract_cookies.sh:
#
# Convert from Firefox's cookies.sqlite format to Netscape cookies,
# which can then be used by wget and curl. (Why don't wget and curl
# just use libsqlite if it's installed? Mysteries abound.)

# USAGE:
#
# $ extract_cookies.sh > /tmp/cookies.txt
# or
# $ extract_cookies.sh ~/.mozilla/firefox/*default*/cookies.sqlite > /tmp/cookies.txt

# USING WITH WGET:
# $ wget --load-cookies=/tmp/cookies.txt http://example.com

# USING WITH CURL:
# $ curl --cookie /tmp/cookies.txt http://example.com

# Note: If you do not specify an SQLite filename, this script will
# intelligently find it for you.
#
# A) Usually it will check all profiles under ~/.mozilla/firefox/ and
# use the cookies.sqlite that was updated most recently.
#
# B) If you've redirected stdin (with < or |) , then that will be used.


# HISTORY: I believe this is circa 2010 from:
# http://slacy.com/blog/2010/02/using-cookies-sqlite-in-wget-or-curl/
# However, that site is down now.

# Cleaned up by Hackerb9 (2017) to be more robust and require less typing.


cleanup() {
    rm -f $TMPFILE
    exit 0
}
trap cleanup  EXIT INT QUIT TERM


if [ "$#" -ge 1 ]; then
    SQLFILE="$1"
else
    if tty -s; then
    SQLFILE=$(ls -t ~/.mozilla/firefox/*/cookies.sqlite | head -1)
    else
    SQLFILE="-"     # Will use 'cat' below to read stdin
    fi
fi

if [ "$SQLFILE" != "-" -a ! -r "$SQLFILE" ]; then
    echo "Error. File $SQLFILE is not readable." >&2
    exit 1
fi

# We have to copy cookies.sqlite, because FireFox has a lock on it
TMPFILE=`mktemp /tmp/cookies.sqlite.XXXXXXXXXX`
cat "$SQLFILE" >> $TMPFILE


# This is the format of the sqlite database:
# CREATE TABLE moz_cookies (id INTEGER PRIMARY KEY, name TEXT, value TEXT, host TEXT, path TEXT,expiry INTEGER, lastAccessed INTEGER, isSecure INTEGER, isHttpOnly INTEGER);

echo "# Netscape HTTP Cookie File"
sqlite3 -separator $'\t' $TMPFILE <<- EOF
    .mode tabs
    .header off
    select host,
    case substr(host,1,1)='.' when 0 then 'FALSE' else 'TRUE' end,
    path,
    case isSecure when 0 then 'FALSE' else 'TRUE' end,
    expiry,
    name,
    value
    from moz_cookies;
EOF

cleanup

1
지정된 브라우저 세션 중에 만 유지되는 쿠키에는 작동하지 않습니다. (그래서 모든 세션 쿠키에 probalby)
Krzysztof Krasoń

curlfire 명령으로 이것을 마무리했습니다 . curlfire http://www.example.com/culfire -P newprofile http://www.example.com
AT & T는 맞

1
대단하다. 멀티 프로세스 또는 최신 버전의 FF를 방해하지 않으며 스크립팅 할 수 있습니다.
누군가 어딘가에

1

sqlite 파일을 찾는 방법은 대부분의 시스템에서 작동하지 않습니다.

또한 여러 개의 Firefox 프로필이 있기 때문에 sqlite 파일이 여러 개인 경우 어떻게해야합니까?

그래서 내가하는 방법은 다음과 같습니다.

모든 cookies.sqlite 파일을 가져 와서 줄 번호별로 정렬하고 가장 많은 줄이있는 것이 실제로 가장 많이 사용하는 것으로 가정합니다. 그런 다음 해당 파일의 경로를 반환하십시오.

그래서 나는 당신의 줄을 이것으로 바꿨습니다.

SQLFILE=$(find ~ -type f -name cookies.sqlite -exec wc -l {} \+ | sort -rn |grep -v total| head -1 |egrep -o "/.*")

흥미 롭군 내 스크립트가 기본적으로 모든 프로필을 찾지 못하는 Firefox 버전을 사용하고 있습니까? 쿠키는 어디에 저장됩니까? 확실히, 사용자를 찾기 위해 사용자의 전체 홈 디렉토리를 검색 할 필요는 없습니다.
hackerb9

가장 최근에 사용 된 것이 아니라 가장 새로운 줄을 가진 SQLite 파일을 사용하는 것이 기본값이라고 잘못 생각합니다. 나는 wget슬픔을 주는 사이트에서 쿠키를 얻기 위해 종종 파이어 폭스 파이어 폭스 프로파일을 만들 것이다 . 따라서 관련 쿠키 항아리는 작지만 가장 최근에 업데이트된다. 그런데 왜 파일 크기를 사용하는 대신 이진 데이터베이스의 줄 바꿈 수를 계산합니까? 내 스크립트를 크게 변경하지 않아도됩니다. 다만 교체 ls -t와 함께 ls -S. 또는 원하는 경우 내 스크립트를 필터로 파이프하여 필터로 사용할 수 있습니다 find.
hackerb9
당사 사이트를 사용함과 동시에 당사의 쿠키 정책개인정보 보호정책을 읽고 이해하였음을 인정하는 것으로 간주합니다.
Licensed under cc by-sa 3.0 with attribution required.