Wie lade ich eine Webseite herunter, die einen Benutzernamen und ein Passwort erfordert?

Question

Ich möchte zum Beispiel diese Seite herunterladen, nachdem ich Benutzername und Passwort eingegeben habe:

http://forum.ubuntu-it.org/

Ich habe es mit wget versucht, aber es funktioniert nicht.

Gibt es eine Lösung mit Python?

Sie können mit diesem Benutzernamen und Passwort testen:

username: johnconnor
password: hellohello

Answer 1

Sie können die urllib2 Modul und damit ist es möglich, einfache und formularbasierte Authentifizierung (mit Cookie-Unterstützung) durchzuführen.

Hier ist eine schöne Lehrgang zu Ihrem Thema.

Answer 2

Versuchen Sie die mechanisieren Modul. Es handelt sich im Grunde um eine programmatische Browser-Schnittstelle.

Answer 3

Wie @robert sagt, verwenden Sie mechanize.

Um Ihnen den Einstieg zu erleichtern:

from mechanize import Browser
b = Browser()
b.open("http://forum.ubuntu-it.org/index.php")
b.select_form(nr=0)
b["user"] = "johnconnor"
b["passwrd"] = "hellohello"
b.submit()

response = b.response().read()
if "Salve <b>johnconnor</b>" in response:
    print "Logged in!"