Come posso accedere a un sito Web con Python?

Come posso farlo? Stavo cercando di inserire un link specificato (con urllib), ma per farlo devo effettuare il login.

Ho questa fonte dal sito:

<form id="login-form" action="auth/login" method="post">
    <div>
    <!--label for="rememberme">Remember me</label><input type="checkbox" class="remember" checked="checked" name="remember me" /-->
    <label for="email" id="email-label" class="no-js">Email</label>
    <input id="email-email" type="text" name="handle" value="" autocomplete="off" />
    <label for="combination" id="combo-label" class="no-js">Combination</label>
    <input id="password-clear" type="text" value="Combination" autocomplete="off" />
    <input id="password-password" type="password" name="password" value="" autocomplete="off" />
    <input id="sumbitLogin" class="signin" type="submit" value="Sign In" />

È possibile?

Forse vuoi usare twill . È abbastanza facile da usare e dovrebbe essere in grado di fare quello che vuoi.

Sarà simile al seguente:

from twill.commands import *
go('http://example.org')

fv("1", "email-email", "blabla.com")
fv("1", "password-clear", "testpass")

submit('0')

È possibile utilizzare showforms()per elencare tutti i moduli una volta utilizzati go…per accedere al sito a cui si desidera accedere. Provalo dall'interprete Python.

Vorrei provare a semplificare, supponiamo che l'URL del sito sia www.example.com e che tu debba registrarti inserendo nome utente e password, quindi andiamo alla pagina di accesso dicendo http://www.example.com/login .php ora e visualizza il suo codice sorgente e cerca l'URL dell'azione che sarà nel tag del modulo qualcosa di simile

 <form name="loginform" method="post" action="userinfo.php">

ora prendi userinfo.php per creare un URL assoluto che sarà ' http://example.com/userinfo.php ', ora esegui un semplice script python

import requests
url = 'http://example.com/userinfo.php'
values = {'username': 'user',
          'password': 'pass'}

r = requests.post(url, data=values)
print r.content

Spero che questo aiuti qualcuno da qualche parte un giorno.

In genere avrai bisogno dei cookie per accedere a un sito, il che significa cookielib, urllib e urllib2. Ecco una lezione che ho scritto quando giocavo ai giochi web di Facebook:

import cookielib
import urllib
import urllib2

# set these to whatever your fb account is
fb_username = "your@facebook.login"
fb_password = "secretpassword"

class WebGamePlayer(object):

    def __init__(self, login, password):
        """ Start up... """
        self.login = login
        self.password = password

        self.cj = cookielib.CookieJar()
        self.opener = urllib2.build_opener(
            urllib2.HTTPRedirectHandler(),
            urllib2.HTTPHandler(debuglevel=0),
            urllib2.HTTPSHandler(debuglevel=0),
            urllib2.HTTPCookieProcessor(self.cj)
        )
        self.opener.addheaders = [
            ('User-agent', ('Mozilla/4.0 (compatible; MSIE 6.0; '
                           'Windows NT 5.2; .NET CLR 1.1.4322)'))
        ]

        # need this twice - once to set cookies, once to log in...
        self.loginToFacebook()
        self.loginToFacebook()

    def loginToFacebook(self):
        """
        Handle login. This should populate our cookie jar.
        """
        login_data = urllib.urlencode({
            'email' : self.login,
            'pass' : self.password,
        })
        response = self.opener.open("https://login.facebook.com/login.php", login_data)
        return ''.join(response.readlines())

Non avrai necessariamente bisogno dei gestori HTTPS o Redirect, ma non fanno male e rende l'apri molto più robusto. Potresti anche non aver bisogno dei cookie, ma è difficile dirlo solo dal modulo che hai pubblicato. Ho il sospetto che potresti, puramente dall'input "Ricordami" che è stato commentato.

import cookielib
import urllib
import urllib2

url = 'http://www.someserver.com/auth/login'
values = {'email-email' : 'john@example.com',
          'password-clear' : 'Combination',
          'password-password' : 'mypassword' }

data = urllib.urlencode(values)
cookies = cookielib.CookieJar()

opener = urllib2.build_opener(
    urllib2.HTTPRedirectHandler(),
    urllib2.HTTPHandler(debuglevel=0),
    urllib2.HTTPSHandler(debuglevel=0),
    urllib2.HTTPCookieProcessor(cookies))

response = opener.open(url, data)
the_page = response.read()
http_headers = response.info()
# The login cookies should be contained in the cookies variable

Per ulteriori informazioni, visitare: https://docs.python.org/2/library/urllib2.html

Automazione delle pagine web? Sicuramente "webbot"

webbot Funziona anche su pagine web che hanno id e nomi di classi che cambiano dinamicamente e hanno più metodi e funzionalità rispetto al selenio o alla meccanizzazione.

Ecco uno snippet :)

from webbot import Browser 
web = Browser()
web.go_to('google.com') 
web.click('Sign in')
web.type('mymail@gmail.com' , into='Email')
web.click('NEXT' , tag='span')
web.type('mypassword' , into='Password' , id='passwordFieldId') # specific selection
web.click('NEXT' , tag='span') # you are logged in ^_^

I documenti sono anche piuttosto diretti e semplici da usare: https://webbot.readthedocs.io

I siti web in generale possono controllare l'autorizzazione in molti modi diversi, ma quello a cui stai mirando sembra renderlo ragionevolmente facile per te.

Tutto ciò che serve è POSTl' auth/loginURL di un blob forma codificata con i vari campi che vedi lì (dimenticare le etichette for, sono decorazione per i visitatori). handle=whatever&password-clear=pwde così via, finché conosci i valori per l'handle (email AKA) e la password dovresti stare bene.

Presumibilmente quel POST ti reindirizzerà a qualche pagina "hai effettuato l'accesso con successo" con Set-Cookieun'intestazione che convalida la tua sessione (assicurati di salvare quel cookie e rimandarlo indietro su ulteriori interazioni durante la sessione!).

Per le cose HTTP, la scelta corrente dovrebbe essere: Richieste - HTTP per esseri umani