Esiste un modo per salvare tutte le comunicazioni del browser HTTP e HTTPS (inclusi richiesta, risposta, intestazioni complete e corpo) sui file sul mio computer?
Le comunicazioni HTTPS devono essere salvate decrittografate.
Idealmente sarei alla ricerca di qualcosa come un'estensione per Firefox o Google Chrome.
Deve funzionare su Linux.
Risposte:
HAR è l'archivio HTTP ed è esattamente ciò che si desidera salvare (include HTTPS non crittografato).
Fortunatamente questa è ora una funzionalità di base di tutti i principali browser (non lo era quando hai posto la domanda). Non hai più bisogno di estensioni di terze parti.
In Firefox (v41 +):
Un altro browser:
Nella versione recente di tutti i browser, è possibile salvare facilmente HAR:
HttpFox è un'estensione di Firefox che farà il lavoro.
=== === EDIT
Fare clic con il tasto destro sul pannello richieste e fare clic su "Copia tutte le righe". Quindi puoi salvarlo in qualsiasi editor ti piaccia, ad esempio il foglio di calcolo di Openoffice. Si prega di vedere l'immagine che ho fornito.
Error loading content (NS_ERROR_DOCUMENT_NOT_CACHED). Ma ho bisogno del corpo di risposta di tutte le richieste, quindi HttpFox non può essere una soluzione a questo problema.
Fiddler è sicuramente qualcosa che dovresti considerare anche se non è un'estensione ma un'applicazione separata.
Ho trovato questa risposta volendo fare questo, e nessuna delle risposte qui mi andava bene perché avevo bisogno di scaricare corpi di risposta HTTPS, proprio come OP. Quindi, per coloro che atterrano qui come ho fatto io, ecco cosa ho trovato.
Alla fine sono arrivato su mitmproxy , che non è un'estensione di Firefox, ma raggiunge l'obiettivo di registrare tutto il traffico di Firefox. È tutto Python, quindi l'ho installato conpip install mitmproxy - se vuoi, usa un gestore di pacchetti.
Avviato con mitmproxyper l'installazione / debug iniziale e quindi utilizzatomitmdump ho per scaricare il flusso una volta che l'ho fatto funzionare e perfezionato.
Ho appena impostato Firefox da utilizzare 127.0.0.1:8080come server proxy (8080 è la porta predefinita di mitmproxy) e ho visto tutto il mio traffico Firefox passare attraverso mitmproxy. Per abilitare il traffico HTTPS, devi accettare il certificato creato da mitmproxy - con il proxy impostato, vai all '"indirizzo magico" di http://mitm.it in Firefox, fai clic sul pulsante "Altro", seleziona le caselle fidarsi del certificato e premere OK.
Per scaricare il corpo della risposta non crittografato, ho dovuto usare uno script inline molto semplice :
from libmproxy.model import decoded
def response(context, flow):
with decoded(flow.response): # automatically decode gzipped responses.
with open("body.txt","ab") as f:
f.write(flow.response.content)
Vai qui : scaricalo come save_response.pye usalo con mitmdump -s save_response.py. Gli organismi di risposta inizieranno ad accumularsibody.txt .
mitmproxy ha anche una serie di filtri utili che puoi specificare per mitmdump per afferrare esattamente ciò di cui hai bisogno.
httpFox, httpScoop (solo Mac) e httpWatch (IE, Firefox, solo Windows) sono tutti gli strumenti che uso per fare questo. Inoltre puoi anche provare Fiddler (come suggerito in precedenza) e anche se stai usando un Mac potresti provare Charles Proxy. Il mio preferito è httpWatch (puoi facilmente filtrare le intestazioni, i contenuti, l'URL ecc.), Ma è costoso, quindi potrebbe non essere un'opzione.
Potresti anche voler guardare il HAR progetto (HAR sta per HTTP Archive) ed è un approccio basato su standard per la registrazione di transazioni http, intestazioni, contenuti ecc. Alcuni degli strumenti menzionati sono in grado di esportare i tuoi file HAR per la visualizzazione usando lui HAR Viewer (che ti sarà familiare se hai guardato la funzione a cascata in Firebug). In effetti, è possibile utilizzare Firebug per generare questi file / registri anche tramite NetExport.
FWIW httpScoop è un buon metodo per il debug / traccia del traffico HTTP su una rete wireless, ho scritto un articolo su come farlo qualche tempo fa: http://blog.adtools.co.uk/trace-debug-mobile-application-http- macos richieste-tramite-/
Wireshark può essere utilizzato per acquisire pacchetti di rete, inclusi elementi nel livello del protocollo http, e salvarli sul computer. Può anche catturare informazioni https, ma dubito che saresti in grado di configurarlo per decrittografare qualsiasi cosa.