Come posso eseguire TUTTE le richieste HTTP tramite Charles Web Debugging Proxy, comprese quelle da riga di comando?

Sto usando il software Charles Web Debugging Proxy per eseguire il debug delle richieste HTTP. Funziona alla grande con i miei browser desktop, Chrome e Firefox, e vede anche richieste HTTP che altri programmi fanno.

Quando eseguo Charles e controllo la configurazione della rete, penso di aver capito come funziona: imposta un proxy per tutte le richieste HTTP e HTTPS e quindi le ascolta sulla porta 8888:

Tuttavia l'articolo che non riesco a capire è che non vedo alcuna richiesta che io avviare presso il Terminale, come ad esempio wget, curlo il elinksbrowser.

So che posso specificare il proxy con curl e wget usando 127.0.0.1:8888, ma non capisco se l'interfaccia di rete è impostata con un proxy nella configurazione perché dovrei specificare manualmente il proxy per loro .

Inoltre, non riesco nemmeno a far apparire BlueCrab (copiatrice del sito Web) in Charles - e non vedo un'impostazione proxy per esso - anche se credo che stia usando un wrapper XWindow o qualcosa del genere (quindi non è davvero un nativo App Cocoa / Carbon):

Come posso ottenere tutte le richieste HTTP sul mio sistema per eseguire Charles?

Una precisazione

La mia domanda è circa i fondamenti di sistema perché curl e wget non sarebbe utilizzare un proxy quando l'interfaccia di rete è stato configurato per utilizzare una più che chiedendo la sintassi corretta per curl, wgetecc

La VPN creerebbe un nuovo dispositivo di rete, puoi vederlo al ifconfigcomando e quindi instradare tutta la rete di sistema a quel dispositivo, potresti vedere il routecomando route use .

Ma il proxy HTTP (in questo caso, il Charles) è diverso, basta aprire una porta, per usarlo, è necessario specificare le impostazioni dell'applicazione per utilizzare quella porta per roba HTTP. e come risposta di Kevin Reid curl, wgetecc. non leggere le impostazioni di sistema di OS X.

Se il proxy è SOCKS (Charles supporta sia HTTP che SOCKS), è possibile utilizzare ProxyChains o tsocks per l'applicazione che non supporta le impostazioni proxy.

per esempio:

$ proxychains git clone https://github.com/rofl0r/proxychains-ng

wget dietro al proxy (potrebbe essere necessario creare il file rc) sorgente

`$ vim ~/.wgetrc`

Aggiungi la seguente riga:

http_proxy=http://127.0.0.1:8888

arricciare dietro la fonte proxy

$ vim ~/.curlrc

Aggiungi la seguente riga:

proxy = 127.0.0.1:8888

elinks dietro l' origine proxy

Trova il tuo elinks.conffile con:

sudo find / -name elinks.conf

Aggiungi la seguente riga:

protocol.http.proxy.host "127.0.0.1:8888"

Non sono sicuro di BlueCrab

Il motivo per cui non si ottiene solo il proxy di tutte le richieste HTTP è perché a livello di sistema operativo non esiste una "richiesta HTTP"; ci sono solo connessioni TCP. Contattare un proxy HTTP significa modificare leggermente la richiesta HTTP e contattare il server proxy invece dell'host indicato nell'URL, quindi deve essere eseguito nel codice che implementa l'invio di richieste HTTP.

curl e wget hanno il proprio codice HTTP, che utilizza i propri file di configurazione - non sono stati programmati per cercare le impostazioni proxy dove Mac OS X li mantiene, né usano le librerie HTTP fornite con Mac OS X che usano quei proxy impostazioni.

Se non vuoi toccare i tuoi file di configurazione, usando curl puoi fare:

curl http://example.com --proxy 127.0.0.1:8888