Sto usando tqdmper stampare i progressi in uno script che sto eseguendo su un quaderno Jupyter. Sto stampando tutti i messaggi sulla console tramite tqdm.write(). Tuttavia, questo mi dà ancora un output distorto in questo modo:

Cioè, ogni volta che deve essere stampata una nuova riga, sulla riga successiva viene stampata una nuova barra di avanzamento. Questo non accade quando eseguo lo script tramite terminale. Come posso risolvere questo?

Prova a utilizzare tqdm.notebook.tqdminvece di tqdm, come indicato qui .

Questo potrebbe essere semplice come cambiare l'importazione in:

from tqdm.notebook import tqdm

In bocca al lupo!

EDIT: dopo il test, sembra che funzioni tqdmdavvero bene in 'modalità testo' nel notebook Jupyter. È difficile da dire perché non hai fornito un esempio minimo , ma sembra che il tuo problema sia causato da un'istruzione di stampa in ogni iterazione. L'istruzione print sta superando un numero (~ 0,89) tra ogni aggiornamento della barra di stato, il che sta rovinando l'output. Prova a rimuovere la dichiarazione di stampa.

Questa è una risposta alternativa nel caso in cui tqdm_notebook non funzioni per te.

Dato il seguente esempio:

from time import sleep
from tqdm import tqdm

values = range(3)
with tqdm(total=len(values)) as pbar:
    for i in values:
        pbar.write('processed: %d' %i)
        pbar.update(1)
        sleep(1)

L'output sarebbe simile a questo (i progressi sarebbero visualizzati in rosso):

  0%|          | 0/3 [00:00<?, ?it/s]
processed: 1
 67%|██████▋   | 2/3 [00:01<00:00,  1.99it/s]
processed: 2
100%|██████████| 3/3 [00:02<00:00,  1.53it/s]
processed: 3

Il problema è che l'output di stdout e stderr viene elaborato in modo asincrono e separatamente in termini di nuove righe.

Se dice che Jupyter riceve su stderr la prima riga e quindi l'output "elaborato" su stdout. Quindi una volta ricevuto un output su stderr per aggiornare l'avanzamento, non tornerà indietro e aggiornerà la prima riga poiché aggiornerebbe solo l'ultima riga. Dovrà invece scrivere una nuova riga.

Soluzione 1, scrivere su stdout

Una soluzione alternativa sarebbe invece l'output di entrambi su stdout:

import sys
from time import sleep
from tqdm import tqdm

values = range(3)
with tqdm(total=len(values), file=sys.stdout) as pbar:
    for i in values:
        pbar.write('processed: %d' % (1 + i))
        pbar.update(1)
        sleep(1)

L'output cambierà in (non più rosso):

processed: 1   | 0/3 [00:00<?, ?it/s]
processed: 2   | 0/3 [00:00<?, ?it/s]
processed: 3   | 2/3 [00:01<00:00,  1.99it/s]
100%|██████████| 3/3 [00:02<00:00,  1.53it/s]

Qui possiamo vedere che Jupyter non sembra cancellare fino alla fine della linea. Potremmo aggiungere un'altra soluzione alternativa aggiungendo spazi. Ad esempio:

import sys
from time import sleep
from tqdm import tqdm

values = range(3)
with tqdm(total=len(values), file=sys.stdout) as pbar:
    for i in values:
        pbar.write('processed: %d%s' % (1 + i, ' ' * 50))
        pbar.update(1)
        sleep(1)

Che ci dà:

processed: 1                                                  
processed: 2                                                  
processed: 3                                                  
100%|██████████| 3/3 [00:02<00:00,  1.53it/s]

Soluzione 2, impostare invece la descrizione

In generale potrebbe essere più semplice non avere due uscite ma aggiornare invece la descrizione, ad esempio:

import sys
from time import sleep
from tqdm import tqdm

values = range(3)
with tqdm(total=len(values), file=sys.stdout) as pbar:
    for i in values:
        pbar.set_description('processed: %d' % (1 + i))
        pbar.update(1)
        sleep(1)

Con l'output (descrizione aggiornata durante l'elaborazione):

processed: 3: 100%|██████████| 3/3 [00:02<00:00,  1.53it/s]

Conclusione

Per lo più puoi farlo funzionare bene con tqdm semplice. Ma se tqdm_notebook funziona per te, basta usarlo (ma probabilmente non avresti letto così lontano).

La maggior parte delle risposte è obsoleta ora. Meglio se importate correttamente tqdm .

from tqdm import tqdm_notebook as tqdm

Se gli altri suggerimenti qui non funzionano e, proprio come me, stai utilizzando l' pandasintegrazione progress_apply, puoi lasciarlo tqdmgestire:

from tqdm.autonotebook import tqdm
tqdm.pandas()

df.progress_apply(row_function, axis=1)

Il punto principale qui sta nel tqdm.autonotebookmodulo. Come indicato nelle loro istruzioni per l'uso nei Notebook IPython , questo fa tqdmscegliere tra i formati della barra di avanzamento utilizzati nei notebook Jupyter e nelle console Jupyter - per un motivo ancora privo di ulteriori indagini da parte mia, il formato specifico scelto da tqdm.autonotebookfunziona senza intoppi pandas, mentre tutti gli altri no per, in progress_applyparticolare.

Per completare la risposta di oscarbranson: è possibile selezionare automaticamente le versioni per console o notebook della barra di avanzamento a seconda di dove viene eseguita:

from tqdm.autonotebook import tqdm

Maggiori informazioni possono essere trovate qui

Nessuna delle precedenti funzioni per me. Trovo che correre per seguire questo problema dopo l'errore (cancella solo tutte le istanze delle barre di avanzamento in background):

from tqdm import tqdm

# blah blah your code errored

tqdm._instances.clear()

Per tutti coloro che si trovano su Windows e non sono in grado di risolvere il problema delle barre di duplicazione con nessuna delle soluzioni menzionate qui. Ho dovuto installare il coloramapacchetto come indicato nei problemi noti di tqdm che lo hanno risolto.

pip install colorama

Provalo con questo esempio:

from tqdm import tqdm
from time import sleep

for _ in tqdm(range(5), "All", ncols = 80, position = 0):
    for _ in tqdm(range(100), "Sub", ncols = 80, position = 1, leave = False):
        sleep(0.01)

Che produrrà qualcosa di simile:

All:  60%|████████████████████████                | 3/5 [00:03<00:02,  1.02s/it]
Sub:  50%|██████████████████▌                  | 50/100 [00:00<00:00, 97.88it/s]

Usa tqdm_notebook

from tqdm import 
tqdm_notebook as tqdm

x=[1,2,3,4,5]

for i in tqdm(len(x)):

    print(x[i])