È possibile forzare Excel a riconoscere automaticamente i file CSV UTF-8?

Sto sviluppando una parte di un'applicazione responsabile dell'esportazione di alcuni dati in file CSV. L'applicazione utilizza sempre UTF-8 a causa della sua natura multilingue a tutti i livelli. Ma l'apertura di tali file CSV (contenenti ad esempio segni diacritici, lettere cirilliche, lettere greche) in Excel non ottiene i risultati previsti mostrando qualcosa di simile Г„/Г¤, Г–/Г¶. E non so come forzare Excel a capire che il file CSV aperto è codificato in UTF-8. Ho anche provato a specificare la distinta base UTF-8 EF BB BF, ma Excel lo ignora.

C'è qualche soluzione?

PS Quali strumenti potrebbero comportarsi potenzialmente come Excel?

AGGIORNARE

Devo dire che ho confuso la comunità con la formulazione della domanda. Quando stavo ponendo questa domanda, ho chiesto un modo per aprire un file CSV UTF-8 in Excel senza problemi per un utente, in modo fluido e trasparente. Tuttavia, ho usato una formulazione sbagliata che mi chiedeva di farlo automaticamente . È molto confuso e si scontra con l'automazione delle macro VBA. Ci sono due risposte a questa domanda che apprezzo di più: la prima risposta di Alex https://stackoverflow.com/a/6002338/166589 e ho accettato questa risposta; e il secondo di Mark https://stackoverflow.com/a/6488070/166589che sono apparsi poco dopo. Dal punto di vista dell'usabilità, a Excel sembrava mancare un buon supporto CSV UTF-8 facile da usare, quindi ritengo che entrambe le risposte siano corrette e ho accettato la risposta di Alex prima perché affermava davvero che Excel non era in grado di fare quello in modo trasparente. Questo è ciò che ho confuso automaticamente qui. La risposta di Mark promuove un modo più complicato per gli utenti più avanzati di raggiungere il risultato atteso. Entrambe le risposte sono fantastiche, ma quella di Alex si adatta un po 'meglio alla mia domanda non chiaramente specificata.

AGGIORNAMENTO 2

Cinque mesi dopo l'ultima modifica, ho notato che la risposta di Alex è scomparsa per qualche motivo. Spero davvero che non sia stato un problema tecnico e spero che non ci siano più discussioni su quale risposta sia maggiore adesso. Quindi sto accettando la risposta di Mark come la migliore.

Alex ha ragione, ma dato che devi esportare in CSV, puoi dare questo consiglio agli utenti quando aprono i file CSV:

1. Salva il file esportato come csv
2. Apri Excel
3. Importa i dati utilizzando Dati -> Importa dati esterni -> Importa dati
4. Seleziona il tipo di file "csv" e cerca il tuo file
5. Nella procedura guidata di importazione, modifica File_Origin in "65001 UTF" (o scegli l'identificatore del carattere lingua corretto)
6. Cambia il delimitatore in virgola
7. Seleziona dove importare e Fine

In questo modo i caratteri speciali dovrebbero essere visualizzati correttamente.

Il marcatore di ordine byte UTF-8 indicherà Excel 2007+ per il fatto che stai utilizzando UTF-8. (Vedi questo post SO ).

Nel caso in cui qualcuno abbia gli stessi problemi, la classe di codifica UTF8 di .NET non genera un marcatore di ordine byte in una GetBytes()chiamata. Devi usare gli stream (o usare una soluzione alternativa ) per ottenere l'output della distinta componenti.

Il bug con la DBA ignorata sembra essere stato corretto per Excel 2013. Ho avuto lo stesso problema con le lettere in cirillico, ma l'aggiunta del carattere della DBA \uFEFFha aiutato.

È incredibile che ci siano così tante risposte ma nessuna risponde alla domanda:

"Quando stavo facendo questa domanda, ho chiesto un modo per aprire un file CSV UTF-8 in Excel senza alcun problema per un utente, ..."

La risposta contrassegnata come risposta accettata con oltre 200 voti positivi è inutile per me perché non voglio fornire ai miei utenti un manuale su come configurare Excel. A parte questo: questo manuale si applicherà a una versione di Excel ma altre versioni di Excel hanno menu e finestre di dialogo di configurazione diversi. Avresti bisogno di un manuale per ogni versione di Excel.

Quindi la domanda è come fare in modo che Excel mostri i dati UTF8 con un semplice doppio clic?

Beh, almeno in Excel 2007 questo non è possibile se si utilizzano file CSV perché la DBA UTF8 viene ignorata e vedrai solo immondizia. Questo fa già parte della domanda di Lyubomyr Shaydariv:

"Ho anche provato a specificare UTF-8 BOM EF BB BF, ma Excel lo ignora."

Faccio la stessa esperienza: scrivere dati russi o greci in un file CSV UTF8 con risultati DBA in spazzatura in Excel:

Contenuto del file CSV UTF8:

Colum1;Column2
Val1;Val2
Авиабилет;Tλληνικ

Risultato in Excel 2007:

Una soluzione è non usare affatto CSV. Questo formato è implementato così stupidamente da Microsoft che dipende dalle impostazioni della regione nel pannello di controllo se come separatore viene utilizzata la virgola o il punto e virgola . Quindi lo stesso file CSV potrebbe aprirsi correttamente su un computer ma non su un altro computer. "CSV" significa " Valori separati da virgola " ma, ad esempio, su un Windows tedesco di default il punto e virgola deve essere usato come separatore mentre la virgola non funziona. (Qui dovrebbe essere chiamato SSV = punti separati da punto e virgola) I file CSV non possono essere scambiati tra versioni di Windows in lingue diverse. Questo è un ulteriore problema al problema UTF-8.

Excel esiste da decenni. È un peccato che Microsoft non sia stata in grado di implementare una cosa di base come l'importazione CSV in tutti questi anni.

Tuttavia, se si inseriscono gli stessi valori in un file HTML e si salva quel file come file UTF8 con BOM con l'estensione XLS, si otterrà il risultato corretto.

Contenuto del file XLS UTF8:

<table>
<tr><td>Colum1</td><td>Column2</td></tr>
<tr><td>Val1</td><td>Val2</td></tr>
<tr><td>Авиабилет</td><td>Tλληνικ</td></tr>
</table>

Risultato in Excel 2007:

Puoi anche usare i colori in HTML che Excel mostrerà correttamente.

<style>
.Head { background-color:gray; color:white; }
.Red  { color:red; }
</style>
<table border=1>
<tr><td class=Head>Colum1</td><td class=Head>Column2</td></tr>
<tr><td>Val1</td><td>Val2</td></tr>
<tr><td class=Red>Авиабилет</td><td class=Red>Tλληνικ</td></tr>
</table>

Risultato in Excel 2007:

In questo caso solo la tabella stessa ha un bordo e linee neri. Se si desidera che TUTTE le celle visualizzino la griglia, questo è possibile anche in HTML:

<html xmlns:x="urn:schemas-microsoft-com:office:excel">
    <head>
        <meta http-equiv="content-type" content="text/plain; charset=UTF-8"/>
        <xml>
            <x:ExcelWorkbook>
                <x:ExcelWorksheets>
                    <x:ExcelWorksheet>
                        <x:Name>MySuperSheet</x:Name>
                        <x:WorksheetOptions>
                            <x:DisplayGridlines/>
                        </x:WorksheetOptions>
                    </x:ExcelWorksheet>
                </x:ExcelWorksheets>
            </x:ExcelWorkbook>
        </xml>
    </head>
    <body>
        <table>
            <tr><td>Colum1</td><td>Column2</td></tr>
            <tr><td>Val1</td><td>Val2</td></tr>
            <tr><td>Авиабилет</td><td>Tλληνικ</td></tr>
        </table>
    </body>
</html>

Questo codice consente anche di specificare il nome del foglio di lavoro (qui "MySuperSheet")

Risultato in Excel 2007:

Abbiamo usato questa soluzione alternativa:

1. Convertire CSV in UTF-16 LE
2. Inserisci DBA all'inizio del file
3. Usa la scheda come separatore di campo

Ha avuto gli stessi problemi con i file CSV generati da PHP. Excel ha ignorato la distinta componenti quando è stato definito il separatore tramite"sep=,\n" all'inizio del contenuto (ma ovviamente dopo la DBA).

Quindi l'aggiunta di una DBA ( "\xEF\xBB\xBF") all'inizio del contenuto e l'impostazione del punto e virgola come separatore tramite fputcsv($fh, $data_array, ";");il trucco.

Ho avuto lo stesso problema in passato (come produrre file che Excel può leggere e anche altri strumenti possono leggere). Stavo usando TSV piuttosto che CSV, ma è emerso lo stesso problema con le codifiche.

Non sono riuscito a trovare un modo per far sì che Excel riconoscesse automaticamente UTF-8 e non ero disposto / in grado di infliggere agli utenti dei file istruzioni complicate su come aprirli. Quindi li ho codificati come UTF-16le (con una distinta componenti) anziché UTF-8. Due volte la dimensione, ma Excel è in grado di riconoscere la codifica. E si comprimono bene, quindi le dimensioni raramente (ma purtroppo non mai) contano.

Vecchia domanda ma diamine, la soluzione più semplice è:

1. Apri CSV in Blocco note
2. Salva con nome -> seleziona la codifica corretta
3. Apri il nuovo file

Come ho pubblicato su http://thinkinginsoftware.blogspot.com/2017/12/correctly-generate-csv-that-excel-can.html :

Dì allo sviluppatore del software incaricato di generare il CSV per correggerlo. Come soluzione rapida puoi usare gsed per inserire la DBA UTF-8 all'inizio della stringa:

gsed -i '1s/^\(\xef\xbb\xbf\)\?/\xef\xbb\xbf/' file.csv

Questo comando inserisce la DBA UTF-4 se non presente. Pertanto è un comando idempotente. Ora dovresti essere in grado di fare doppio clic sul file e aprirlo in Excel.

Puoi convertire il file .csv in UTF-8 con BOM tramite Notepad ++:

1. Apri il file in Notepad ++ .
2. Vai al menu Encoding→Convert to UTF-8 .
3. Vai al menu File→Save .
4. Chiudi Notepad ++.
5. Apri il file in Excel.

Ha funzionato in Microsoft Excel 2013 (15.0.5093.1000) MSO (15.0.5101.1000) a 64 bit da Microsoft Office Professional Plus 2013 su Windows 8.1 con impostazioni internazionali per i programmi non Unicode impostati su "Tedesco (Germania)".

Macro vba semplice per l'apertura di file di testo uts-8 e CSV

Sub OpenTextFile()

   filetoopen = Application.GetOpenFilename("Text Files (*.txt;*.csv), *.txt;*.csv")
   If filetoopen = Null Or filetoopen = Empty Then Exit Sub

   Workbooks.OpenText Filename:=filetoopen, _
   Origin:=65001, DataType:=xlDelimited, Comma:=True

End Sub

Origine: = 65001 è UTF-8. Virgola: vero per i file .csv distribuiti in colonne

Salvalo in Personal.xlsb per averlo sempre disponibile. Personalizza la barra degli strumenti di Excel aggiungendo un pulsante di chiamata macro e apri i file da lì. Puoi aggiungere altri formati alla macro, come ad esempio adattamento automatico colonna, allineamento, ecc.

Solo per aiutare gli utenti interessati ad aprire il file su Excel che ottengono questo thread come me.

Ho usato la procedura guidata qui sotto e ha funzionato bene per me, importando un file UTF-8. Non trasparente, ma utile se hai già il file.

1. Apri Microsoft Excel 2007.
2. Fai clic sull'opzione della barra dei menu Dati.
3. Fai clic sull'icona Da testo.
4. Passare alla posizione del file che si desidera importare. Fare clic sul nome file e quindi fare clic sul pulsante Importa. La procedura guidata per l'importazione del testo - La finestra Step 1 o 3 ora apparirà sullo schermo.
5. Scegli il tipo di file che meglio descrive i tuoi dati: larghezza delimitata o fissa.
6. Scegli 65001: Unicode (UTF-8) dall'elenco a discesa che appare accanto a Origine file.
7. Fare clic sul pulsante Avanti per visualizzare l'Importazione guidata testo - finestra Passaggio 2 o 3.
8. Metti un segno di spunta accanto al delimitatore utilizzato nel file che desideri importare in Microsoft Excel 2007. La finestra di anteprima dei dati ti mostrerà come appariranno i tuoi dati in base al delimitatore che hai scelto.
9. Fare clic sul pulsante Avanti per visualizzare l'Importazione guidata testo - Passaggio 3 di 3.
10. Scegli il formato dati appropriato per ogni colonna di dati che desideri importare. Hai anche la possibilità di non importare una o più colonne di dati, se lo desideri.
11. Fare clic sul pulsante Fine per completare l'importazione dei dati in Microsoft Excel 2007.

Fonte: https://www.itg.ias.edu/content/how-import-csv-file-uses-utf-8-character-encoding-0

Sì, questo è possibile. Come precedentemente notato da più utenti, sembra esserci un problema con Excel che legge il corretto Byte Order Mark quando il file è codificato in UTF-8. Con UTF-16 non sembra avere un problema, quindi è endemico a UTF-8. La soluzione che uso per questo è l'aggiunta della DBA, DUE VOLTE. Per questo eseguo il seguente comando sed due volte:

sed -I '1s/^/\xef\xbb\xbf/' *.csv

, in cui il carattere jolly può essere sostituito con qualsiasi nome di file. Tuttavia, ciò porta a una mutazione di sep = all'inizio del file .csv. Il file .csv si aprirà quindi normalmente in Excel, ma con una riga aggiuntiva con "sep =" nella prima cella. "Sep =" può anche essere rimosso nel .csv di origine stesso, ma quando si apre il file con VBA è necessario specificare il delimitatore:

Workbooks.Open(name, Format:=6, Delimiter:=";", Local:=True)

Il formato 6 è il formato .csv. Impostare Local su true, nel caso in cui vi siano date nel file. Se Local non è impostato su true, le date saranno americanizzate, il che in alcuni casi danneggerà il formato .csv.

Questa è la mia soluzione di lavoro:

vbFILEOPEN = "your_utf8_file.csv"
Workbooks.OpenText Filename:=vbFILEOPEN, DataType:=xlDelimited, Semicolon:=True, Local:=True, Origin:=65001

La chiave è Origine: = 65001

Sì, è possibile. Quando si scrive lo stream creando il CSV, la prima cosa da fare è questa:

myStream.Write(Encoding.UTF8.GetPreamble(), 0, Encoding.UTF8.GetPreamble().Length)

Un elenco di risposte davvero sorprendente, ma poiché ne manca ancora uno abbastanza buono, lo menzionerò qui: apri il file CSV con fogli di Google e salvalo sul tuo computer locale come file Excel.

A differenza di Microsoft, Google è riuscita a supportare i file csv UTF-8, quindi funziona solo per aprire il file lì. E anche l'esportazione in formato Excel funziona. Quindi, anche se questa potrebbe non essere la soluzione preferita per tutti, è abbastanza sicura e il numero di clic non è così elevato come potrebbe sembrare, soprattutto quando sei già connesso a Google comunque.

Questo non sta affrontando accuratamente la domanda, ma dal momento che mi sono imbattuto in questo e le soluzioni di cui sopra non hanno funzionato per me o avevo requisiti che non potevo soddisfare, ecco un altro modo per aggiungere la DBA quando si ha accesso a VIM:

vim -e -s +"set bomb|set encoding=utf-8|wq" filename.csv

ciao sto usando ruby ​​on rails per la generazione di CSV. Nella nostra applicazione intendiamo scegliere il multi lingua (I18n) e abbiamo riscontrato un problema durante la visualizzazione del contenuto I18n nel file CSV di Windows Excel.

Andava bene con Linux (Ubuntu) e mac.

Abbiamo identificato che Windows Excel deve essere importato nuovamente i dati per visualizzare i dati effettivi. Durante l'importazione avremo più opzioni per scegliere il set di caratteri.

Ma questo non può essere educato per ogni singolo utente, quindi la soluzione che stiamo cercando è quella di aprire solo con un doppio clic.

Quindi abbiamo identificato il modo di mostrare i dati in modalità aperta e bom in Windows eccellere con l'aiuto di aghuddleston gist . Aggiunto a riferimento.

Esempio di contenuto I18n

In Mac e Linux

Svedese: Förnamn inglese: nome

In Windows

Svedese: Förnamn inglese: nome

def user_information_report(report_file_path, user_id)
    user = User.find(user_id)
    I18n.locale = user.current_lang
    open_mode = "w+:UTF-16LE:UTF-8"
    bom = "\xEF\xBB\xBF"
    body user, open_mode, bom
  end

def headers
    headers = [
        "ID", "SDN ID",
        I18n.t('sys_first_name'), I18n.t('sys_last_name'), I18n.t('sys_dob'),
        I18n.t('sys_gender'), I18n.t('sys_email'), I18n.t('sys_address'),
        I18n.t('sys_city'), I18n.t('sys_state'), I18n.t('sys_zip'),
        I18n.t('sys_phone_number')
    ]
  end

def body tenant, open_mode, bom
    File.open(report_file_path, open_mode) do |f|
      csv_file = CSV.generate(col_sep: "\t") do |csv|
        csv << headers
        tenant.patients.find_each(batch_size: 10) do |patient|
          csv <<  [
              patient.id, patient.patientid,
              patient.first_name, patient.last_name, "#{patient.dob}",
              "#{translate_gender(patient.gender)}", patient.email, "#{patient.address_1.to_s} #{patient.address_2.to_s}",
              "#{patient.city}", "#{patient.state}",  "#{patient.zip}",
              "#{patient.phone_number}"
          ]
        end
      end
      f.write bom
      f.write(csv_file)
    end
  end

Le cose importanti da notare qui sono la modalità aperta e la bom

open_mode = "w +: UTF-16LE: UTF-8"

bom = "\ xEF \ xBB \ xBF"

Prima di scrivere il CSV inserire la DBA

f. scrivere bom

f.write (csv_file)

Windows e Mac

Il file può essere aperto direttamente facendo doppio clic.

Linux (ubuntu)

Quando apri un file chiedi le opzioni di separazione -> scegli "TAB"

Ho riscontrato lo stesso problema qualche giorno fa e non sono riuscito a trovare alcuna soluzione perché non riesco a utilizzare import from csv funzione perché rende tutto in stile stringa.

La mia soluzione era di aprire prima il file con notpad ++ e change the encode to ASCII. Quindi ho appena aperto il file in Excel e ha funzionato come previsto.

In php hai appena anteposto $ bom al tuo $ csv_string:

$bom = sprintf( "%c%c%c", 239, 187, 191); // EF BB BF
file_put_contents( $file_name, $bom . $csv_string );

Testato con MS Excel 2016, php 7.2.4

Questa è una vecchia domanda ma ho appena riscontrato un problema simile e la soluzione potrebbe aiutare gli altri:

Aveva lo stesso problema in cui la scrittura di dati di testo CSV in un file, quindi l'apertura del risultante .csv in Excel sposta tutto il testo in una singola colonna. Dopo aver letto le risposte sopra ho provato quanto segue, che sembra risolvere il problema.

Applica una codifica di UTF-8 quando crei StreamWriter. Questo è tutto.

Esempio:

using (StreamWriter output = new StreamWriter(outputFileName, false, Encoding.UTF8, 2 << 22)) {
   /* ... do stuff .... */
   output.Close();
}

Se vuoi renderlo completamente automatico, un clic o caricare automaticamente in Excel da una pagina web, ma non puoi generare file Excel corretti, ti suggerisco di guardare il formato SYLK come alternativa. OK non è semplice come CSV ma è basato su testo e molto facile da implementare e supporta UTF-8 senza problemi.

Ho scritto una classe PHP che riceve i dati e genera un file SYLK che si aprirà direttamente in Excel semplicemente facendo clic sul file (o avvierà automaticamente Excel se si scrive il file in una pagina Web con il tipo MIME corretto. È anche possibile aggiungi la formattazione (come grassetto, formatta numeri in modi particolari, ecc.) e modifica le dimensioni delle colonne o le colonne delle dimensioni automatiche al testo nelle colonne e tutto sommato il codice probabilmente non è più di circa 100 righe.

È semplicissimo decodificare SYLK creando un semplice foglio di calcolo e salvandolo come SYLK e quindi leggendolo con un editor di testo. Il primo blocco sono le intestazioni e i formati numerici standard che riconoscerai (che rigurgiti in ogni file che crei), quindi i dati sono semplicemente una coordinata X / Y e un valore.

1. Scarica e installa LibreOffice Calc
2. Apri il file csv di tua scelta in LibreOffice Calc
3. Grazie al cielo che appare una procedura guidata di importazione del testo ...
4. ... seleziona il delimitatore e le opzioni di codifica dei caratteri
5. Seleziona i dati risultanti in Calc e copia incolla in Excel

Sto generando file CSV da una semplice applicazione C # e ho avuto lo stesso problema. La mia soluzione era assicurarsi che il file fosse scritto con la codifica UTF8, in questo modo:

// Use UTF8 encoding so that Excel is ok with accents and such.
using (StreamWriter writer = new StreamWriter(path, false, Encoding.UTF8))
{
    SaveCSV(writer);
}

Inizialmente avevo il seguente codice, con il quale gli accenti sembrano a posto in Notepad ++ ma sono stati alterati in Excel:

using (StreamWriter writer = new StreamWriter(path))
{
    SaveCSV(writer);
}

Il tuo chilometraggio può variare: sto usando .NET 4 ed Excel da Office 365.

Soluzione funzionante per Office 365

• salva in UTF-16(no LE, BE)
• usa il separatore \t

Codice in PHP

$header = ['číslo', 'vytvořeno', 'ěščřžýáíé'];
$fileName = 'excel365.csv';
$fp = fopen($fileName, 'w');
fputcsv($fp, $header, "\t");
fclose($fp);

$handle = fopen($fileName, "r");
$contents = fread($handle, filesize($fileName));
$contents = iconv('UTF-8', 'UTF-16', $contents);
fclose($handle);

$handle = fopen($fileName, "w");
fwrite($handle, $contents);
fclose($handle);

Innanzitutto salva il foglio di calcolo Excel come testo Unicode. Apri il file TXT usando Internet Explorer e fai clic su "Salva come" Codifica TXT: scegli la codifica appropriata, ad esempio per Win Cyrillic 1251

Ho provato tutto ciò che ho potuto trovare su questo thread e simili, niente ha funzionato completamente. Tuttavia, l'importazione su fogli di Google e il semplice download come CSV ha funzionato come un fascino. Provalo se vieni al mio punto di frustrazione.