Scorrere su ogni riga di una stringa in PHP

Ho un modulo che consente all'utente di caricare un file di testo o di copiare / incollare il contenuto del file in un'area di testo. Posso facilmente distinguere tra i due e mettere quello che hanno inserito in una variabile stringa, ma dove devo andare da lì?

Devo scorrere su ogni riga della stringa (preferibilmente non preoccuparmi di newline su macchine diverse), assicurarmi che abbia esattamente un token (senza spazi, tabulazioni, virgole, ecc.), Disinfettare i dati, quindi generare una query SQL basato su tutte le linee.

Sono un programmatore abbastanza bravo, quindi conosco l'idea generale di come farlo, ma è passato tanto tempo da quando ho lavorato con PHP che sento di cercare cose sbagliate e quindi di trovare informazioni inutili. Il problema chiave che sto riscontrando è che voglio leggere il contenuto della stringa riga per riga. Se fosse un file, sarebbe facile.

Sto principalmente cercando utili funzioni PHP, non un algoritmo per come farlo. Eventuali suggerimenti?

preg_split la variabile che contiene il testo e scorre sull'array restituito:

foreach(preg_split("/((\r?\n)|(\r\n?))/", $subject) as $line){
    // do stuff with $line
} 

Vorrei proporre un'alternativa significativamente più veloce (ed efficiente in termini di memoria): strtokpiuttosto che preg_split.

$separator = "\r\n";
$line = strtok($subject, $separator);

while ($line !== false) {
    # do something with $line
    $line = strtok( $separator );
}

Testando le prestazioni, ho ripetuto 100 volte su un file di test con 17 mila righe: ci sono preg_splitvoluti 27,7 secondi, mentre ci sono strtokvoluti 1,4 secondi.

Nota che sebbene $separatorsia definito come "\r\n", strtoksi separerà su entrambi i caratteri e, a partire da PHP4.1.0, salta le righe / i token vuoti.

Vedere la voce del manuale strtok: http://php.net/strtok

Se hai bisogno di gestire newline in sistemi diversi puoi semplicemente usare la costante PHP_EOL predefinita PHP (http://php.net/manual/en/reserved.constants.php) e usare semplicemente esplodi per evitare il sovraccarico del motore delle espressioni regolari .

$lines = explode(PHP_EOL, $subject);

È eccessivamente complicato e brutto, ma secondo me questa è la strada da percorrere:

$fp = fopen("php://memory", 'r+');
fputs($fp, $data);
rewind($fp);
while($line = fgets($fp)){
  // deal with $line
}
fclose($fp);

foreach(preg_split('~[\r\n]+~', $text) as $line){
    if(empty($line) or ctype_space($line)) continue; // skip only spaces
    // if(!strlen($line = trim($line))) continue; // or trim by force and skip empty
    // $line is trimmed and nice here so use it
}

^ questo è il modo in cui interrompi correttamente le linee , compatibile multipiattaforma Regexp:)

Potenziali problemi di memoria con strtok :

Dal momento che una delle soluzioni suggerite utilizza strtok, purtroppo non indica un potenziale problema di memoria (sebbene affermi di essere efficiente in termini di memoria). Quando si utilizza strtoksecondo il manuale , il:

Nota che solo la prima chiamata a strtok utilizza l'argomento stringa. Ogni chiamata successiva a strtok richiede solo l'uso del token, in quanto tiene traccia di dove si trova nella stringa corrente.

Lo fa caricando il file in memoria. Se stai utilizzando file di grandi dimensioni, devi scaricarli se hai finito di scorrere il file.

<?php
function process($str) {
    $line = strtok($str, PHP_EOL);

    /*do something with the first line here...*/

    while ($line !== FALSE) {
        // get the next line
        $line = strtok(PHP_EOL);

        /*do something with the rest of the lines here...*/

    }
    //the bit that frees up memory
    strtok('', '');
}

Se ti occupi solo di file fisici (es. Datamining):

Secondo il manuale , per la parte di caricamento del file è possibile utilizzare il filecomando:

 //Create the array
 $lines = file( $some_file );

 foreach ( $lines as $line ) {
   //do something here.
 }

La risposta di Kyril è la migliore considerando che devi essere in grado di gestire le nuove linee su macchine diverse.

"Sono principalmente alla ricerca di utili funzioni PHP, non di un algoritmo per come farlo. Qualche suggerimento?"

Li uso molto:

• explode () può essere usato per dividere una stringa in un array, dato un singolo delimitatore.
• implode () è la controparte di explode, per tornare dall'array alla stringa.