[Tutorial] Script per importare un file testuale in mysql

[massimux]

si in questo modo fai fare tutto a mysql ma se il file è abbastanza grande mysql và in cresh a meno che il server su cui si appoggia non sia solo ed unicamente per quello....

provare per credere

[Gorka]

Io ho provato in locale con file csv più grandi di 4 mb e ho ottenuto un notevole miglioramento delle prestazioni rispetto all'uso di script in PHP (con l'uso ad esempio di fgetcsv).

Adesso lo devo testare su un server dedicato, speriamo vada bene.

[momino]

Questa mi è proprio nuova...

[massimux]

io intendevo mooolto più grandi magari dovevo specificare che io ho fatto questi test su file intorno ai 16MB

per lo script php io utilizzavo una divisione in più in modo che ad ogni tabella lo script fermava il suo accesso a mysql ad ogni tabella in modo da non appesantire il server.

Comunque la tua soluzione è la più veloce sin'ora

[talkoman]

Ottima guida veramente...
Nel mio file CSV separati da puntoevirgola ( come faccio a saltare la prima riga che contiene le intestazioni delle colonne?
Grazie!

[Gorka]

Dopo LINES TERMINATED... puoi aggiungere IGNORE 1 LINES

[talkoman]

Intendevo nello script PHP....

[talkoman]

Ciao a tutti,
ho utilizzato lo script PHP come mi è stato esposto sopra.
Funziona alla perfezione solo che siccome il mio file è un file contenente migliaia di atleti e per ogni atleta è specificata la società di appartenenza.
Con questo script dovrei prima prendermi solo le squadre (sempre dallo stesso file).
Il problema è che le prendo tutte le righe si creerebbero dei doppioni...allora ho cercato di adattarlo così:

Codice PHP:

$societa=array();//creo un array dove vengono conservati tutti gli utenti presenti nel file
$i=0;//creo un indice per l'array
$doppione=0;//creo un contatore per i doppioni
if($file=fopen("atleti.txt","r")){
    while (!feof($file)){
        $riga=fgets($file,255);//Leggo una riga intera del file e la inserisco in una variabile
        $riga=explode(";",$riga);//Taglio la stringa nel punto in cui è presente il carattere -
        $progressivo=$riga[10];
        $regione=$riga[9];
        $codice=$regione."-".$progressivo;
        if($i>=1){
            for($x=0;$x<=$i-1;$x++){
                if($codice==$societa[$x]['codReg_Soc']."-".$societa[$x]['codPrg_Soc'])
                    $doppione=$doppione+1;
            }
        }
        if($doppione==0){
            $societa[$i]['codReg_Soc']=$riga[9];//Inserisco la prima parte della stringa che rappresenta il codice dell'utente all'interno dell'array
            $societa[$i]['codPrg_Soc']=$riga[10];//Inserisco la secondo parte della string che rappresenta il nome dell'utente all'interno dell'array
            $societa[$i]['denominazione_Soc']=$riga[11];
        }
        $doppione=0;  //Azzero nuovamente il contatore dei doppioni
        $i++;//Incremento l'indice
    }
}else
    echo "Impossibile aprire il file";//Nel caso in cui non si riesca ad aprire il file
fclose($file); //chiudo il descrittore del file 


Lo script è lentissimo, però funziona. Ma c'è un problema...su 85 Società, lui me ne estra solo 80.
Come mai?
Sbaglio qualcosa?
Grazie!!