sql >> Database >  >> RDS >> Mysql

CSV-upload met PHP/MySQL

Wanneer ik ooit een CSV in de databasetabel moest importeren, heb ik altijd mijn eigen csv-parser / importeur geschreven. Het is vrij eenvoudig.

Hier is een voorbeeld.

test.csv

Firstname,Lastname,Age
"Latheesan","Kanes",26
"Adam","Smith",30

test.php

<?php

// Mini Config
$csv_file       = 'test.csv';
$delimiter      = ',';
$enclosure      = '"';
$skip_first_row = true;
$import_chunk   = 250;

// Parse CSV & Build Import Query
$import_queries = array();
$first_row_skipped = false;
if (($handle = fopen($csv_file, "r")) !== FALSE) {
    while (($data = fgetcsv($handle, 1000, $delimiter, )) !== FALSE) {
        if ($skip_first_row && !$first_row_skipped) {
            $first_row_skipped = true;
            continue;
        }
        list($firstname, $lastname, $age) = $data;
        $import_queries[] = "INSERT INTO myTable (firstname, lastname, age) VALUES ('$firstname', '$lastname', $age);";
    }
    fclose($handle);
}

// Proceed if any data got parsed
if (sizeof($import_queries))
{
    foreach(array_chunk($import_queries, $import_chunk) as $queries)
    {
        $dbh->query(implode(' ', $queries));
    }
}

?>

De geparseerde zoekopdrachten zien er als volgt uit (als u print_r het):

Array
(
    [0] => INSERT INTO myTable (firstname, lastname, age) VALUES ('Latheesan', 'Kanes', 26);
    [1] => INSERT INTO myTable (firstname, lastname, age) VALUES ('Adam', 'Smith', 30);
)

Je hebt twee opties voor het daadwerkelijk importeren in de database:

  1. Bouw een verzameling SQL-importquery's en voer deze in een batch uit (array_chunk) - dit betekent minder query's op uw db. Zoals u echter kunt zien, controleer ik de waarden van de CSV niet - d.w.z. ik vertrouw mijn gegevensbron en ontkom nergens aan - een beetje gevaarlijk...

  2. Je voert de query uit zodra je hem hebt gebouwd met escape-waarden - klein nadeel is dat het één query per rij in csv uitvoert....

Ik hoop dat dit helpt.




  1. Is een MySQL-view sneller dan een normale query?

  2. SQLT in 12c kan geen statistieken verzamelen

  3. MAMP met Laravel Unix-aansluiting

  4. Hoe voeg ik twee count(*) resultaten bij elkaar op twee verschillende tabellen?