将CSV文件保存到mysql数据库中

时间:2012-07-11 12:18:44

标签: php mysql csv

我在目录中有很多csv文件。使用这些文件,我必须编写一个脚本,将其内容放在我的数据库的正确字段和表中。我几乎是php语言的初学者:我在互联网上找到了一些代码。它似乎有效,但我陷入了困境。有些主题与本网站有关,但我没有发现ecat问题。

我编写了一个php脚本,允许获取这些文件的路径和名称。我也设法创建一个名称取决于每个csv的表(例如:file'data_1.csv'在my-sql中提供表data_1.csv)。所有表都有三个相同的字段,id,url,value。 最后要做的是填充这些表,方法是读取每个文件,并将值以“|”字符分隔的值放在右表中。例如,如果'data_1.csv'行是

8756 | htttp://example.com |写的东西

我想在data_1.csv表中获取记录,其中8756在id中,在url字段中是htttp://example.com,在值字段中写入了一些内容。 我找到了用fcsvget函数读取和打印这些csv的方法。但我不知道如何让这些行进入SQL数据库。在这一点上有人可以帮助我吗?

以下是我的脚本

<?php 
ini_set('max_execution_time', 300); 
$dbhost = 'localhost'; 
$dbuser = 'root'; 
$dbpass = ''; 
$conn = mysql_connect($dbhost, $dbuser, $dbpass, true) or die                      ('Error connecting to mysql'); 
$dbname = 'test_database'; 

mysql_select_db($dbname); 


$bdd = mysqli_connect($dbhost, $dbuser, $dbpass, $dbname); 
$mysqli = new mysqli($dbhost, $dbuser, $dbpass, $dbname); 
if (mysqli_connect_errno()) { 
printf("Connect failed: %s\n", mysqli_connect_error()); 
exit(); 
} 
else { 
echo "hello <br>"; 
} 

$dir = 'C:\wamp\www\test';
$imgs = array();

if ($dh = opendir($dir)) {
while (($file = readdir($dh)) !== false) {
    if (!is_dir($file) && preg_match("/\.(csv)$/", $file)) {
        array_push($imgs, $file);
        }
    }

    closedir($dh);
} else {
    die('cannot open ' . $dir);
}
foreach ($imgs as $idx=>$img) {
    $class = ($idx == count($imgs) - 1 ? ' class="last"' : '');
    $filePath=$dir . '\\'. $img;
    $file = fopen($filePath, "r") or exit("Unable to open file!"); 
    $nom = 'FILE: ' . $dir . '\\'. $img;
    echo $nom;
    settype($nom, "string");
    echo '<br>';
    $chemin = '<img src="' . $dir . $img . '" alt="' . 
        $img . '"' . $class . ' />' . "\n";
    echo $chemin;
    $file_name =  basename($filePath);
    $sql = 'CREATE TABLE `' . $file_name . '` (id int(20000), url varchar(15), value TEXT)';
    mysql_query($sql,$conn);
    $handle = fopen($filePath, 'r');
    while (($row = fgetcsv($handle)) !== false) {
    foreach ($row as $field) {
    echo $field . '<br />';
}
}
fclose($handle);

}

echo ("VERIFY"); 
for ($i = 1; $i <= 1682; $i++) { 
    echo ("<br>A : " . $i); 
    $checkRequest= "select * from movies where movieID='". $i."'"; 
    echo ("<br>". $checkRequest); 
    if ($result = $mysqli->query($checkRequest)) { 
    printf("<br> Select ". $i ."returned %d rows.\n", $result->num_rows); 
    if ($result->num_rows == 0) { 

                    echo ("I : " . $i); 
            } 



$result->close(); 
    } 
} 

$mysqli->close(); 

?> 

3 个答案:

答案 0 :(得分:8)

MySQL提供了一个很棒的功能,允许您在一个查询中直接导入CSV文件。

您正在寻找的SQL命令是LOAD DATA INFILE

此处的手册页:http://dev.mysql.com/doc/refman/5.1/en/load-data.html

快速举例:

LOAD DATA INFILE 'fileName'
 INTO TABLE tableName
 FIELDS TERMINATED BY '|' OPTIONALLY ENCLOSED BY '"'
 LINES TERMINATED BY '\n'
(
field1,
field2,
field3,
@variable1,
@variable2,
etc
)
set
(
field4 = concat(@variable1,@variable2)
);

这是一个相当基本的例子,但它涵盖了你想要的大部分内容。手册页提供了如何用它做一些非常复杂的东西的完整细节。

希望有所帮助。

答案 1 :(得分:0)

之后

foreach ($row as $field) {
echo $field . '<br />'; 

您需要在;之后解析结果:

$pieces = explode(";", $field);

然后将每个部分插入数据库

$sql = ' INSERT INTO X VALUES ("'.$pieces[0].'","'.$pieces[1].'","'.$pieces[2].'","'.$pieces[3].'","'.$pieces[4].'")';
mysql_query($sql, $conn);

答案 2 :(得分:0)

也可以使用mysqlimport

private function runImport($host, $username, $password, $schema, $csvFilePath) {
    $output = array();
    $cmd = "/usr/bin/mysqlimport --host=$host";
    $cmd .= ' --fields-terminated-by=\',\'  --fields-optionally-enclosed-by=\'"\' ';
    $cmd .= ' --user=' . $username . ' --password='. $password;
    $cmd .= " $schema $csvFilePath";

    exec($cmd, $output, $retVal);

    foreach ($output as $line) {
       echo "$line\n";
    }

    echo "\n\nReturn code : $retVal";
}