php - 使用CI中的加载数据InFile上载500000条记录，但有时未插入所有记录

我正在使用CI中的加载数据InFile上传500 000条记录，但有时所有记录已插入，或者有时数千条记录未插入同一csv文件中。

控制者

public function upload_csv_test()
{
    $adminid = $this->session->userdata('aid');
    if(empty($adminid))
    {
        redirect('admin/index');
    }
    else
    {
        $file_path = "/var/www/html/asset/test_csv/5Lac.csv";
        $sub = $this->Admin_model->add_csv_data($file_path);
    }
}

模型

public function add_csv_data($file_path)
{

    $this->db->query("LOAD DATA LOCAL INFILE '".$file_path."'
    INTO TABLE test_csv
    FIELDS TERMINATED BY ','
    LINES TERMINATED BY '\\n'
    IGNORE 1 LINES
    (cid,latitude,longitude,Email,Personal_FirstName)
    ");

}

最佳答案

如果数据库将引发错误，则该功能不会插入任何数据。通常是当列的格式错误，例如日期或十进制数字时。

如果您可以检测到一个失败的文件，请将该文件分成几批，然后查看其值。您甚至可以将其转换为普通的插入命令，并使用失败的数据对其进行测试。
祝好运！