我有一个很大的研究,大约有50个问题和70000个条目,所以手动编辑或使用枢轴表是行不通的,我需要将数据上传到数据库中。在使用fgcsv()时,我无法准确地读取日文字符。$question && strpos($csv_line[0],"Q-")!$csv_line[2] .[0])>0) echo $csv_line[0]. " has value ".$cs
我正在优化将大约10TB的数据导入MySQL数据库的过程。目前,在当前的笔记本电脑上,我可以在大约14分钟内导入2.9 on (+0.8 on索引)。该过程包括读取数据文件(Oracle ".dat“导出)、解析数据、将数据写入CSV文件并对其执行"LOAD data LOCAL”sql命令。
是否有可能提高导入速度(无需更改硬件)?有没有办法消除将文件写入文件
Mysql版本:mysql Ver 14.14 Distrib 5.6.30, for debian-linux-gnu (x86_64) using EditLine下面是我试图运行的命令:
$ mysql -u dmeziere -p -e "LOAD DATA INFILE '/tmp/FR.csv' INTO TABLE project_dev.cities无论如何,我也尝试使用mysql