Импорт очень большого файла с разделителями табуляции в MySQL БЕЗ создания таблицы

Question

У меня очень большой файл с разделителями табуляции. Это около 500 колонок в ширину и, возможно, миллион записей. Это сочетание текста, дат и цифр. На самом деле меня интересует только несколько столбцов изнутри - остальные будут удалены.

Я хочу импортировать его в MySQL, но это одноразовая (возможно, 2- или 3-off) задача, и я действительно не могу беспокоиться о создании пустой таблицы для команды LOAD DATA INFILE.

Каков метод минимального усилия для достижения этого? Можно сделать LOAD DATA INFILE, чтобы создать таблицу на лету с колонками VARCHAR/TEXT или аналогичными?

Answer 1

Вам нужно создать таблицу. Но если вам нужны только определенные столбцы, вы можете их выбрать.

Создайте таблицу нужных столбцов.

Вы можете запустить LOAD DATA следующим образом.

LOAD DATA LOCAL INFILE 'import.csv' INTO TABLE yournewtable 
FIELDS TERMINATED BY '\t' LINES TERMINATED BY '\n' 
(@col1,@col2) set Colum1=@col1,Column2=@col2; 

@ col1, @ col2 являются переменными из CSV. Colum1, Column2 представляют столбцы в созданной вами таблице.

Answer 2

LOAD DATA INFILE http://dev.mysql.com/doc/refman/5.5/en/load-data.html позволяет указать, что будут импортированы только определенные столбцы.