Как записывать данные из CSV / Excel в MySQL DB? [Дубликат]

Вы также можете попробовать этот онлайн-инструмент для создания операторов SQL create / insert на основе вашего CSV. http://www.convertcsvtomysql.com/

Что мне нравится в этом инструменте:

• Простой
• Это не только генерирует инструкции INSERT, но и CREATE для генерации таблицы
• . При создании операторов CREATE этот инструмент не просто делает все поля VARCHAR - он анализирует данные в вашем CSV и на основе этого анализа выбирает

  Недостатки

  • Размер входного файла ограничен 3mb
  • Возможно, вы не захотите отдать свой данные третьим лицам

Я знаю, что вопрос старый , но я хотел бы поделиться этим

. Я использовал этот метод для импорта более 100 тыс. записей ( ~ 5 МБ) в 0.046 сек

Вот как вы это делаете:

LOAD DATA LOCAL INFILE  
'c:/temp/some-file.csv'
INTO TABLE your_awesome_table  
FIELDS TERMINATED BY ',' 
ENCLOSED BY '"'
LINES TERMINATED BY '\n'
(field_1,field_2 , field_3);

Очень важно включить последнюю строку, если у вас более одного поля, т.е. обычно оно пропускает последнее поле (MySQL 5.6.17)

LINES TERMINATED BY '\n'
(field_1,field_2 , field_3);

Тогда, если вы считаете, что первая строка является заголовком для ваших полей, вы можете включить эту строку также

IGNORE 1 ROWS

Это выглядит так, как если бы в вашем файле была строка заголовка.

LOAD DATA LOCAL INFILE  
'c:/temp/some-file.csv'
INTO TABLE your_awesome_table  
FIELDS TERMINATED BY ',' 
ENCLOSED BY '"'
LINES TERMINATED BY '\n'
IGNORE 1 ROWS
(field_1,field_2 , field_3);

Вы можете исправить это, указав столбцы в инструкции LOAD DATA. Из руководства :

LOAD DATA INFILE 'persondata.txt' INTO TABLE persondata (col1,col2,...);

... поэтому в вашем случае вам нужно указать 99 столбцов в том порядке, в котором они отображаются в файле csv.

Вот пример снимка экрана excel file:

Сохранить как и выбрать .csv.

И у вас будет как показано ниже. CSV-экран данных, если вы открываете с помощью блокнота ++ или любого другого блокнота.

Убедитесь, что вы удалите заголовок и разместите его. csv как в таблице mysql. Замените имя_папки на имя вашей папки

LOAD DATA LOCAL INFILE 'D: /folder_name/myfilename.csv' INTO TABLE mail ПОЛЯ, ПРЕРЫВАННАЯ ',' (fname, lname, email, phone);

Если большие данные, вы можете взять кофе и загрузить его.

Это все, что вам нужно.

phpMyAdmin может обрабатывать импорт CSV. Вот шаги:

1. Подготовьте CSV-файл к полям в том же порядке, что и поля таблицы MySQL.
2. Удалите строку заголовка из CSV (если есть ), так что в файле будут только данные.
3. Перейдите в интерфейс phpMyAdmin.
4. Выберите таблицу в левом меню.
5. Нажмите на импорт
6. Перейдите в файл CSV.
7. Выберите параметр «CSV, используя LOAD DATA».
8. Введите «,» в поля « завершено «.
9. Введите имена столбцов в том же порядке, что и в таблице базы данных.
10. Нажмите кнопку go и вы закончите.

Это примечание, которое я подготовил для моего будущего использования и поделился здесь, если кому-то может помочь.

Еще одно решение - использовать инструмент csvsql из удивительного набора csvkit .

Пример использования:

csvsql --db mysql://$user:$password@localhost/$database --insert --tables $tablename  $file

Этот инструмент может автоматически выводить типы данных (поведение по умолчанию), создавать таблицу и вставлять данные в созданную таблицу. Опция --overwrite может использоваться для удаления таблицы, если она уже существует. --insert - для заполнения таблицы из файла.

Для установки пакета

pip install csvkit

Предварительные требования: python-dev, libmysqlclient-dev, MySQL-python

apt-get install python-dev libmysqlclient-dev
pip install MySQL-python

Измените имя сервера, имя пользователя, пароль, имя dbname, путь к вашему файлу, имя_таблицы и поле, которое находится в вашей базе данных, которую вы хотите вставить

<?php
    $servername = "localhost";
    $username = "root";
    $password = "";
    $dbname = "bd_dashboard";
    //For create connection
    $conn = new mysqli($servername, $username, $password, $dbname);

    $query = "LOAD DATA LOCAL INFILE 
                'C:/Users/lenovo/Desktop/my_data.csv'
                INTO TABLE test_tab
                FIELDS TERMINATED BY ','
                LINES TERMINATED BY '\n'
                IGNORE 1 LINES
                (name,mob)";
    if (!$result = mysqli_query($conn, $query)){
        echo '<script>alert("Oops... Some Error occured.");</script>';
        exit();
            //exit(mysqli_error());
       }else{
        echo '<script>alert("Data Inserted Successfully.");</script>'
       }
    ?>

PHP Query для импорта csv-файла в базу данных mysql

$query = <<<EOF
            LOAD DATA LOCAL INFILE '$file'
             INTO TABLE users
             FIELDS TERMINATED BY ','
             LINES TERMINATED BY '\n'
             IGNORE 1 LINES
            (name,mobile,email)
    EOF;
if (!$result = mysqli_query($this->db, $query))
   {
        exit(mysqli_error($this->db));
   }

** Пример данных файла CSV **

name,mobile,email
Christopher Gritton,570-686-3439,ChristopherKGritton@inbound.plus
Brandon Wilson,541-309-5149,BrandonMWilson@inbound.plus
Craig White,516-795-8065,CraigJWhite@inbound.plus
David Whitney,713-214-3966,DavidCWhitney@inbound.plus

Командная строка mysql подвержена слишком большому количеству проблем при импорте. Вот как вы это делаете:

• использовать excel для редактирования имен заголовков, чтобы не иметь пробелов
• Сохранить как .csv
• использовать бесплатно Navicat Lite Sql Browser для импорта и автоматического создания новой таблицы (дайте ей имя)
• откройте новую таблицу, вставьте первичный столбец автоматического номера для ID
• , измените тип столбцов по желанию .
• сделано!

Если вы используете MySQL Workbench (в настоящее время версия 6.3), вы можете сделать это с помощью:

1. Щелкните правой кнопкой мыши «Таблицы»;
2. Выберите Мастер импорта данных таблицы;
3. Выбирайте файл csv и следуйте инструкциям (JSON также может быть использован); Хорошо, что вы можете создать новую таблицу на основе файла csv, который хотите импортировать или загрузить данные в существующую таблицу

Если вы используете машину Windows с загруженной электронной таблицей Excel, новый плагин mySql в Excel является феноменальным. Люди в Oracle действительно хорошо справились с этим программным обеспечением. Вы можете напрямую подключиться к базе данных из Excel. Этот плагин будет анализировать ваши данные и настраивать таблицы для вас в формате, совместимом с данными. У меня были некоторые файлы csv больших монстров данных для преобразования. Этот инструмент был большой экономии времени.

http://dev.mysql.com/downloads/windows/excel/

Вы можете делать обновления из Excel, которые будут заполняться в базе данных онлайн. Это очень хорошо работало с файлами mySql, созданными на ультра дешевом хостинге GoDaddy. (Обратите внимание, что когда вы создаете таблицу в GoDaddy, вам нужно выбрать некоторые нестандартные настройки, чтобы отключить доступ к базе данных в базе данных ...)

С помощью этого плагина у вас есть чистая интерактивность между вашей электронной таблицей XL и онлайн-хранилище данных mySql.