Ускорение mysql дампы и [закрытый] импорт

В Java все переменные, которые вы объявляете, на самом деле являются «ссылками» на объекты (или примитивы), а не самими объектами.

При попытке выполнить один метод объекта , ссылка просит живой объект выполнить этот метод. Но если ссылка ссылается на NULL (ничего, нуль, void, nada), то нет способа, которым метод будет выполнен. Тогда runtime сообщит вам об этом, выбросив исключение NullPointerException.

Ваша ссылка «указывает» на нуль, таким образом, «Null -> Pointer».

Объект живет в памяти виртуальной машины пространство и единственный способ доступа к нему - использовать ссылки this. Возьмем этот пример:

public class Some {
    private int id;
    public int getId(){
        return this.id;
    }
    public setId( int newId ) {
        this.id = newId;
    }
}

И в другом месте вашего кода:

Some reference = new Some();    // Point to a new object of type Some()
Some otherReference = null;     // Initiallly this points to NULL

reference.setId( 1 );           // Execute setId method, now private var id is 1

System.out.println( reference.getId() ); // Prints 1 to the console

otherReference = reference      // Now they both point to the only object.

reference = null;               // "reference" now point to null.

// But "otherReference" still point to the "real" object so this print 1 too...
System.out.println( otherReference.getId() );

// Guess what will happen
System.out.println( reference.getId() ); // :S Throws NullPointerException because "reference" is pointing to NULL remember...

Это важно знать - когда больше нет ссылок на объект (в пример выше, когда reference и otherReference оба указывают на null), тогда объект «недоступен». Мы не можем работать с ним, поэтому этот объект готов к сбору мусора, и в какой-то момент VM освободит память, используемую этим объектом, и выделит другую.

51
задан Alex R 7 July 2014 в 15:59
поделиться

7 ответов

http://www.maatkit.org/ имеет mk-parallel-dump и mk-parallel-restore

, Если you’ve, желая многопоточного mysqldump, не пожелайте больше. Этот инструмент выводит таблицы MySQL параллельно. Это - намного более умный mysqldump, который может или действовать как обертка для mysqldump (с разумным поведением по умолчанию) или как обертка вокруг ВЫБОРА В OUTFILE. Это разработано для высокоэффективных приложений на очень больших размерах данных, где скорость имеет большое значение. Это использует в своих интересах несколько центральных процессоров и дисков для дампа данных намного быстрее.

существуют также различные потенциальные опции в mysqldump, такие как не создание индексов, в то время как дамп импортируется - но вместо этого делающей их en-масса на завершении.

15
ответ дан Alister Bulman 7 November 2019 в 10:20
поделиться

При импорте в InnoDB единственной самой эффективной вещи, можно сделать, должен поместить

innodb_flush_log_at_trx_commit = 2

в Вашем my.cnf, временно в то время как импорт работает. Можно отложить его к 1 при необходимости в ACID.

13
ответ дан kapex 7 November 2019 в 10:20
поделиться
  1. Получают копию MySQL High Performance. Замечательная книга.
  2. Расширенный вставляет в дампы
  3. Дамп с - формат вкладки, таким образом, можно использовать mysqlimport, который быстрее, чем mysql < Импорт dumpfile
  4. с несколькими потоками, один для каждой таблицы.
  5. Использование различный механизм базы данных, если это возможно. импорт в в большой степени транзакционный механизм как innodb является ужасно медленным. Вставка в нетранзакционный механизм как MyISAM намного намного быстрее.
  6. Взгляд на таблицу сравнивает сценарий в инструментарии Maakit и видит, можно ли обновить таблицы вместо того, чтобы вывести их и импортировать их. Но Вы, вероятно, говорите о резервных/восстановлениях.
24
ответ дан JBB 7 November 2019 в 10:20
поделиться

выключите проверки внешнего ключа и включите автоматическую фиксацию.

4
ответ дан longneck 7 November 2019 в 10:20
поделиться

Используя расширенный вставляет в дампы, должен сделать импорт быстрее.

4
ответ дан che 7 November 2019 в 10:20
поделиться

mysqlhotcopy также может быть альтернативой для вас, если у вас есть только таблицы MyIsam.

1
ответ дан 7 November 2019 в 10:20
поделиться

Думаю, ваш вопрос также зависит от того, где находится узкое место:

  • Если ваша сеть является узким местом, вы также можете взглянуть на -C / - compress флаг в mysqldump .
  • Если на вашем компьютере заканчивается память (т. Е. Начинается свопинг), вам следует купить больше памяти.

Также обратите внимание на флаг - quick для mysqldump - disable-keys , если вы используете MyIsam).

5
ответ дан 7 November 2019 в 10:20
поделиться
Другие вопросы по тегам:

Похожие вопросы: