Что это такое?
gh-ost — открытый инструмент GitHub для онлайн-изменения схемы в MySQL: он меняет структуру живых таблиц, копируя данные в «ghost-таблицу», при этом нагрузка на мастер остаётся небольшой и отделена от обычного трафика.
gh-ost — открытый инструмент GitHub для онлайн-изменения схемы в MySQL: он меняет структуру живых таблиц, копируя данные в «ghost-таблицу», при этом нагрузка на мастер остаётся небольшой и отделена от обычного трафика.Чем он отличается от других инструментов онлайн-изменения схемы?Он копирует вашу таблицу в ghost-таблицу и в конце меняет их местами, но работает без триггеров: он читает поток binary log и применяет изменения асинхронно, что позволяет ему по-настоящему приостанавливаться и отсоединять свою нагрузку от мастера.
Он копирует вашу таблицу в ghost-таблицу и в конце меняет их местами, но работает без триггеров: он читает поток binary log и применяет изменения асинхронно, что позволяет ему по-настоящему приостанавливаться и отсоединять свою нагрузку от мастера.Как его получить и запустить миграцию?Скачайте готовый бинарник для Linux или macOS либо соберите из исходников на Go 1.15+ командой script/build. В cheatsheet описаны все режимы; рекомендуемый порядок: сначала тестовый прогон в режиме noop, затем настоящая миграция с --execute.
Скачайте готовый бинарник для Linux или macOS либо соберите из исходников на Go 1.15+ командой script/build. В cheatsheet описаны все режимы; рекомендуемый порядок: сначала тестовый прогон в режиме noop, затем настоящая миграция с --execute.Какая настройка базы данных нужна, чтобы это работало?Настройка MySQL, изменения в которой он может отслеживать через binary log. Он предпочитает запускать миграции через реплику (сам определяет задействованные серверы), а для AWS RDS и Azure Database for MySQL есть официальные руководства.
Настройка MySQL, изменения в которой он может отслеживать через binary log. Он предпочитает запускать миграции через реплику (сам определяет задействованные серверы), а для AWS RDS и Azure Database for MySQL есть официальные руководства.Есть ли подводные камни, прежде чем направлять его на продакшен-мастер?Если на мастере используется Statement Based Replication, режим через реплику обязателен. Кроме того, для продакшена предназначены только релизы с тегами — ветка master в целом стабильна, но в прод её брать нельзя.
Если на мастере используется Statement Based Replication, режим через реплику обязателен. Кроме того, для продакшена предназначены только релизы с тегами — ветка master в целом стабильна, но в прод её брать нельзя.Он проверен на больших продакшен-базах?Да — он GA и стабилен, создан командой инфраструктуры баз данных GitHub, которая непрерывно мигрирует все свои продакшен-таблицы на репликах и сверяет результаты контрольными суммами, чтобы убедиться в корректности.
Да — он GA и стабилен, создан командой инфраструктуры баз данных GitHub, которая непрерывно мигрирует все свои продакшен-таблицы на репликах и сверяет результаты контрольными суммами, чтобы убедиться в корректности.Чем я могу управлять во время миграции?Многим: троттлинг по-настоящему останавливает все записи на мастере, настройки можно менять интерактивно прямо во время работы, статус доступен через unix-сокет или TCP, финальную замену таблиц можно отложить до удобного момента, а сам процесс привязывается к вашему окружению через внешние хуки.
Многим: троттлинг по-настоящему останавливает все записи на мастере, настройки можно менять интерактивно прямо во время работы, статус доступен через unix-сокет или TCP, финальную замену таблиц можно отложить до удобного момента, а сам процесс привязывается к вашему окружению через внешние хуки.Можно проверить его, не трогая продакшен-данные?Да: --test-on-replica запускает ровно тот же процесс миграции на реплике, не заменяя исходную таблицу, и оставляет две таблицы, которые можно сравнить и сверить контрольными суммами. Для миграций на мастере сначала сделайте прогон в режиме noop, затем настоящий запуск с --execute.
Да: --test-on-replica запускает ровно тот же процесс миграции на реплике, не заменяя исходную таблицу, и оставляет две таблицы, которые можно сравнить и сверить контрольными суммами. Для миграций на мастере сначала сделайте прогон в режиме noop, затем настоящий запуск с --execute.Почему он называется gh-ost?Произносится как Ghost и расшифровывается как GitHub's Online Schema Transmogrifier/Translator/Transformer/Transfigurator. Изначально он назывался gh-osc (Online Schema Change) — по образцу Facebook's OSC и pt-online-schema-change, пока «редкая генетическая мутация» не превратила c в t.
Произносится как Ghost и расшифровывается как GitHub's Online Schema Transmogrifier/Translator/Transformer/Transfigurator. Изначально он назывался gh-osc (Online Schema Change) — по образцу Facebook's OSC и pt-online-schema-change, пока «редкая генетическая мутация» не превратила c в t.Which topics is it in?devops-tools, mysql, sql, devops, database, go, command-line-tool, free, tool, cli, developer-tools, mit
devops-tools, mysql, sql, devops, database, go, command-line-tool, free, tool, cli, developer-tools, mit