Эта статья задумана мной как сборник некоторых интересных моментов по использованию и оптимизации SQL запросов в БД MySQL, на мой взгляд, плохо освещенных в интернете. Так, из статьи вы узнаете о конструкции with rollup, и о том, как переписать подзапросы in и not in на join'ы, а так же обновление и удаление данных в нескольких таблицах — одним запросом, и многое другое. Начнем по-порядку.
Читать полностью »
Рубрика «mysql performance» - 2
Tips & tricks for MySQL. Работа с SQL
2013-10-07 в 18:25, admin, рубрики: mysql, mysql performance, mysql tricks, метки: mysql, mysql performance, mysql tricksОптимизация MySQL запросов с помощью Neor Profile SQL
2013-06-17 в 11:35, admin, рубрики: mysql, mysql performance, метки: mysql, mysql performanceЛюбой программист создающий нагруженные проекты с тысячами пользователей, когда-либо задавался вопросом, как он может улучшить SQL запросы и экономить многие сотни долларов. Процесс анализа обычно начинается с профилирования и отладки кода, а потом когда процесс оптимизации запросов то можно воспользоваться встроенными иструментами в MySQL сервер. Например логирование MySQL. Но рано или позно начинаешь понимать, что это не удобно.
Проблемы MySQL оптимизатора
2013-03-16 в 12:14, admin, рубрики: mysql, mysql performance, метки: mysql performanceЧто я успел понять про MySQL за несколько лет его разработки:
- развивать не ломая обратной совместимости его нельзя
- MySQL со сломанной обратной совместимостью никому не нужен.
Я опишу две серьёзные проблемы ДНК MySQL, с которыми косвенно сталкивается любой пользователь MySQL 5.1 и 5.5 (насчёт 5.6 не проверял, но не думаю, что этот момент поменялся).
Как вообще MySQL работает?
Опыт перехода на Percona XtraDB Cluster
2012-11-15 в 20:27, admin, рубрики: mysql, mysql performance, percona xtradb cluster, Администрирование баз данных, метки: mysql performance, percona xtradb clusterИтак, я начал внедрять в своей организации Percona XtraDB Cluster — переводить базы данных с обычного MySQL сервера в кластерную архитектуру.
Коротко о задаче и вводные данные
В кластере нам нужно держать:
- БД нескольких веб-сайтов с пользователями
- БД со статистическими данными этих пользователей
- БД для тикет-систем, систем управления проектами и прочая мелочь
Иными словами, БД практически всех наших проектов, из тех что крутятся у нас на MySQL, теперь должны жить в кластере.
Большинство проектов мы держим удаленно в ДЦ, поэтому и кластер будет находится там.
Задача разнести кластер географически по разным дата-центрам не стоит.Читать полностью »
Один из крупнейших VCS провайдеров Beanstalk лежит на боку
2012-10-17 в 20:59, admin, рубрики: mysql, mysql performance, Системы управления версиями, метки: mysql, mysql performance, системы управления версиями 
Так получилось, что сидел работал, там с ветками баловался и т.д. и тут после очередных манипуляций консоль выдаёт мне гневное уведомление, мол не могу я обновиться с источника. Призадумался, попробовал ещё разок — эффект тот же. Полез на сам beanstalk разбираться с ключами но не тут то было!
Читать полностью »
Как узнать, стоит ли оптимизировать MySQL запросы?
2012-09-16 в 7:54, admin, рубрики: mysql, mysql performance, переводы, метки: mysql performance Мне часто задают один и тот же вопрос: как можно находить запросы, которые необходимо оптимизировать. Ведь, скажем, взглянув на отчет pt-query-digest мы легко найдем медленные запросы или запросы, которые вызывают большую нагрузку на систему, но как мы поймем, существует или нет возможность сделать выполнение этого запросы быстрее? Полный ответ на этот вопрос определенно потребует комплексного анализа, так как существует много путей оптимизации запросов. Однако, существует одна очень полезная метрика, которую вы можете применить — соотношение между количество возвращенных запросом рядов и проанализированными рядами.
Читать полностью »
MySQL Query Killer — предохранитель от перегрузки СУБД
2012-09-13 в 10:57, admin, рубрики: mysql, mysql performance, Серверная оптимизация, метки: mysql performanceЗдесь описывается процедура, предназначенная для предохранения базы данных высоконагруженной системы от перегрузки.
После того, как ваши запросы оптимизированы, по идее у вас не должно возникать ситуаций, когда
1. Один запрос блокирует другие
2. Какие-то запросы блокируют друг друга
Мы стремимся к тому, чтобы таких ситуаций не возникало.
Потому хорошим «сторожем работоспособности» будет умный «Query killer»,
который будет отслеживать подозрительные ситуация и освобождать базу данных.
Этот киллер допускает ситуацию, когда БД выполняет пару тяжелых запросов.
Но когда он видит, что начинает появляться много долгих запросов — то начинает принмать меры
Читать полностью »
Оптимизация связки Nginx, Apache, PHP, MySql
2012-06-20 в 11:09, admin, рубрики: Apache, linux, mysql, mysql performance, оптимизация сайта, метки: apache, mysql performance, оптимизация сайта Неожиданно поступила задача разобраться почему определенный сайт не работает столь быстро сколь хочется. В основе его CakePHP, в связке с Apache и MySQL. В статье описание процесса поиска узких мест и приведение в порядок на столько, на сколько это возможно.
Название сайта светить не буду — думаю, программисты сами узнают. Скажу лишь, что это приложение для социальной сети нагрузкой 70-150 тысяч посетителей в обычное время. Все усложняется тем, что периодически производится рекламная рассылка, которая привлекает около 200-300 тысяч посетителей за пару часов.
Читать полностью »
Практическая оптимизация и маштабируемость MySQL InnoDB на больших объёмах данных
2012-06-04 в 3:10, admin, рубрики: highload, innodb, mysql, mysql performance, replication, метки: highload, innodb, mysql, mysql performance, replicationДанный пост не будет рассказывать про индексы, планы запросов, триггеры для построения агрегатов и прочие общие способы оптимизации запросов и структуры БД. Так же не будет рассказывать про оптимальные настройки с префиксом innodb_. Возможно прочитав текст ниже вы лучше поймёте смысл некоторых из них. В данном посте речь пойдёт об InnoDB и его функционирование.
Какие проблемы может помочь решить этот пост?
- Что делать если у вас в списке процессов множественные селекты которым казалось бы никто не мешает?
- Что делать если всё хорошо настроено, запросы пролетают как ракеты и список процессов постоянно пустой, но на сервере высокий LA и запросы начинают работать немного медленнее, ну например вместо 100мс получается 500мс ?
- Как быстро масштабировать систему, когда нет возможности всё переделать?
- У вас коммерческий проект в конкурентной среде и проблему надо решать немедленно?
- Почему один и тот же запрос работает то быстро то медленно?
- Как организовать быстрый кеш и поддерживать его в актуальном состояние?
Mysql в Twitter
2012-04-13 в 7:57, admin, рубрики: github, mysql, mysql performance, twitter, метки: github, mysql, mysql performance, twitter Twitter опубликовала свои улучшения для MySQL.
Исходный код изменений распространяется под модифицированной лицензией BSD и располагается на GitHub
Более подробные изменения читайте под хабракатом.Читать полностью »