Администраторы баз данных — удалённая работа в Москве

Дата: 2023-07-11
Детали
Регион
Москва
Занятость
дистанционно
Стоимость
договорная
Дата публикации
2023-07-11
Описание
Решить проблему. СУБД: MySQL. Бьемся над проблемой несколько недель, нужна помощь! Используем mariadb 10.5.8, общий объем базы > 200Гб Есть большая таблица в innodb с ценами, она постоянно обновляется запросами вида update on duplicate и delete. Размер таблицы около 150Гб с индексами. В настройках базы включен innodb_stats_auto_recalc=1 Периодически происходит пересчет статистики этой таблицы, т.к. данные постоянно обновляются, это видно на графиках https://disk.yandex.ru/i/ehngWub9Xn8i5Q Иногда, но не всегда, в моменты когда размер индексов падает (начинается пересчет статистики), блочатся операции на изменение от 50 сек до 2 минут. Видно на следующих графиках: https://disk.yandex.ru/i/80G5ai7GKikMYA То есть в этот момент в processlist висят запросы на update\insert\delete и чего-то ждут. Все запросы, по всей базе, на любые таблицы. Ошибок в логах нет. Локов тоже нет. В логах локи вешаются только на повторные запросы по тем же id, первые (уникальные) запросы просто висят в состоянии query. Если на таблицу сделать alter table set STATS_AUTO_RECALC=0, то проблема исчезает. Ровно до тех пор пока статистика не испортится (около 8 часов) и вообще все join с этой таблицей не начинают выполнятся очень долго. Что делать? Куда копать? Думали может быть дело в железе, но проверили на разных стендах, разном железе, судя по всему это нормальное поведение mysql, т.к. на тестовом стенде удается это повторить просто делая постоянное обновление большой таблицы и параллельно выполняя update where id=1 раз в секунду на другой таблице. Наблюдается точно такая же картина.
Похожие заказы
Администраторы баз данных
дистанционно
договорная
Разработать базу данных с нуля. СУБД: MySQL. Есть две задачи 1) Нужно развернуть базу данных в инфраструктуре Yandex Cloud на базе MySQL. 2) Нужно сделать скрипты для подтягивания данных по API с маркетплейсов в Python. Скриптов нужно 4-6, разделы и нужные методы я покажу, в основном это из разделов статистики. Сориентируйте пожалуйста по стоимости каждой из задач при отклике.
Москва
Фрилансеры
2024-04-11
Подробнее
MySQL
дистанционно
договорная
Разработать базу данных с нуля. Создать БД согласно файла config.php. Что нужно ещё: провести инструктаж и обучить пользователей, разработать пользовательский интерфейс. Обязательна консультация.
Москва
Фрилансеры
2024-04-10
Подробнее