Работа с огромной базой более 100 млн. строк

ЕСТЬ РЕШЕНИЕ ЗАКРЫТО InstantCMS 2.X

Обсуждаются возможности шардинга и масштабирования базы данных для повышения производительности проекта

#16 24 июля 2019 в 08:25

Это очень долго, у вас проблемы с настройками по базе походу, у меня выборка из 10м занимает не более 1с. и том что всё это ещё работает с join по 4 таблицам. И вполне может быть узким местом будет ещё жесткий диск, я такие проекты только на SSD рассматриваю, чтобы ж.д. небыл камнем преткновения.

mr.KEVASC

10М трок сколько весят?
#17 24 июля 2019 в 08:45


Это очень долго, у вас проблемы с настройками по базе походу, у меня выборка из 10м занимает не более 1с. и том что всё это ещё работает с join по 4 таблицам. И вполне может быть узким местом будет ещё жесткий диск, я такие проекты только на SSD рассматриваю, чтобы ж.д. небыл камнем преткновения.

mr.KEVASC

10М трок сколько весят?

@iKrym

сейчас гоняю тесты с 20М и весят 10.2 ГиБ, 10 значит будет 5Г весить по идее
#18 24 июля 2019 в 09:45

у меня выборка из 10м занимает не более 1с

mr.KEVASC
Это с удаленного сервера? Тогда у вас на обоих серверах канал не менее 10Гб/с.
Шикарно живете!
#19 24 июля 2019 в 21:58
Рассматривается вариант миграции системы на PostgreSQL, кто-нибудь делал?
Используя этот сайт, вы соглашаетесь с тем, что мы используем файлы cookie.