Появились странные запросы в логах сайта и повысилась нагрузка на сервер

vikont, любите вы этот апи json. Пользы от этого удаления ровно как форточку на кухне закрыть..

Давайте ещё раз, что ещё за внутренние пути вместо внешних?

@SmartControl, /home/dores/web/dsdnr.ru/public_html/metodraz/19027-plan-konspekt-zanjatija-po-applikacii-lepke-starshaja-gruppa-na-temu-konspekt-neposredstvennoi.html
я так понимаю речь об этом

dwd, ну так это как раз понятно. По этой причине и работала только главная — движок не обрабатывал такие запросы, а соответствующего файла на диске (понятное дело) нет. Это либо настройки в nginx/apache, либо htaccess кривой был или его не было вовсе…

Ну вот про это ж и вопрос. при нормальных раскладах не должно такого быть в логах.

vikont, страницы записей открываются шустро, а вот со страницами списков контента беда полная — время генераци от 3 до 10 секунд. Мне кажется искать источник нагрузки нужно в этом месте. Посмотрите какие вы используете компоненты и виджеты, попробуйте их поочередно поотключать, попробуйте отключить хуки связанные со списками контента, подумайте какие вставки делали в шаблоне списков.

P.S. Мне приходилось слышать, что при большом количестве контента Инстант начинает сильно тупить, но чтобы при 200к записей так тупил верится с трудом.

P.S. Мне приходилось слышать, что при большом количестве контента Инстант начинает сильно тупить, но чтобы при 200к записей так тупил верится с трудом.

Мне тоже с трудом верится, тем более, что страницы грузились менее 1 сек, даже самые тяжелые!
Прямо сейчас, ничего не делая страницы стали грузиться в пределах 1,1 сек.
В логе ошибок ситуация изменилась и появились такие строки

Особенно понравилась вторая строка
GET /file:/C:/Users/CD86~1/AppData/Local/Temp/msohtmlclip1/01/clip_image010.jpg
это из какого космоса?

C:/Users/CD86~1/AppData/Local/Temp/msohtmlclip1/01/clip_image010.jpg

Это временный файл microsoft word из windows 7 — не, не из космоса.

Это временный файл microsoft word из windows 7 — не, не из космоса.

Если я не ошибаюсь, то это как будто грузят с сайта, а винды на сервере у меня нет.

vikont, может кто-то вставил в ворд текст с сайта, вместе с картинками?
и теперЬ, когда открывается документ подтягиваются изображения? =)

Сегодня с 00 часов Яндекс начал бомбить сервер! Я его ограничил 3-мя запросами в 2 секунды, так он навалился сразу с 5-ти адресов!!! Я такого еще не видел!!!

Яндекс начал бомбить сервер! Я его ограничил 3-мя запросами в 2 секунды, так он навалился сразу с 5-ти адресов!

А не проще в панели яндекс вебмастер выставить ограничения скорости обхода? Лично я никогда не баню ботов таких сервисов яндекс, гугл и бинг у меня были подобные проблемы я переехал на более мощный сервер. А остальным запрещаю шарахатся по сайту.

А не проще в панели яндекс вебмастер выставить ограничения скорости обхода?

Давно сделано! Стоит на минимуме! Так Яндекс обошел это ограничение за счет нескольких ботов с разных IP!!! Вот о чем речь!

Сегодня с 00 часов Яндекс начал бомбить сервер! Я его ограничил 3-мя запросами в 2 секунды, так он навалился сразу с 5-ти адресов!!! Я такого еще не видел!!!

Какой интересные у вас сайт, однако. Яндекс даже целую банду поисковых ботов подключил. Это хорошо же.

Может есть смысл посмотреть в сторону оптимизации? — кэширование, быстрая работа компонентов… Для гостей сайт должен летать, максимально все должно браться из кэша.

Какой интересные у вас сайт, однако. Яндекс даже целую банду поисковых ботов подключил. Это хорошо же.

Да уж..! Он видимо никак не может выгрести более 200 к записей с одной из главных таблиц… Вот опять начал, полюбуйтесь… сервер что ли проверяет..
141.8.183.16 — - [24/Dec/2018:18:42:31 +0300] "GET /metodraz/55692-plan-konspekt-zanjatija-starshaja-gruppa-na-temu-sovmestnaja-dejatelnost-vospitatelja-s-detmi-.html HTTP/1.1" 200 12422 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
37.9.113.158 — - [24/Dec/2018:18:42:32 +0300] "GET /metodraz/1396-konsultacija-starshaja-gruppa-na-temu-konsultacija-dlja-roditelei.html HTTP/1.1" 200 11213 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
37.9.113.24 — - [24/Dec/2018:18:42:34 +0300] "GET /metodraz/104015-kartoteka-mladshaja-gruppa-po-teme-poteshki-zasypalki-dlja-detei-rannego-vozrasta.html HTTP/1.1" 200 11545 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
141.8.142.5 — - [24/Dec/2018:18:42:34 +0300] "GET /metodraz/197587-plan-konspekt-zanjatija-po-matematike-podgotovitelnaja-gruppa-na-temu-v-poiskah-sokrovisch-it.html HTTP/1.1" 200 12621 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
95.108.213.30 — - [24/Dec/2018:18:42:35 +0300] "GET /cat_doy/10-gorlovskoe-doshkolnoe-obrazovatelnoe-uchrezhdenie-14-zvezdochka.html HTTP/1.1" 200 8528 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
178.154.200.52 — - [24/Dec/2018:18:42:36 +0300] "GET /metodraz/101824-plan-konspekt-zanjatija-po-logopedii-podgotovitelnaja-gruppa-na-temu-prazdnichnoe-integrirova.html HTTP/1.1" 200 12047 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
178.154.171.38 — - [24/Dec/2018:18:42:37 +0300] "GET /metodraz/129393-rabochaja-programma-po-matematike-starshaja-gruppa-na-temu-rabochaja-programma-dopolnitelnogo.html HTTP/1.1" 200 12237 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
37.9.113.32 — - [24/Dec/2018:18:42:40 +0300] "GET /metodraz/57070-material-po-risovaniyu-mladshaja-gruppa-na-temu-itogovyi-produkt-na-temu-osen.html HTTP/1.1" 200 11476 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
5.255.253.4 — - [24/Dec/2018:18:42:41 +0300] "GET /metodraz/57070-material-po-risovaniyu-mladshaja-gruppa-na-temu-itogovyi-produkt-na-temu-osen.html HTTP/1.1" 200 11473 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
213.180.203.27 — - [24/Dec/2018:18:42:43 +0300] "GET /metodraz/93618-plan-konspekt-zanjatija-po-korrekcionnoi-pedagogike-starshaja-gruppa-na-temu-konspekt-zanjatij.html HTTP/1.1" 200 12236 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
178.154.244.18 — - [24/Dec/2018:18:42:44 +0300] "GET /metodraz/132753-konsultacija-podgotovitelnaja-gruppa-na-temu-kakie-igrushki-neobhodimy-detjam-k-shesti-godam.html HTTP/1.1" 200 12119 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
178.154.171.18 — - [24/Dec/2018:18:42:45 +0300] "GET /metodraz/23487-prezentacija-na-temu-aptekarskii-ogorod-eda-lekar-krasota.html HTTP/1.1" 200 11567 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
178.154.244.32 — - [24/Dec/2018:18:42:45 +0300] "GET /metodraz/28545-metodicheskaja-razrabotka-po-logopedii-srednjaja-starshaja-podgotovitelnaja-gruppa-na-temu-lep.html HTTP/1.1" 200 12226 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"
87.250.224.80 — - [24/Dec/2018:18:42:45 +0300] "GET /audio/5502-muzyka-dlja-vyhoda-geroev-barmalei-4.html HTTP/1.1" 200 9181 "-" "Mozilla/5.0 (iPhone; CPU iPhone OS 8_1 like Mac OS X) AppleWebKit/600.1.4 (KHTML, like Gecko) Version/8.0 Mobile/12B411 Safari/600.1.4 (compatible; YandexMobileBot/3.0; +http://yandex.com/bots)"
87.250.224.32 — - [24/Dec/2018:18:42:47 +0300] "GET /metodraz/91016-statja-po-logopedii-podgotovitelnaja-gruppa-na-temu-nauchite-rebenka-lyubit-knigu-ili-kak-prio.html HTTP/1.1" 200 12034 "-" "Mozilla/5.0 (compatible; YandexBot/3.0; +http://yandex.com/bots)"

Кто сколько адресов насчитал? Я в осадке!

Может есть смысл посмотреть в сторону оптимизации? — кэширование, быстрая работа компонентов… Для гостей сайт должен летать, максимально все должно браться из кэша.

При этом наезде главная открывается за 1,6 сек, а с тяжелой таблицей за 1,8 сек Кеирование всех видов отключено! Диск на сервере обычный SATA3
Сервер 4 ядра, 3 ОЗУ, NGINX+php-frm+MariaDB 10.3
Без наездов Яши, страницы открываются менее чем за секунду.
Но собираюсь переезжать на облачный хостинг там при более мощном железе с SSD дисками получается даже дешевле. При этом гибкая конфигурация, а не забитый намертво тариф.

vikont, ещё смешанное содержимое у Вас на главной из-за этой картинки

vikont, ещё смешанное содержимое у Вас на главной из-за этой картинки

Спасибо, что напомнили! Эта картинка стоит по требованию Free-Kassa. без нее их услуги деактивируются.
Есть реальные предложения как с этим разобраться?