Поисковый бот как пользователь

ЕСТЬ РЕШЕНИЕ ЗАКРЫТО
#1 30 ноября 2012 в 22:13
Есть в составе phpbb3 следующее:
Записываются useragent'ы поисковых ботов (при желании ip), присваются имена, и cms заходящего на сайт бота видит как пользователя, соответсвенно и индексируется сайт "глазами" зарегистрированного пользователя, и соответсвенно если бот на сайте — то видим его в списке он-лайн-пользователей.
Как пускать бота на iCMS под видом пользователя? Может кто у себя что подобное реализовал?

#2 30 ноября 2012 в 22:35
Такая штука есть и на smf, но на практике только что бы отрубить ботам сессии в урлах, так как там им генерится такой урл. Но и можно обойти это без функционала.
Да ведутся логи, мы видим что и где боты делали и делали. Но практической пользы не вижу, кроме того что начинаем дергать базу лишние разы. Достаточно оставить просто онлайн, без всяких логов и тд.
Даже если мы увидим где боты были и где сейчас, что это дает в плане развития или в любом плане. Ничего.
А вот если начнет тот же майл сканить в 700 потоков, сразу узнаем какая польза, от хостера.
Лучше использовать предоставленный функционал панелей вебмастера у ПС или другие сервисы и ориентироваться на них. Конечно если вы интересны ПС, то сразу проверять после публикации по индексу быстроробота.
Вот если там будут какие то не понятные моменты, уже и работать.

А прикрутить к списку онлайн показ ботов, думаю не сложно будет для умеющих, благо вроде скриптов на эту тему хватает.

Имхо конечно.
#3 30 ноября 2012 в 22:56

Достаточно оставить просто онлайн

garry
хотя бы так, может есть у кого скрипт под рукой?
Используя этот сайт, вы соглашаетесь с тем, что мы используем файлы cookie.