Парсер досок объявлений

Для OLX(slando) и AVITO

 
Посетитель
small user social cms
Сообщений: 6
Предлагаю вашему вниманию парсер досок объявлений OLX (бывший SLANDO) и AVITO.

Парсер выполнен в качестве standalone-приложения на базе фреймворка CodeIgnitter. Что он умеет:

-парсить объявления из выбранных рубрик и городов (регионов)
-парсить цену, валюту, фотографии
-накладывать вашу вотермарку на фото
-работать по CRON или в ручном режиме, в том числе и с локалхоста

Что он НЕ умеет:

-Работает только с поддомена и на него же складывает картинки. Вариантов 2 - либо вы вручную переносите картинки в папку /image/board, либо делаете несложный хак компонента Доска объявлений.
-В базовой версии он не парсит номера телефонов, т.к., во-первых, эта функция может быть использована не совсем в тех целях, и во-вторых, сложность написания парсера номеров не сравнима с ценой на базовую версию.

Номера телефонов парсер генерирует рандомные, в зависимости от страны.

Демо парсера http://demo.on-se.ru/start/cron/123, парсит по 3 объявления в категории автомобили сюда (123 - это токен безопасности выставляемый в конфигурации, если что).

Требования к хостингу: Для базовой версии - PHP > 5.2 и CURL. Для расширенной - PHP > 5.2 + CURL + IonCube Loader.

Цена: базовая версия - $ 10, расширенная - $ 30.

Для обеих версий не накладываются ограничения на использование и количество доменов, кроме распространения конечно.

По вопросам приобретения писать в личку или seo(котейка)on-se.ru

Благодарю за внимание smile
Редактировалось: 1 раз (Последний: 13 сентября 2018 в 21:58)
on-se.ru
Посетитель
small user social cms
МедальАвторитет форума
Сообщений: 2624
А вы разрешения на продажу у http://instantcms.ru/users/Letsgo спросили? По-моему ,он делал парсер объявлений сам и цена была порядком выше? Нет мне просто интересно-купишь,а потом в топку( чистое любопытство( может я ошибся)
Петрмаг
Реклама
cms
Посетитель
small user social cms
Сообщений: 6
Петрмаг:
А вы разрешения на продажу у http://instantcms.ru/users/Letsgo спросили? По-моему ,он делал парсер объявлений сам и цена была порядком выше? Нет мне просто интересно-купишь,а потом в топку( чистое любопытство( может я ошибся)
Не понял. Это мой, лично мной написанный парсер, в чем проблемы?
on-se.ru
Посетитель
small user social cms
МедальАвторитет форума
Сообщений: 2624
Да нет,просто подумал-раньше когда просили сильно никто не хотел написать- сейчас вдруг смотрю появился-Приятно так-то) + в карму,о покупке подумаю)
Петрмаг
Посетитель
small user social cms
МедальПочетный донор проектаАвторитет форумаКубок зрительских симпатий
Сообщений: 4296
addon25, парсер работает с хостинга ?
и не совсем понял про телефоны...объявления парсит без телефонов ?
и почему цена в вражеских рублях ?
Посетитель
small user social cms
МедальАвторитет форума
Сообщений: 2624
lezginka.ruкончай войнушку разводить - мы за персер
Петрмаг
Посетитель
small user social cms
МедальАвторитет форумаПочетный донор проекта
Сообщений: 1360
Нафига парсить объявление и потом вносить телефон рандомный, там же картинка телефона, ну картинку телефона и парсите. И будет усе ок. Нафига чей-то телефон подставлять под объявы. Потом доказывай, что ты не олень.
Фриланс по Intantcms 1 и 2 версий.Писать в ЛС. Отзывы заказчиков
Посетитель
small user social cms
Сообщений: 6
kirkr:
Нафига парсить объявление и потом вносить телефон рандомный, там же картинка телефона, ну картинку телефона и парсите. И будет усе ок. Нафига чей-то телефон подставлять под объявы. Потом доказывай, что ты не олень.
Это отключаемая опция.
lezginka.ru:
addon25, парсер работает с хостинга ?
Да, с хостинга отвечающего требованиям или с локального хоста, с установленным веб-сервером.
on-se.ru
Посетитель
small user social cms
МедальКубок зрительских симпатийАвторитет форума
Сообщений: 6473
Сколько штук за день можно спарсить, на каком обьявлении наступает бан?
Хостинг и ВПС Халява тексты Стартапы Instantcms в Telegram
Посетитель
small user social cms
Сообщений: 6
letsgo:
Сколько штук за день можно спарсить, на каком обьявлении наступает бан?

Если и наступит - бесплатно подкину компонент для парсинга проксей и запросов через них из одного из своих проектов.
on-se.ru
Посетитель
small user social cms
МедальКубок зрительских симпатийАвторитет форума
Сообщений: 6473
addon25:
Если и наступит

Через сколько будет бан? Я не спрашивал про прокси, спросил именно про бан, сколько обьявлений спарсится до момента блокирования со стороны Авито? Думаю ответ вы знаете, потому обошли его чуть стороной)
Хостинг и ВПС Халява тексты Стартапы Instantcms в Telegram
Посетитель
small user social cms
Сообщений: 6
letsgo:
Через сколько будет бан?
Без понятия, без малейшего причем.

Насчет обхода ограничений и банов: вы считаете что дописать в коде
Код PHP:
  1. curl_setopt($curl, CURLOPT_PROXY, "");
слишком сложно или просто пытаетесь с конкуренцией так бороться? В том смысле, что вы прекрасно понимаете что функционал работы через прокси - это пара строк кода.
on-se.ru
Посетитель
small user social cms
МедальКубок зрительских симпатийАвторитет форума
Сообщений: 6473
addon25:
В том смысле, что вы прекрасно понимаете что функционал работы через прокси - это пара строк кода.

Мне интересно узнать, сколько объявлений парсится до бана и причём тут прокси? 3 раз спросил, трудно замерить разве?
Хостинг и ВПС Халява тексты Стартапы Instantcms в Telegram
В начало страницы
Предыдущая темаСледующая тема Перейти на форум:
Быстрый ответ
Чтобы писать на форуме, зарегистрируйтесь или авторизуйтесь.