
r2
Пользуясь служебным положением, продолжаю делиться с вами новостями

И так, FlowCrawler — программа для автоматизации браузера и не только, разработкой которой я сейчас активно занимаюсь, — сегодня получила очередное обновление. Теперь она умеет работать с изображениями.
На видео ниже пример. Берется папка с фотографиями, содержащими EXIF с GPS-координатами. Для каждой фотографии с помощью веб-сервиса извлекаются координаты, ищется точка в гуглокартах, делается скриншот. Затем этот скриншот обрезается и наносится в уголок оригинальной фотографии. То есть в конце получаем миникарту с местом съемки на каждом фото.
Если вам интересна данная программа и вы еще не успели её приобрести — сейчас самое время.
Осталось всего несколько дней до окончания хорошей скидки.
Все подробности здесь: flowcrawler.com/buy
Достойные проекты. Видно, что дизайнер понимает что делает и имеет вкус.Показываем некоторые свои работы
Спасибо за видео, кое что прояснилось. Сделайте пожалуйста видео, где берется контент с одного сайта (например каталог вместе с фото и описанием) и парсится на другой сайт, вместе с фото и описанием, от лица админа или юзера.
Обязательно сделаю, чуть позже. Быстрое заполнение форм и загрузка файлов — тема самого ближайшего апдейта.
www.consultant.ru/document/cons_doc_LAW_58968/8fbc3d05dbc778e17bfc1b45fb7339df525c1985/в рекламе, распространяемой другими способами, — не менее чем пять процентов рекламной площади (рекламного пространства)
r2, не нашел самую изюминку в вашем видео уроке — как спарсить координаты объекта на карте?
Всё именно такЯ прямо слышу как R2 говорит в видео: "В FlowCrawler это сделать очень просто")

Вот видео, где показано как сделать это с помощью JSON API от Яндекс.Карт
1) Есть возможность сохранять и загружать проекты, как в любом другом ПО. Если вы об этом.— Есть ли импорт — экспорт правил парсинга?
— Авито пробовали ли брать телефоны?
— Как импортировать данные в Instantcms, например объявлений с картинками?
— Есть ли логика "собирает данные и автоматом отправляет публиковать на сайте"?
2) На Авито телефон это картинка. Сохранить картинку нет проблем уже сейчас. С распознаванием сложнее, но этой темой я тоже буду заниматься. Будет интеграция с каптча-солвинг сервисами. Для простейших случаев, таких как Авито, возможно получится сделать встроенное распознавание.
3) FlowCrawler умеет заполнять формы (очень скоро и с файлами). Другой вариант — классический импорт из CSV.
4) В пределах одного проекта можно и парсить и постить.
В эфире ТВ для гиков и сразу несколько новых серий захватывающего сериала "Укротители вэба".
Для случайно заглянувших:
В данный момент я занимаюсь разработкой программы FlowCrawler, которая представляет из себя конструктор ботов для автоматического парсинга и постинга данных в Интернет. Официальный сайт программы: flowcrawler.com. На данный момент программа находится в раннем доступе, её можно купить с огромной скидкой и уже пользоваться. Все подробности по ссылке.
Предыдущее обсуждение: Премьера FlowCrawler от R2
Для тех, кто уже купил программу:
Сегодня стала доступна версия 0.0.2, загрузить её можно в личном кабинете. На видео показана именно она. Для обновления просто удалите текущую версию (через Панель управления Windows) и установите заново. Все настройки (включая активацию) должны остаться на месте. Некоторые проекты от предыдущей версии могут быть не полностью совместимы с новой (это нормально для дорелизных версий).
Рекурсивный парсинг категорий
В этом видео показано как парсить сайты с древовидной структурой. FlowCrawler позволяет легко проходить по всем категориям и подкатегориям рекурсивно. Показано на примере сайтов: avito.ru и dns-shop.ruПарсинг бесконечной загрузки
На примере сайта twitter.com показано как легко парсить ленты, подгружающие новые записи при достижении нижней границыПарсинг 2GIS
Видео разбирает алгоритм сбора данных с AJAX-сайтов, на примере 2gis.ruТам требуется отдельная регистрация, но она из трёх полей.
Как получить значение textarea?
Т.е. есть textarea, в которой есть данные. Как их получить?
Блок "Элементы", создаёте элемент как обычно. Textarea это обычный тэг, его значение извлекается как и любое другое.
А вот у обычных однострочных и других полей форм по другому, там нужно в свойствах элемента указать извлечение аттрибута value
DK, хорошие вопросы. На них постараюсь ответить следующим видео.
R2, а можно попросить на оф.сайте продукта выкладывать реализованные тобой примеры, что бы их можно было скачать, отредактировать под себя, и пользоваться. Спасибо.
Скоро примерно так и будет.
И сейчас решается вопрос с форумом.
Сейчас готовится апдейт, после него выложу еще видео с интересными примерами.