Написание парсера – работа для фрилансеров в России

Необходимо доработать парсер вакансий с 6 сайтов (SuperJob, Зарплата ру, Работа Mail ru, Trud com, Dreamjob, Job ru). Парсер есть, еще пару дней назад был рабочий, но некоторые сайты поменяли информацию, и начала и появляться ошибка Что собирает парсер по каждому сайту: Название вакансии Контактное лицо Контактный телефон Электронная почта Ссылка на вакансию Сумма ЗП Организация Результат: Выгрузка данных в Excel/CSV.

Пожелания и особенности: Требуется написать парсер/скрипт для автоматического сбора сертификатов (документов качества) с карточек товаров и их последующей загрузки на наш сервер. Этапы работ: Сбор данных: Обход указанного списка страниц/каталога товаров, распознавание и скачивание файлов сертификатов (форматы PDF, JPG или PNG). Обработка (опционально): Привязка скачанных файлов к артикулам или ID товаров, приведение к единой структуре названий. Загрузка: Автоматическая заливка собранных файлов на наш сервер с сохранением структуры папок либо через выгрузку в базу данных.

Написание парсера нужно парсить данные pari.ru именно настольный теннис общий тотал сеты точный счет и так далее общее обновление 15 секунд есть доступ к vps.

Нужен парсер 2гис с возможностью спарсить почты.

Читать цены в нескольких пабликах телеграмма и выгружать в таблицу самую низкую.

Пожелания и особенности: Нужен парсер новостей по ключевым словам из 1.ТГ 2.Новостных сайтов 3.Оф сайтов 4. В идеале твиттора, но это не обязательно. Кол-во источников для парсинга: 150+ Разные языки(русский, украинский, английский, турецкий) Возможность размещения на удалённом сервере с доступом трех - четырёх учётных записей. Интуитивно понятный интерфейс, вывод спарсеной инфы в виде списка ссылок. Обновление постоянное.

Создание парсера, инструмент по добыче и обработке b2b лидов Выгрузка доменов, анализ, формирование таблиц. Принятие решения о b2b действиях методом анализа big data Пример - что парсить?: Тендерные площадки (ЕИС Закупки, ЭТП) на этапе «Проектирование» или «Инженерно-геодезические изыскания». Реестры выданных разрешений на строительство (на сайтах региональных Минстроев / Мосгосстройнадзора), агрегаторы коммерческих тендеров, публичную кадастровую карту. Нужны креативные идеи по нашей задумке , и реализация. Оплата достойная.

Написать парсер товаров для интернет-магазина. (Word Press).

Необходимо спарсить сайт бельгийского парламента в Python Получить на выходе шесть таблиц (по одной для каждого созыва), содержащих данные о поименных голосованиях депутатов для каждого из пленарных заседаний созывов 50-55 , где: 1 - голос "ЗА"; 0 - голос "ПРОТИВ"; 2 - "воздержался". Для каждого из вопросов, по которым было проведено голосование в рамках данного заседания Финальный продукт: код в формате ipynb + таблицы csv/xlsx для каждого из созывов (50-55) Пример таблицы прикреплен в качестве файла. Созыв 55: https://www.lachambre.be/kvvcr/showpage.cfm?section=/cricra&language=fr&cfm=dcricra.cfm?type=plen&cricra=CRI&count=all&legislat=55 Созыв 54: https://www.lachambre.be/kvvcr/showpage.cfm?section=/cricra&language=fr&cfm=dcricra.cfm?type=plen&cricra=CRI&count=all&legislat=54 ... Созыв 50: https://www.lachambre.be/kvvcr/showpage.cfm?section=/cricra&language=fr&cfm=dcricra.cfm?type=plen&cricra=CRI&count=all&legislat=50 Пример страницы одного пленарного заседания (данные о поименных голосованиях приведены внизу страницы): https://www.lachambre.be/doc/PCRI/html/55/ip309x.html УЧЕСТЬ возможные вариации в html -структуре разных страниц, в формате ссылок и т.п. Желательно принять все меры для того, чтобы минимизировать требуемую на выходе дополнительную обработку/чистку таблиц.

Нужно находить обьявления на заграничных маркетплейсах таких как: mercari, goofish,grailed,ssense.

Ограниченное время, до 8 утра по мск сгенерировать как можно больше сервисных ключей вк.

Создать парсер под конкретный сайт.

Нужен бот парсер цен, который будет парсить цены на озон на определённую продукцию (пока это два товара). Бот на платформе вк. Пользователь выбирает в интерактивном меню предложенные товары, а затем получает уведомление о снижении цены на этот товар.

Нужно собрать в одну папку фотографии с сайта, где представлены геологические карты.

Необходимо создать парсер сайта Росаккредитации для выгрузки ссылок на документы по номерам деклараций/сертификатов соответствия. Например, номер декларации: ТС RU С-IT.РЦ01.А.01668 Ссылка на нее: https://pub.fsa.gov.ru/rss/certificate/view/131515/baseInfo.

Нужен парсер подписок в инстаграме в удобном формате.

Задача: Сбор Целевой Аудитории ВКонтакте (3000 шт) 1. Кого ищем: · Пол: Женщины. · Возраст: 20–44 года. · Интересы: Астрология, гороскопы, знаки зодиака, натальные карты, таро. 2. Где ищем: Только среди живых и активных пользователей. Выцепляй тех, кто проявляет активность в тематических группах: лайкает, комментирует, репостит посты («10 фактов о Близнецах», «Гороскоп на неделю» и т.п.). Просто «мёртвые души» в подписчиках нам не нужны. 3. Обязательное условие: В профиле должна быть открыта Дата Рождения (хотя бы день и месяц). 4. Фильтры от ботов (Критически важно!): Сразу отсеивай синтетику по следующим признакам: · Шаблонные комменты: «Класс!», «Огонь!», «Интересно» и просто смайлы без текста. · Пустые профили: Нет аватарки, постов, друзей — это мусор. · Нестыковки: Профиль девушки 25 лет, которая лайкает гороскопы, но при этом состоит в группах про кредиты или станки с ЧПУ. 5. Формат выгрузки: Строго CSV с колонками: id, first_name, last_name, bdate, city, profile_url. Никакой лишней обработки.

Пожелания и особенности: Необходимо автоматически собрать 500 статей с сайта drive2.ru. https://www.drive2.ru/o/Avtopolimer-Nsk?ysclid=mpc9nkpjk4680395634 Каждая статья содержит: · Текст объёмом от 1000 до 6000 знаков. · Фото: 3–5 изображений в высоком качестве. · Видео: 1–2 (ссылки на YouTube или встроенные). Ручной сбор не рассматривается – только парсер (скрипт, браузерный автоматизатор или готовое решение). Что нужно на выходе: · Файл (CSV / Excel / JSON) с полями: ссылка на статью, текст (очищенный HTML или plain text), список прямых ссылок на фото (или сами фото), список ссылок на видео. · Сами фото и видео можно отдельной папкой (если парсер умеет скачивать файлы), либо только ссылками – обсуждаемо. · Данные должны быть структурированы без потери информативности. Технические требования к исполнителю: · Учитывать антибот-защиту Drive2 (добавить задержки, смену User-Agent, использование прокси при необходимости). · Обеспечить стабильный сбор 500 статей (желательно с возможностью докачки при обрыве). · Предоставить итоговый парсер (если он остаётся у нас) или просто результат. · Срок: до 7–10 дней. Бюджет: Обсуждаем, но ориентир – от 5000 до 15000 руб. в зависимости от сложности и чистоты кода. Также рассматриваю сервисы типа ZennoPoster, Octoparse (с полным сопровождением). Пожалуйста, в отклике укажите: 1. Каким инструментом / языком будете парсить. 2. Как планируете обходить блокировки. 3. Примеры ранее спаршенных сайтов с похожей структурой (скриншоты или описание). 4. Финальную цену и срок.

Разработка парсера YouTube.

Нужен такой парсер чтобы с помощью него можно было создать аккаунт масслукер который будет аккуратно просматривать и искать истории от пользователей и просматривать истории и/или ставить лайки.

Нужно разработать монитор-парсер новостей для x.com с выводом полученной информации в дискорд через вебхук.

Пожелания и особенности: Сбор базы B2B контактов компаний (косметика, РФ) Нужно собрать базу компаний, продающих косметику (B2B сегмент). Требования к базе: - 10 000 уникальных компаний - Только действующие компании с сайтами - Гео: РФ - Сегмент: • бренды косметики • интернет-магазины косметики • дистрибьюторы косметики По каждой компании нужно: 1. Название юрлица (ООО / ИП) 2. Сайт компании 3. Email (желательно персональные: sales@, info@, manager@) 4. Дополнительно (если есть): • телефон • форма обратной связи • соцсети Важно: - Только валидные сайты - Без дублей - Email должен соответствовать домену сайта - База в Excel Источник данных: - открытые источники (сайты, каталоги, 2ГИС, Яндекс, Google и т.д.) Формат: Excel: - Название компании - Сайт - Email - Телефон (если есть).

Пожелания и особенности: Поисковый парсер по 4 сайтам - поиск по ключевым словам , с выдачей в telegram.

Пожелания и особенности: Экспортировать фото,видео,текст из телеграмм канала Газелист дизелист в Яндекс директ.

Парсер по информации бизнесов.

Пожелания и особенности: На самом деле мне нужен не совсем парсер, а только получить api_hash и api_id от телеграмма, постоянно выдает ERROR, уже все перепробовал, если кто сталкивался и готов помочь то буду очень благодарен и разумеется отплачу денюшкой.

Просто посмотреть логику парсера и указать на ошибки.

Спарсить базу контактов в 500< человек по заданным каналам. Хочу узнать стоимость, стоимость доп услуг, что они в себя включают и так далее

Пожелания и особенности: Необходимо настроить парсинг новых сообществ в соц сети x (https://x.com/) из раздела communities (https://x.com/i/communities/suggested) Уже есть существующий скрипт, необоходима его доработка для повышения производительности и непрерывного поиска. Текущий скрипт без использования API Краткое текстовое описание смогу направить в ЛС.

В личном общении пришлю ТЗ.

Разработать автоматизированную систему для регулярного сбора динамических данных о ценах конкурентов и визуализации на заданном маркетплейсе, с учетом требования регистрации и различий в ценах по регионам. Основные функциональные требования: Поддержка авторизации: Парсер должен автоматически проходить процесс входа на маркетплейс (с использованием логина и пароля, cookies или токенов сессии). Эмуляция региона: Система должна собирать цены для разных географических регионов, указанных в списке. Сбор данных: Для каждого целевого товара (по списку URL или артикулов) необходимо извлекать: - Текущую цену по каждому доступному региону. - Цену со скидкой (если есть). - Наличие товара (в наличии/нет). - Имя продавца. - Дату и время сбора. Хранение истории: Все собранные данные должны сохраняться в базу данных с привязкой ко времени, чтобы можно было строить графики изменения цены. Обход защиты: Реализовать механизмы для обхода стандартных систем защиты от парсинга Экспорт данных: Возможность выгружать данные в удобном формате (CSV, Excel). В отклике прошу указать стоимость работ и сроки.

Написать код на Python для сайта https://pub.fsa.gov.ru/rss/certificate, который затем передастся нам с целью периодического обновления реестра сертификатов. Необходимые столбцы на выходе находятся во вложении.

Пожелания и особенности: Ищу человека который разбирается в Telegram API Нужен скрипт для отслеживания постов в канале и копирования в мой канал.

Пожелания и особенности: Переберуть уин номера постановлений на госуслугах при нахождение штрафа сохранить .

Пожелания и особенности: Многпототосный от 5 проски нужен результат в виде данных в формате Excel Поочерёдный подстновеи номера ИНН или Тел выдается инфа Нужно собрать ИНН название ИП или ООО сайт почту ФИО город.

Нужно написать парсер для Ozon, который будет находить товар в нужном мне ценовом диапазоне. Парсер должен быть в формате телеграмм-бота, чтобы я мог им легко управлять: вводить товар, задавать ценовой диапазон, слова-исключения. Также он должен находить товар онлайн(как только товар появилось на озон, то бот мне сразу его присылает).

Нужен парсер, который будет проверять цены на WB и Ozon и отправлять подходящие товары в телеграм.

Пожелания и особенности: Техническое задание на разработку парсера профилей участников событий на Polymarket для Telegram/ Discord или любое другое удобное место для получения инфы ## 1. Общее описание Основной задачей является разработка парсера, который будет собирать информацию о профилях пользователей, участвующих в определенных событиях на платформе Polymarket, и предоставлять возможность фильтрации этих профилей по различным параметрам. ## 2. Функциональные требования ### 2.1. Выбор событий для парсинга - Пользователь должен иметь возможность выбрать одно или несколько событий на Polymarket для парсинга профилей участников. - События должны быть доступны для выбора из списка, который формируется на основе данных с сайта Polymarket/ минимально - по прямой ссылке. ### 2.2. Парсинг профилей участников - Парсер должен извлекать данные из профилей пользователей(по всем событиям одного профиля), которые делают ставки на выбранных событиях. - Данные профиля должны включать: - Винрейт (winrate) - Количество ставок (максимальное и минимальное) - Общий PnL (прибыль/убыток) - PnL за определенное количество дней - Общий ROI - ROI за определенное количество дней - Время ставки ### 2.3. Фильтрация профилей - Фильтры должны быть гибкими и позволять пользователю настроить критерии отбора профилей. - Минимальный набор фильтров: - Винрейт (диапазон значений) - Максимальное и минимальное количество ставок - Общий PnL (диапазон значений) - PnL за определенное количество дней (диапазон значений) - Общий ROI (диапазон значений) - ROI за определенное количество дней (диапазон значений) - Время ставки (диапазон значений) ### 2.4. Копитрейд (дополнительный вариант) - Реализации функции копитрейд, которая позволит автоматически копировать ставки выбранных профилей ИЛИ будет отправлять уведомления о том, что определенный (whitelist пользователь) открыл ту или иную сделку ### 2.5. Выгрузка данных в формате Excel - Данные по профилю должны быть сохранены в файле с расширением .xlsx. - Структура файла должна соответствовать выбранной пользователем конфигурации полей. - Файл должен быть отправлен пользователю (пример события: https://polymarket.com/event/who-will-trump-nominate-as-fed-chair?tid=1766147945646) (пример профиля с данными https://[Email скрыт]?tab=positions) (доп вариант, рассмотреть возможность реализации).

Нужна программа (две или одна), которая будет обрабатывать файлы txt и excel по заданному алгоритму и выводить результат обработки в табличном и графическом видах. На каком языке она будет написана и как будет выглядеть не принципиально. главное, чтобы работала и выполняла свои функции.

Пожелания и особенности: Интересует разработка парсера для соц сети - Х. Задача: перебирать id вновь созданных сообществ и отправлять полученную информацию в telegram/discord в формате: Admin сообщества Название сообщества Время создания сообщества Главное требование - скорость отправки + вероятно, потребуется поддержка прокси.

Необходимо спарсить открытые данные из отрытых телеграм каналов.

Привет, нужно решить следующую задачу - в телеграме в поиске по ключевым словам в постах - нужно, чтобы скрипт или что это будет оставлял комментарий в блоке комментов под постом с каким-то набором текстов и ссылкой.

Требуется парсер с еис.

Надо взять готовый проект на питоне из гита и развернуть его на вирт сервере, настроить, запустить. Парсер собирает юзерботом сообщения по ключевикам и пересылает их.

Пожелания и особенности: Нужен парсер, для лидогенерации.

Парсинг групп телеграм и сравнение списков 1. Есть 2 папки групп в телеграм: "Топ" и "минус".Нужно составлять списки уастников групп 2. Искать пересечения списков группы "топ". Должна быть возможность указать минимальное количесво групп в которых состоит участник 3. Искать пересечения списков группы "минус" сохранять в отдельный список (black list). Должна быть возможность указать минимальное количесво групп в которых состоит участник. Должна быть возможность дополнять блэклист. 4. Убрать из первого списка п.2 участников black list. Сохранить список и экспортировать участников в контакты аккаунта с именем "Owner " Группы защищены ботами верификации, заходить могут только люди, мой аккаунт состоит во всех группах.

Задача: найти и собрать список Telegram-чатов по фриланс-специальностям. Что нужно делать: • Искать тематические чаты по ключевым профессиям (дизайн, маркетинг, разработка, монтаж, smm, копирайтинг, таргет, верстка и т.д.). • Проверять активность чатов (онлайн, частота сообщений, наличие лидов/заказов). • Составлять таблицу: название чата, ссылка, тематика, кол-во участников, активность. • Минимум 200–300 чатов по разным направлениям.

Нужен парсер сайтов: hh.ru и rabota.ru.

ТЕХНИЧЕСКОЕ ЗАДАНИЕ Проект: Универсальный парсер брендов по магазинам РФ для Telegram-бота 1. Цель проекта Создать систему (Telegram-бот + сервер + парсер), которая по запросу пользователя собирает товары любого указанного бренда с заданного списка магазинов, анализирует: • цену • старую цену (если есть) • наличие • ссылку • фото товара • название • магазин и выдает данные в удобном виде, отсортированные по лучшей цене. 2. Пример работы Пользователь пишет в боте: salewa Бот: Запускает парсер по всем магазинам. Ищет товары, содержащие бренд “Salewa” (учитывать русские и английские варианты написания). Складывает результаты в БД. Отдает пользователю список с сортировкой по цене от минимальной. 3. Требования к функционалу 3.1. Команды бота /brand salewa /brand salomon /brand helikon /brand marmot Нужно, чтобы любой бренд, который пользователь написал, участвовал в поиске. 3.2. Что должен уметь парсер Работать по строке, введенной пользователем. Искать товары бренда на сайте: – либо через строку поиска – либо по параметрам URL – либо по парсингу каталога Собрать данные: – product_name – price – old_price (если есть) – availability – image_url – link – store Чётко определять наличие: – есть – нет – нет размера – предзаказ Поддерживать русские и английские варианты: Salewa / Салева, Jack Wolfskin / Джек Вольфскин и т. д. 3.3. Логика обновления • Бот хранит данные в БД. • Если данные старше 24 часов, при следующем запросе запускается новый парсинг. 3.4. Результат пользователю • Список товаров • Сортировка: цена ? • Отмечать товары со скидкой более 30% • Кнопка “Показать ещё” если позиций > 20 4. Список магазинов для парсинга Все магазины проверенные, с нормальной репутацией. Первые 10 — обязательно для запуска. 1. Спортмарафон https://sport-marafon.ru 2. Триал-Спорт https://trial-sport.ru 3. Кант https://kant.ru 4. SportiQue https://sportique.ru 5. BigWall https://bigwall.ru 6. KTM (outdoor, не мотоциклы) https://ktm-rf.ru (программист пусть уточнит, если перенесут каталог) 7. Мандрогор https://mandragor.ru 8. Territoriya (Территория приключений) https://territory-store.ru 9. TRAMP (официальный магазин) https://tramp-shop.ru 10. ALLRAD https://allrad.ru 5. Архитектура 5.1. Telegram-бот Написать на Python (aiogram или telebot) или NodeJS. 5.2. Серверная часть Python (FastAPI) или NodeJS. 5.3. База данных SQLite для MVP PostgreSQL — если нужен масштаб. Таблица: | id | brand | product_name | price | old_price | availability | link | image_url | store | updated_at | 6. Алгоритм работы Пользователь отправляет название бренда. Бот проверяет, есть ли в базе свежие данные (моложе 24 часов). Если нет — начинает новый парсинг всех магазинов. Из каждого магазина тянется список товаров. Результаты записываются в БД. Бот отправляет отсортированный список пользователю. 7. Дополнительные фишки (после MVP) 7.1. Автоуведомления о скидках Команда: /track salewa Бот шлет уведомление, если цена на любой товар Salewa упала. 7.2. Мультибрендовый запрос /brand salewa, salomon, montane 7.3. Умная подборка Бот сам отмечает: • минимум цены по рынку • скидки > 50% • подозрительные магазины (если появятся) 8. UX логика вывода Результат должен быть таким: Salewa Brenta Down Jacket Black Цена: 16 790 ? Было: 23 990 ? Магазин: Кант Наличие: есть все размеры Ссылка: … 9. Что важно учесть программисту • У каждого магазина своя HTML-структура, парсеры пишутся отдельно. • Нужно ограничение скорости запросов, чтобы не словить бан. • Нужен нормальный User-Agent + небольшие задержки. • Фотографии желательно качать по прямому URL. • На 2-м этапе можно сделать кэширование изображений. 10. Дедлайн MVP (10 магазинов, поиск бренда, выдача результатов): 2–4 недели реальной работы одного разработчика.

Пожелания и особенности: Парсер на python, запуск локально с компа. Создает табличку в гугл документах, обновляет каждый день. Собирает данные про объявления невозможности в заданном районе, по заданной цене. В тг отправляет сообщение, если лот стал неактивен на сайте.