Датамайнинг - парсинг скрейпинг автоматизация действий на сайтах

проект в песочнице  

Создаем маркетплейс-платформу, которая объединяет разработчиков парсеров, краулеров, скраперов и клиентов, заинтересованных в сборе общедоступных данных, например: выдача google, товары amazon или автоматизации действий на сайтах.

 

Как это работает?

Разработчик пишет парсер на любом языке программирования загружает в docker контейнер, указывает какие данные необходимы для запуска и каким будет результат работы. Клиент находит в маркетплейсе необходимый парсер, вводит данные для работы, запускает, парсер собирает и сохраняет данные, клиент получает данные в удобном формате.

 

Клиент платит за время выполнения парсера на ВМ платформы, разработчик получает процент от запуска.

 

Более подробное описание проекта здесь - https://clck.ru/Lk9Ko" target="_blank" rel="nofollow

 

Аналогичные сервисы и конкуренты:

- apify.com

- rapidapi.com

- scrapinghub.com

- scrapingbee.com

 

На сегодняшний день проанализирован рынок, конкуренты, делаем ТЗ и лендинг для проекта.

Роль автора: Поиск и организация работы команды, определение направления развития проекта, любые другие задачи какие могу делать.

Открытые специализации

Контент-менеджер - Написание контента по ТЗ SEO специалиста
SEO специалист - SEO продвижение на рынок США и на остальной англоговорящий мир
Разработчик - Разработчик парсеров любые языки программирования, знание Docker
Дизайнер - Лендинга и UI

Вопросы к сообществу от команды



Обсуждение    


Буквально сегодня наткнулся на этот проект (я никак с ним не аффилирован): indiehackers.com, их сайт c.beeqb.com
Они разрабатывают, как я понял, маркетплейс для автоматизации задач. Думаю, ваши задачи похожи, вы могли бы пообщаться.
Ещё вот один чувак (indiehackers.com). Он, как я понял, занимается созданием приложения, которое определяет ценность данных с помощью машинного обучение и на основе этого создает скрэппер. Если это так, то это дико круто, и позволило бы вам убрать один из слоёв в вашем маркетплейсе. Удачи
12 марта 2020 г.   | ответить
Спасибо! Есть по теме!
13 марта 2020 г.

Автор:   Семен Григорьев
Рейтинг:  +1


Тип: Проект
Стадия: Проектирование
Создан: 2020-03-12 15:49:06




Подписчики проекта

Прямо сейчас

Приветствуем нового пользователя Тимфайндинга - 1357924680. - 31 сек назад
Приветствуем нового пользователя Тимфайндинга - Nikchern. - сутки назад
Приветствуем нового пользователя Тимфайндинга - alexprost1. - сутки назад
Приветствуем нового пользователя Тимфайндинга - pe68. - сутки назад
Приветствуем нового пользователя Тимфайндинга - jaynis. - 3 дн. назад
Приветствуем нового пользователя Тимфайндинга - mortanych. - 3 дн. назад
Приветствуем нового пользователя Тимфайндинга - Saivnsho. - 3 дн. назад
Приветствуем нового пользователя Тимфайндинга - g4ngsterezy. - 3 дн. назад
Приветствуем нового пользователя Тимфайндинга - Centavra. - 5 дн. назад
Приветствуем нового пользователя Тимфайндинга - Ilamalutin4. - 6 дн. назад
Все события

Активные идеи

Все живые проекты