Scrapy icon

Scrapy

Scrapy icon

Scrapy

  78
Бесплатное ПО Открытый код
Категории:
Платформы: Mac Linux Windows
Ссылки: Официальный сайт
Особенности:
data-mining сбор данных web-scraping framework


Scrapy - это открытая и совместная структура для извлечения необходимых вам
данных с веб-сайтов. Быстро, просто, но расширяемо.

Аналоги (43):

  • ParseHub

    ParseHub is a web scraping tool built to handle the modern web.
      56
    Бесплатное ПО
    Linux Web Windows Mac
    data-mining сбор данных относительный выбор api кодирование не требуется браузер сервера приложений web-scraping анонимный веб скрапинг
    Подробнее

  • UI.Vision Kantu

    Современный открытый инструмент автоматизации задач и тестов и Selenium IDE.
      53
    Бесплатное ПО Открытый код
    Mac Linux Windows Browser extension
    web-ui-testing functional-testing form-filler software-testing file-uploading скрипты экспорт/импорт данных testing-tools functional-ui-testing работает в автономном режиме web-development web-automation расширения firefox совместим с selenium ide интерфейс командной строки интеграция браузера поддержка юникода создать макрос macro-recorder кросс-браузерное тестирование расширения google chrome computer-vision marketing-automation завершение кода test-automation web-scraping software-testing-tool selenium тестирование анонимный веб скрапинг скрапинг экрана website-monitoring web-testing автоматизация процессов инструменты для создания скриншотов automated-test тестирование пользовательского интерфейса скриншот ocr роботизированная автоматизация business-process-automation автоматический заполнитель форм язык сценариев automated-testing-tools прямая загрузка файлов автоматическое обновление image-recognition pdf ocr web-scraper gui-testing file-upload автоматизация рабочего процесса performance-testing robotic-process-automation автоматизация задач визуальное тестирование пользовательского интерфейса
    Подробнее

  • Portia

    Визуальный инструмент для соскоба с открытым исходным кодом, который позволяет вам чистить веб без кода, созданный Scrapy ...
      49
    Бесплатное ПО Открытый код
    Linux Web Windows Mac
    web-crawler web-scraping web-crawling скрапинг экрана
    Подробнее

  • import.io

    import.io - это бесплатная веб-платформа, которая позволяет извлекать данные из Интернета, не записывая ...
      44
    Платное ПО
    Mac Linux Windows
    extractor crawler data-mining сбор данных data-extraction
    Подробнее

  • Mixnode

    Преврати сеть в базу данных!
      37
    Платное ПО
    Web
    web-crawling поддержка amazon s3 crawling фильтрация по типу контента url filtering web-crawler web-scraper warc выход web-data-extraction web-scraping website-crawler web-scraping-software
    Подробнее

  • UiPath

    Бесплатный, полнофункциональный и расширяемый инструмент для автоматизации любого веб-или настольного приложения.
      25
    Бесплатное ПО
    Windows
    macro-recorder автоматизация процессов automation automated-tasks web-scraper макрос browser-enhancement web-scraping business-process-automation
    Подробнее

  • Diggernaut

    Diggernaut - это облачный сервис для поиска в сети, извлечения данных и других задач ETL.
      19
    Бесплатное ПО
    Linux Web Windows Mac
    etl data-mining data-extraction-services data-collection scraping сбор данных scraper website-scraper self-hosted web-scraping-tools web-scraper big-data scraping-tools web-data-extraction web-scraping data-extraction web-scraping-software
    Подробнее

  • Apify

    Apify - это веб-платформа для анализа и автоматизации - она ​​извлекает данные с веб-сайтов, просматривает списки ...
      14
    Бесплатное ПО Открытый код
    Web
    jquery гусеничный web-crawler web-scraper headless анонимный веб скрапинг web-scraping web-crawling serverless
    Подробнее

  • dexi.io

    Dexi - это самый полный инструмент для веб-обработки данных для профессионалов.
      13
    Платное ПО
    Web
    data-integration web-scraping-tools web-scraper web-crawler управление данными web-data-extraction web-scraping web-scraping-software
    Подробнее

  • ScrapeHero

    Веб-сервис для сбора данных с веб-сайтов, без каких-либо программ или инструментов DIY.
      13
    Платное ПО
    Web
    crawling-as-service data-as-service сбор данных nosql crawler web-scraping-tools web-crawler data-extraction web-data-extraction web-scraping web-crawling
    Подробнее

  • Octoparse

    Octoparse - это современное программное обеспечение для извлечения визуальных веб-данных.
      12
    Бесплатное ПО
    Windows
    аналитика данных интерфейс «укажи и нажми» data-miner crawler web-crawler cloud-service кодирование не требуется web-scraping data-extraction
    Подробнее

  • Scrapinghub

    Мы превращаем веб-контент в структурированные данные. Ведущие сопровождающие Scrapy.org.
      10
    Платное ПО
    Web
    data-mining web-scraper онлайн доступ сбор данных
    Подробнее

  • Mozenda

    Соскоб в Интернете, включая облако.
      6
    Бесплатное ПО
    Windows
    data-mining сбор данных crawling crawler web-crawler web-scraper data-extraction кодирование не требуется web-scraping web-crawling
    Подробнее

  • Webhose.io

    Мы сканируем сеть, чтобы вам не пришлось.
      6
    Бесплатное ПО
    Web
    data-mining search-engine поисковый движок social-news сбор данных web-crawler social-media news-feed big-data search-tool
    Подробнее

  • Web Robots

    Web Robots - это веб-платформа, созданная для работы с современной сетью.
      4
    Бесплатное ПО
    Mac Linux Windows
    webcrawling webdatafeed datascraping webdata web-scraping-tools web-scraper dataextractions web-scraping web-scraping-software
    Подробнее

  • Product API by Fetchee

    Автоматический продукт API обеспечивает стартапы и предприятия точными данными электронной коммерции по требованию ...
      3
    Бесплатное ПО
    Web
    extractor ecommere retailer сбор данных crawling api web-crawler web-scraper scraping-tools web-scraping parser
    Подробнее

  • PromptCloud

    PromptCloud - провайдер веб-сервисов, отвечающий требованиям больших данных предприятий.
      3
    Платное ПО
    Web
    web-crawling data-crawling-provider web-data-crawling daas-provider crawling-unstructured-data data-crawling web-development онлайн доступ web-scraping unstructured-data-extraction
    Подробнее

  • ProxyCrawl

    Царапать и сканировать веб-сайты, оставаясь анонимным, и обходить любые ограничения, блоки или капчи
      3
    Бесплатное ПО
    Web
    crawling-as-service scraping crawling scraper website-scraper crawler web-scraping-tools web-scraper free api scraping-tools web-scraping анонимный веб скрапинг web-scraping-software
    Подробнее

  • Scrapeful

    Пользовательские услуги веб-очистки для нужд бизнеса
      3
    Платное ПО
    Web
    web-scraper web-scraping
    Подробнее

  • TagUI

    TagUI - инструмент RPA / CLI для автоматизации взаимодействия с пользователем
      3
    Бесплатное ПО Открытый код
    Mac Linux Windows Browser extension
    обработка естественного языка web-automation искусственный интеллект web-scraping
    Подробнее

  • 80legs

    80legs предлагает мощный веб-сканирование.
      2
    Бесплатное ПО
    Web
    harvesting htmlscraping сбор данных crawling screenscraping spidering
    Подробнее

  • ACHE Crawler

    ACHE is a web crawler for domain-specific search.
      2
    Бесплатное ПО Открытый код
    Mac Linux Windows
    web-crawler web-scraper web-scraping web-crawling
    Подробнее

  • Apache Nutch

    Apache Nutch - это расширяемый и масштабируемый программный проект с открытым исходным кодом.
      2
    Бесплатное ПО Открытый код
    Mac Linux Windows
    web-crawler web-scraper java-based расширяемый с помощью плагинов/расширений масштабируемость web-crawling
    Подробнее

  • Newspaper

    Извлечение метаданных новостей, полных текстов и статей в Python 3
      2
    Бесплатное ПО Открытый код
    Web
    website-scraper self-hosted web-scraping-tools web-scraper python
    Подробнее

  • Phantombuster

    Повысьте свой маркетинг с помощью наших облачных API.
      2
    Бесплатное ПО Открытый код
    Web
    marketing data-mining сбор данных api automation web-crawler кодирование не требуется web-scraping
    Подробнее

  • ScrapeStorm

    ScrapeStorm - это инструмент для визуального просмотра веб-страниц, разработанный AI-Powered, который можно использовать для извлечения данных практически из ...
      2
    Бесплатное ПО
    Mac Linux Windows
    website-scraper web-scraping-tools web-scraper web-scraping data-extraction web-scraping-software
    Подробнее

  • Zennoposter

    Автоматизация для SEO экспертов и другой онлайн деятельности.
      2
    Платное ПО
    Windows
    seo-optimization обнаружение контента web-data-crawling macro-recorder визуальное программирование automation seo-spider web-crawler marketing-automation web-automation web-scraping web-crawling
    Подробнее

  • Algosaur

    Краудсорсинговый рынок ботов для простой веб-автоматизации.
      1
    Бесплатное ПО
    Web
    seo-software marketing website-monitoring скрипты сбор данных bots marketing-tools marketplace scripts seo-keyword seo-optimization исследование ключевых слов keyword-generator keywords-research bot seo аудит data-analysis search-engine-optimization онлайн доступ
    Подробнее

  • BotForce365 RPA

    BotForce365 - это платформа Cognitive RPA для визуального создания, обучения, развертывания и автоматизации самых мощных ...
      1
    Платное ПО
    Windows
    чат бот машинное обучение автоматизация рабочего процесса роботизированная автоматизация искусственный интеллект machine-learning
    Подробнее

  • Lead Bunnies

    Программное обеспечение Leadbunnies для извлечения электронной почты - это мощное расширение для Chrome, которое автоматизирует ...
      1
    Бесплатное ПО
    Web Browser extension
    ведущее поколение growthhack leadbunnies buildemaillist digitalmarketing buyemaillist emailblast buyemailaddress listoffreeemail collectemailsonline install chrome extensions freeemailmarketingtools online-email-extractor emailscraper mailinglist extractemails emailaddresslist emaillist email-marketing
    Подробнее

  • Mercury Webparser

    Mercury Webparser позволяет вам скачать полный текст статьи в формате json через http web ...
      1
    Бесплатное ПО
    Web
    rest api web-scraping api
    Подробнее

  • Scraper API

    Легко создавать масштабируемые веб-скребки
      1
    Платное ПО
    Web
    web-scraping-tools web-scraper web-crawler web-scraping web-crawling web-scraping-software
    Подробнее

  • StormCrawler

    StormCrawler - это SDK с открытым исходным кодом для создания распределенных веб-сканеров с помощью Apache Storm.
      1
    Бесплатное ПО Открытый код
    Mac Linux Windows
    web-crawler
    Подробнее

  • artoo.js

    Соскоб со стороны клиента
      0
    Бесплатное ПО Открытый код
    Web Browser extension
    jquery-injection javascript-tool javascript-based self-hosted jquery web-scraper node.js javascript web-scraping json client-side-scraping
    Подробнее

  • Automate That Shit

    ATS разрабатывает веб-приложения, чтобы сократить человеческое время, затрачиваемое на мелкую работу.
      0
    Бесплатное ПО
    Web
    html-to-markdown web-scraping extract-email extract-email-addresses automation инструменты для создания скриншотов web-scraper excel-comparison extract-text html-to-excel
    Подробнее

  • Data Scramblr

    Ищите любую компанию по ключевому слову и городу / местоположению по всему миру и загружайте электронные письма, URL и ...
      0
    Платное ПО
    Web
    yelp email-list email-lists база данных scraping сбор данных web-scraping-tools web-scraper соскоб электронной почты big-data email-marketing web-scraping web-scraping-software
    Подробнее

  • DataStock

    Загрузите подробные, чистые и готовые к использованию предварительно просканированные наборы веб-данных из широкого спектра ...
      0
    Платное ПО
    Web
    база данных developer-tools development web-scraper web-data-extraction web-scraping
    Подробнее

  • GrabzIt

    Надежный бесплатный сервис, который включает в себя API и онлайн-инструмент для скриншотов веб-сайтов, а также ...
      0
    Бесплатное ПО
    Web
    icon-generator animated-gif-creator screenshot-generator конвертировать html в изображения конвертировать видео в анимированные gif конвертировать url в pdf website-scraper web-screenshots инструменты для создания скриншотов web-scraper конвертировать url в docx html-to-image конвертировать html-страницы в pdf конвертировать url в изображение pdf-conversion конвертировать html в docx
    Подробнее

  • WebScraping.Download

    Это визуальное программное обеспечение для извлечения данных с веб-сайтов, предназначенное для работы на ...
      0
    Платное ПО
    Linux Windows
    web-scraping-tools php web-scraping сбор данных
    Подробнее

  • Infovium Web data extractor

    Средство извлечения веб-данных от Infovium отлично зарекомендовало себя для извлечения данных с веб-страниц ...
      0
    Платное ПО
    Windows Browser extension
    data-extraction-services сбор данных datascraping website-scraper web-scraper web-data-extraction software-development web-scraping
    Подробнее

  • JobsPikr

    JobsPikr является платформой сбора данных о работе, которая извлекает данные непосредственно с веб-сайтов компании ...
      0
    Платное ПО
    Web Windows mobile
    jobs jobs-board recruitment web-scraper bigdata
    Подробнее

  • mydataprovider.com

    mydataprovider.com - это веб-платформа, которая позволяет клиентам извлекать данные из Интернета.
      0
    Платное ПО
    Web
    web-scraping-tools web-scraping web-scraping-software
    Подробнее

  • WebHarvy

    WebHarvy - это визуальный веб-скребок, с помощью которого можно легко извлекать данные с веб-сайтов.
      0
    Платное ПО
    Windows
    поддержка прокси integrated web browser сбор данных web-crawler web-scraper web-data-extraction web-scraping web-crawling поддержка wysiwyg
    Подробнее