무료 스크래핑 허브(Scrapinghub) 대체 프로그램 10개
스크래핑 허브(Scrapinghub) 소개
설명
Scrapinghub는 웹 크롤러 ( “스파이더”라고도 함)를 배포하고 실행하기위한 가장 진보 된 플랫폼입니다
이를 통해 조직은 서버, 백업 또는 크론 작업을 관리하지 않고도 크롤러를 쉽게 만들고, 즉시 배포하고, 필요할 때 확장 할 수 있습니다
모든 것은 고 가용성 데이터베이스에 저장되며 API에서 검색 할 수 있습니다.
공식 홈페이지
플랫폼.
지원사양
company,data-mining,web-based,web-scraper,
무료 스크래핑 허브(Scrapinghub) 대체 프로그램 10개
1. 코모도 편집(Komodo Edit)
설명
Komodo Edit는 빠르고 스마트하고 무료이며 오픈 소스 코드 편집기입니다
신뢰할 수있는 코드 편집기를 바꾸는 것은 어렵지 만 Komodo Edit (또는 Komodo IDE의 큰 형)를 사용해보십시오
그럴만 한 가치가있을 것입니다 .Windows, Mac, Linux? 예 .PHP, Python, Ruby, JavaScript, Perl, Tcl, XML, HTML5, CSS 3? 네, 구문 색상 지정, 접기, 배경 구문 확인, 우수한 자동 완성 및 콜팁 (코드 인텔리전스라고 함)과 함께 (사용자 정의 가능한)
그 밖의 무엇입니까? 빠른 열기 (파일을 더 이상 천천히 파고 들지 않음)
원격 파일 편집; Vi 키 바인딩 (좋은 것들); 매크로와 코드 스 니펫을 포함한 툴박스는 모두 파이어 폭스와 같은 속임수 편집기와 확장 메커니즘을 포함하고 있습니다.
공식 홈페이지
https://www.activestate.com/komodo-edit
분류
지원사양
code-editor,html-editor,javascript-editor,macros,perl-editor,php-editor,python-editor,text-editor,
2. Webhose.io(Webhose.io)
설명
Webhose.io는 고급 DaaS (Data as a Service) 플랫폼입니다
우리는 전세계에서 240 개 이상의 언어로 뉴스 사이트, 블로그 및 온라인 포럼의 구조화 된 데이터에 즉시 액세스 할 수있는 데이터 중심 회사를 제공합니다
고객 중 일부는 가장 큰 이름입니다 Webhose.io의 배경은 웹에서 데이터가 필요할 때 반드시 크롤러를 만들거나 스크레이퍼를 사용하지 않아도된다는 것입니다
Webhose.io는 이미 많은 어려움을 겪었습니다
우리는 웹 데이터를 빠르고 효율적으로 수집 할 수있는 기술을 개발했습니다
효율성을 통해 사내에서 크롤링 작업을 실행하는 데 드는 비용의 일부만으로 수집 한 데이터를 제공 할 수 있습니다
Google은 역사적 데이터와 새로 생성 된 웹 데이터에 액세스 할 수 있습니다.이 데이터는 즉시 구조화 된 형태로 제공되며 소비 될 수 있습니다 API 또는 Firehose를 통해 제공됩니다
우리의 데이터는 수백만 개의 신뢰할 수있는 출처에서 오는 고품질의 스팸없는 데이터입니다
무료 플랜 (한 달에 최대 1,000 건) 또는 질문이 있으시면 여기에서 PM으로 시도해보십시오.
공식 홈페이지
분류
지원사양
big-data,data-mining,news-feed,search-engine,search-tool,social-media,social-news,
3. UiPath(UiPath)
설명
로봇 프로세스 자동화 Software.Automate 규칙 기반 비즈니스 프로세스
인간과 같이 UI를 구동하는 로봇을 훈련 및 설계하십시오
로봇 프로세스 자동화는 사용자 (사용자)와 동일한 방식으로 기존 응용 프로그램 소프트웨어를 구동하기 위해 컴퓨터 (소프트웨어 로봇)에 의해 수행되는 자동화입니다
UiPath를 사용하면 비즈니스 분석가가 규칙 기반 비즈니스 프로세스를 자동화하고 인간과 같은 UI를 구동하는 로봇을 교육하고 설계 할 수 있습니다
웹 또는 데스크톱 응용 프로그램을 자동화하기위한 무료 기능의 확장 가능한 도구입니다
UiPath Studio 커뮤니티는 개별 개발자, 소규모 전문 팀, 교육 및 교육 목적으로 무료입니다
UiPath를 사용하면 조직에서 수동으로 반복되는 규칙 기반 작업을 인력 비용의 일부만으로 자동화하고 레거시를 중단하지 않고 통합 할 수있는 소프트웨어 로봇을 구성 할 수 있습니다 system.Desktop Automation UiPath Studio는 프로세스를 자동화하는 방법을 설명하는 시각적 인 선언적 방법을 소개하며 Visio 다이어그램을 사용하는 것과 같은 방식으로 사용할 수 있습니다
다른 앱의 프리젠 테이션 레이어로 작업 할 때 수행해야 할 작업을 화면에 표시하기 만하면됩니다
UiPath는 논리적 제어 레벨에서 UI를 이해하고 화면의 요소 위치에 의존하지 않습니다
이것은 자동화를 훨씬 더 신뢰할 수 있고 화면 크기와 해상도와 무관하게 만듭니다
대부분의 고급 화면 긁기 TechnologyUiPath는 16 밀리 초 미만에서 100 % 정확도로 실행되는 데스크톱 응용 프로그램의 화면 긁기를 개척했습니다
UiPath 이전에는 화면 스크래핑의 정확도가 떨어지면서 속도가 느리며 취약했습니다 .UiPath는 실행중인 앱에서 텍스트가 추출되거나 다른 앱에 의해 숨겨 지거나 표시되는 경우에도 텍스트를 추출 할 수있는 혁신적인 기술을 특징으로합니다
웹 스크래핑은 스크린 – 여러 웹 페이지에 걸쳐있는 패턴 기반 데이터를 추출하기위한 전용 방법이 있기 때문에 풍경을 긁어 모을 수 있습니다.
공식 홈페이지
https://www.uipath.com/community
분류
지원사양
automated-tasks,automation,browser-enhancement,business-process-automation,macro-recorder,macros,office-automation,process-automation,robotic-process-automation,ui-automation,web-scraper,web-scraping,
4. 치료(Scrapy)
설명
Scrapy는 웹 사이트에서 필요한 데이터를 추출하기위한 오픈 소스 및 협업 프레임 워크입니다
빠르고, 간단하면서도 확장 가능한 방식.
공식 홈페이지
분류
지원사양
data-mining,framework,web-scraping,
5. ParseHub(ParseHub)
설명
ParseHub은 현대 웹을 처리하기 위해 제작 된 웹 스크 레이 핑 도구입니다
어디서든 데이터를 추출 할 수 있습니다
ParseHub는 단일 페이지 응용 프로그램, 다중 페이지 응용 프로그램 및 다른 최신 웹 기술과 함께 작동합니다 .ParseHub는 Javascript, AJAX, 쿠키, 세션 및 리디렉션을 처리 할 수 있습니다
양식을 쉽게 작성하고, 드롭 다운을 반복하고, 웹 사이트에 로그인하고, 대화식지도를 클릭하고, 무한 스크롤을 처리 할 수도 있습니다.
공식 홈페이지
분류
Mac OS X,Windows,Linux,Online,
지원사양
No coding required,Relative select,api,data-mining,no-coding,relative-select,web-scraping,
6. 애피 파이(Apify)
설명
Apify는 세계에서 가장 진보 된 웹 자동화 플랫폼입니다
Apifier는 몇 가지 간단한 JavaScript 코드를 사용하여 웹 사이트에서 구조화 된 데이터를 추출하는 클라우드 기반 웹 스크래퍼입니다.
공식 홈페이지
분류
지원사양
Jquery crawler,jquery-crawler,web-crawler,web-crawling,web-scraper,web-scraping,
7. Extracty(Extracty)
설명
Extracty는 웹 데이터를 추출하고 웹 페이지의 정보에 대한 API를 생성 할 수 있습니다.
공식 홈페이지
분류
Mac OS X,Windows,Linux,Online,
지원사양
api,content-extraction,crawler,data-extraction,data-mining,extract-text,framework,search-engine-optimization,web-based,web-crawler,web-scraper,web-scraping,web-scraping-tools,website-crawler,
8. 모잠다(Mozenda)
설명
코딩없이 웹 페이지 컨텐츠를 구조화 된 데이터로 변환합니다
* 중요 * – Mozenda는 Windows Vista 이상에 설치해야하는 Windows 응용 프로그램을 사용합니다.
공식 홈페이지
분류
지원사양
No coding required,crawler,crawling,data-extraction,data-mining,no-coding,web-crawler,web-crawling,web-scraper,web-scraping,
9. Instaparser(Instaparser)
설명
Instapaper의 구문 분석 도구를 사용하여 텍스트를 처리하여 사용자에게 번거로운 탐색 경험을 제공하십시오.
공식 홈페이지
분류
지원사양
Discontinued,data-extraction,data-mining,web-scraping,
10. 80 레그(80legs)
설명
80legs는 강력한 웹 크롤링을 제공합니다
웹 페이지, 이미지 및 기타 온라인 컨텐츠에서 데이터를 추출하십시오
빠르고 쉽고 무제한으로 웹 사이트 크롤링을 시작하십시오.
공식 홈페이지
분류
지원사양
crawling,data-mining,harvesting,htmlscraping,screenscraping,spidering,