/scrapee-j

high performance & high availability asynchronous based web scraper

Primary LanguageJava

scrapee-j

high performance & high availability asynchronous based web scrape engine.

이벤트 루프 기반으로 동작하고 쉽게 확장이 가능한 고가용성 웹 스크래핑 엔진 입니다. 여러 infrastructure와 통합, 프록시 기반 ip blocking 회피, 여러 Storage Interface을 기본적으로 지원합니다.
CSR 기반 웹사이트를 위해 GraalVM Javascript Rendering으로 HTML을 로딩합니다.