CloakHQ/CloakBrowser

출처
GitHub
처음 오른 날
분야
데이터 수집
GitHub 별 수
31,506
주 언어
Python
웹사이트
cloakbrowser.dev (새 탭에서 열림)

외부 오픈소스 저장소를 소개하는 글입니다. HDATF 제품이 아닙니다.

CloakHQ/CloakBrowser

무엇을 하나

브라우저 fingerprint를 C++ 소스 수준에서 바꿔 봇 탐지 시스템이 일반 브라우저로 판단하게 만든 Chromium 빌드입니다. Python과 JavaScript에서 Playwright나 Puppeteer 대신 그대로 바꿔 쓰도록 만들어졌습니다.

ATF에 주는 도움

관련성은 낮습니다. LabChin이나 Company Brain의 자료 수집은 사이트 규칙과 접근 범위를 지켜야 하는데, 봇 탐지를 피하는 방식은 여기에 맞지 않습니다. 사이트가 자동화 브라우저를 어떻게 알아내는지 참고하는 정도입니다.

라이선스

MIT 허용 범위가 넓습니다. 저작권 표시를 유지하면 상업적 이용과 수정이 가능합니다.

같은 분야 저장소

  • Panniantong/Agent-Reach
    AI agent가 Twitter, Reddit, YouTube, GitHub, Bilibili, XiaoHongShu 같은 플랫폼을 유료 API 비용 없이 읽고 검색하게 해 주는 CLI입니다. 예를 들어 영상 자막이나 읽기 쉬운 웹 페이지 본문을 가져올 수 있습니다.
  • h4ckf0r0day/obscura
    Obscura는 웹 스크래핑과 AI agent 자동화를 위해 Rust로 만든 headless 브라우저 엔진입니다. V8로 JavaScript를 실행하고 Puppeteer, Playwright와 함께 Chrome DevTools Protocol을 지원하며, 스크린샷 캡처와 PDF 내보내기도 할 수 있습니다.
  • firecrawl/firecrawl
    웹을 검색하고, 페이지를 Markdown, HTML, 스크린샷, 구조화된 JSON으로 스크래핑하며, 추출 전에 페이지를 조작할 수도 있는 web data API입니다. 오픈소스이며 호스팅 서비스로도 제공됩니다.
  • sansan0/TrendRadar
    여러 플랫폼의 인기 뉴스와 RSS 피드를 모아 키워드나 AI로 걸러 내고, AI 분석 요약을 WeChat, Feishu, Telegram, 이메일, Slack 같은 채널로 보내는 도구입니다. MCP 서버로도 실행할 수 있습니다.
  • AhmadIbrahiim/Website-downloader
    wget으로 페이지와 자산을 내려받고 archiver로 묶는 Node.js 웹 다운로드 도구입니다. 오프라인 열람을 위해 링크를 변환합니다.

Trendshift 순위 목록에 오른 저장소만 담았고, 목록은 후보를 찾는 데만 썼습니다. 순위 숫자는 옮기지 않았습니다. 설명과 라이선스, 별 수는 각 GitHub 저장소에서 확인했습니다. 해설은 우리의 판단입니다. 이 프로젝트들을 직접 시험한 것은 아니며, 상승 목록에 올랐다고 품질이 증명되지는 않습니다.

GitHub에서 보기 (새 탭에서 열림)