nanmicoder/mediacrawler

이 페이지는 AI로 자동 번역되었습니다. 기술적인 세부 사항은 원문을 확인하세요. 원문 보기

6.9만 stars 품질 68 트렌드 100NOASSERTION

개요

BrowserAct는 단 한 문장으로 어떤 웹사이트에서든 데이터를 추출할 수 있습니다. 코드가 필요 없고, 한 번에 내장되며, 안정적인 재사용과 매우 낮은 토큰 소비가 가능합니다. BrowserAct는 실제 브라우저를 사용해 데이터 수집 봇을 자동으로 구축하며, 내장된 보이지 않는 브라우징, CAPTCHA 처리, 주거용 프록시를 통해 구조화된 결과를 직접 출력합니다. 지금 무료로 사용해 보세요. 이 저장소⚠️⚠️⚠️⚠️는 학습 목적으로 사용해 주십시오. 불법 또는 비준수 웹 크롤링 사례 이 저장소의 모든 콘텐츠는 연구 및 참고 목적으로만 제공되며 상업적 사용은 금지되어 있습니다. 어떠한 개인이나 조직도 이 저장소의 콘텐츠를 불법 목적으로 사용하거나 타인의 정당한 권리와 이익을 침해할 수 없습니다. 이 저장소에 포함된 웹 스크래핑 기술은 학습 및 연구 목적으로만 사용되며, 다른 플랫폼에서 대규모 크롤링이나 기타 불법 행위에 사용해서는 안 됩니다. 이 저장소는 이 창고 콘텐츠 사용과 관련하여 법적 책임을 지지 않습니다. 이 저장소의 콘텐츠를 사용함으로써 귀하는 이 면책 조항의 모든 약관에 동의하는 것입니다. 더 자세한 면책 조항을 보려면 클릭하세요. 클릭하여 바로 이동하기 샤오홍슈, 더우인, 쿠아이슈우, 빌리빌리, 웨이보, 티에바, 지후 등 주요 플랫폼에서 공개 정보 수집을 지원하는 강력한 **입니다. - :Playwright 브라우저 자동화 프레임워크를 기반으로 저장된 로그인 및 로그인 모드 - :로그인 상태를 유지하여 JS 표현식을 통해 서명 매개변수를 얻는 브라우저 컨텍스트 환경을 사용합니다 - :복잡한 역암호화 알고리즘이 필요 없어 기술적 장벽을 크게 낮춥니다 성인 프로젝트를 위한 아키텍처 설계 학습에 집중하며, 단순히 웹 스크래핑 기법만을 배우는 것이 아닙니다; 프로 버전의 코드 설계 개념도 깊이 있게 배울 가치가 있습니다! - ✅ (신규 기능) - ✅ (주요 기능) - ✅ (주요 기능) - ✅ , 더 쉽게 사용하기 쉽습니다 - ✅ - ✅ 읽기 쉽고 유지보수하기 쉬운 (분리된 JS 서명 논리) - ✅ 대규모 크롤러 프로젝트 구축에 적합함 - ✅ 높은 확장성, 소스 코드 학습에 더 큰 가치를 제공합니다 - ✅ (풀스택 개발 학습 적합) - ✅ (HomeFeed) - ✅ (OpenClaw 🦞 / Claude Code / 커서를 통한 원클릭 설치, 에이전트가 자동으로 데이터를 크롤링할 수 있음) - [ ]

개요(AI 번역)

🤝 골드 스폰서에게 특별히 감사드립니다

면책 조항:

이 창고⚠️⚠️⚠️⚠️를 학습 목적으로 사용해 주세요; 불법 또는 비협조 크롤러 사례가 있습니다

이 저장소의 모든 콘텐츠는 학습 및 참고 목적으로만 사용되며 상업적 사용은 금지되어 있습니다. 어떠한 개인이나 조직도 이 저장소의 콘텐츠를 불법 목적으로 사용하거나 타인의 정당한 권리와 이익을 침해할 수 없습니다. 이 저장소에 포함된 웹 스크래핑 기술은 학습 및 연구 목적으로만 사용되며, 다른 플랫폼에서 대규모 크롤링이나 기타 불법 활동에 사용해서는 안 됩니다. 이 저장소는 이 창고 콘텐츠 사용으로 인해 발생하는 어떠한 법적 책임도 지지 않습니다. 이 저장소의 콘텐츠를 사용함으로써 귀하는 이 면책 조항의 모든 약관에 동의하는 것으로 간주됩니다.

더 자세한 면책 조항을 보려면 클릭하세요. 클릭하여 바로 이동

📖 프로젝트 개요

샤오홍슈, 더윈, 쿠아이쇼우, 비리빌리, 웨이보, 티에바, 즈호 등 주요 플랫폼에서 공개 정보를 추출하는 것을 지원하는 강력한 다중 플랫폼 셀프 미디어 데이터 수집 도구입니다.

🔧 기술 원리

핵심 기술: Playwright 브라우저 자동화 프레임워크를 기반으로 로그인 상태 저장
JS 역설계 없음: 로그인 상태를 유지하여 JS 표현식을 통해 서명 매개변수를 얻는 브라우저 컨텍스트 환경을 활용함
장점: 복잡한 역암호화 알고리즘이 필요 없어 기술적 장벽이 크게 낮아짐

✨ 기능적 특징

플랫폼	키워드 검색	특정 게시물 ID 크롤링	보조 댓글	지정 창작자 홈페이지	로그인 캐시	IP 프록시 풀	댓글 클라우드 이미지 생성
샤오홍슈	✅	✅	✅	✅	✅	✅	✅
두인(Douyin)	✅	✅	✅	✅	✅	✅	✅
쾌수	✅	✅	✅	✅	✅	✅	✅
빌리빌리	✅	✅	✅	✅	✅	✅	✅
웨이보	✅	✅	✅	✅	✅	✅	✅
티에바	✅	✅	✅	✅	✅	✅	✅
지후	✅	✅	✅	✅	✅	✅	✅

🚀 오픈 소스 버전에 충분하지 않나요? MediaCrawlerPro에 추가된 내용을 확인하세요: 브레이크포인트 크롤링 · 다중 계정 + IP 프록시 풀 · 삭제된 플레이라이트 · 다중 AI 에이전트 프로젝트 소스 코드 (클릭하여 확장)

이 페이지는 AI로 자동 번역되었습니다. 기술적인 세부 사항은 원문을 확인하세요.

설치

npx skillfish add nanmicoder/mediacrawler

MCP 초보자라면? mcpskill.org 가이드부터 시작하세요 →