Scrapling 웹 추출 도우미
Scrapling CLI 설치 진단부터 정적·동적 페이지 추출과 결과 검증까지 단계별로 안내하는 스킬입니다.
웹·API 연동중급★ 1,323⑂ 212AI 점수 8/10마지막 업데이트: 2026. 8. 8.
무엇을 해주나
- 로컬 Scrapling 설치 상태를 진단 스크립트(
scripts/diagnose_scrapling.py)로 먼저 점검합니다. click누락 등 CLI extras 문제, Playwright 브라우저 런타임 미설치 문제를 정확한 명령으로 해결합니다.extract get(정적) →extract fetch(JS 렌더링) →extract stealthy-fetch(안티봇) 순서로 최소한의 방법부터 단계적으로 시도하도록 규칙을 강제합니다.- 추출 후 파일 크기와 내용을 실제로 확인해 "성공한 척"하는 실수를 막습니다.
- SSL 인증서 오류, WeChat(mp.weixin.qq.com) 본문 추출 등 알려진 실패 패턴별 복구 절차를 제공합니다.
이런 분께 추천
- Scrapling CLI로 웹 페이지를 HTML/Markdown/텍스트로 뽑아내는 개발자·리서처
- 위챗 공식 계정 글이나 JS로 렌더링되는 페이지를 안정적으로 수집해야 하는 분
- 크롤링 도구 설치가 자주 깨져서 원인 파악에 시간을 쓰는 분
활용 예시
- "이 기사 본문만 마크다운으로 저장해줘" →
scrapling extract get 'URL' article.md -s 'main'실행 후wc -c로 검증. - "위챗 글이 빈 파일로 나와요" →
-s '#js_content'선택자와 URL 따옴표 처리로 본문 추출. - "scrapling --help가 안 돼요" → 진단 스크립트로 원인 확인 후
uv tool install 'scrapling[shell]'로 재설치.
· · · 설치 가이드 · · ·
설치 없이 지금 한 번 써보기
아래를 Claude에 붙여넣으면 설치하지 않고도 이 스킬을 그대로 씁니다.
이 파일의 지시를 읽고 그대로 따라서 나를 도와줘: https://raw.githubusercontent.com/daymade/claude-code-skills/HEAD/scrapling-skill/SKILL.md 내가 원하는 것: (여기에 하고 싶은 일을 쓰세요)
Claude가 링크를 열지 못하면, 링크를 직접 열어 내용을 복사해 붙여넣으세요.
↓ 쓸 만하면 아래에서 ZIP을 받아 설치하세요. 그러면 매번 붙여넣지 않아도 알아서 작동합니다.
Claude 앱에 설치 (터미널 필요 없음)
- 아래 버튼으로 ZIP 파일을 받으세요.
- Claude 설정 → Capabilities에서 '코드 실행 및 파일 생성'을 켭니다. (한 번만)
- Claude에서 Customize → Skills → + → '스킬 업로드'를 누르고 받은 ZIP을 올립니다.
Claude Code에 설치
Claude에게 맡기기 — 아래 문장을 Claude Code에 붙여넣으세요
클로드스킬마트에서 찾은 스킬을 설치해줘. GitHub 저장소 daymade/claude-code-skills 의 scrapling-skill 폴더를 내 ~/.claude/skills/scrapling-skill/ 에 그대로 복사해줘. 설치가 끝나면 이 스킬로 무엇을 할 수 있는지 한 줄로 알려줘.
직접 명령으로 설치하기
git clone https://github.com/daymade/claude-code-skills.git && cp -r claude-code-skills/scrapling-skill ~/.claude/skills/scrapling-skill⚠ 제3자가 만든 스킬입니다. 설치 전 원본 저장소를 한 번 확인하세요.
- 터미널을 엽니다.
- 스킬 저장소를 내려받습니다:
git clone https://github.com/daymade/claude-code-skills.git - 스킬 폴더를 복사합니다:
cp -r claude-code-skills/scrapling-skill ~/.claude/skills/scrapling-skill - Scrapling CLI를 준비합니다:
uv tool install 'scrapling[shell]'(uv가 없으면 먼저 uv를 설치) - 브라우저 기반 추출이 필요하면
scrapling install로 Playwright 런타임을 설치합니다. - Claude Code를 재시작하고 "scrapling으로 이 URL 본문 추출해줘"처럼 요청하면 스킬이 발동합니다.
GitHub에서 원본 보기 ↗라이선스: MIT