Reddit의 API 가격에 지쳐서 로컬 스크래퍼를 만들었어요 (무료)
Source: Dev.to
2023년에 Reddit이 API 가격 정책을 바꾸면서 서드‑파티 앱을 사실상 죽였던 거 기억나요? 네, 그때 정말 짜증났죠.
2025년이 된 지금도 그 여파는 계속됩니다. 저는 Reddit을 타깃으로 SaaS를 만들고 있는 1인 개발자라 초기 사용자를 찾기가 힘듭니다. 공식 API는 1,000 요청당 $0.24 정도인데, 300개의 포스트를 스크래핑하면 300 + API 호출이 필요합니다. 하루에 몇 번씩 하면 월 $50–100 정도가 기본 데이터 접근 비용만으로 들어갑니다.
똑똑한 선택이라고 생각한 건? Brand24나 Hootsuite 같은 SaaS 툴에 비용을 내는 것. 이들은 월 $49–99 정도이며, 공유 클라우드 IP를 사용하기 때문에 Reddit의 봇 탐지기에 쉽게 잡히게 됩니다.
내가 빠진 루프
- 수동 스크롤 → 번아웃
- 클라우드 툴 → 계정 차단
- 공식 API → 비싸다
그래서 주말에 화가 나서 직접 코딩했습니다.
“로컬‑퍼스트” 접근법
Reddit Toolbox라는 무료 데스크톱 앱을 만들었습니다 – Windows / Mac에서 직접 실행됩니다.
핵심 인사이트: 일반 사용자처럼 보이면 Reddit이 차단하지 않습니다. 클라우드 스크래퍼는 데이터센터 IP를 사용해 쉽게 탐지됩니다. 집 Wi‑Fi? 전혀 문제 없습니다. 스크래퍼를 로컬에서 실행하면 SaaS 비용과 차단을 피할 수 있습니다.
기능
1. API 없이 대량 스크래핑
서브레딧 이름을 입력하고 “scrape” 버튼을 누르면 300개 이상의 포스트를 몇 초 안에 가져옵니다. API 키도, 쿼터도 필요 없습니다. 순수 HTML 파싱만 합니다.
2. “경쟁 낮은” 필터
“최대 댓글 수: 5” 로 설정하면 아직 답변이 없는 질문형 스레드를 즉시 확인할 수 있습니다. 마케팅에 최적 – 당신의 답변이 눈에 띕니다.
3. 사용자 추출
해당 포스트에서 가장 활발한 사용자, 그들의 카르마, 계정 연령, 자주 방문하는 다른 서브레딧 등을 수집합니다. DM을 보내기 전에 대상 청중을 프로파일링하기에 좋습니다.
4. 구글 인덱스 확인기
답변하기 전에 스레드 제목을 복사해 site:reddit.com "스레드 제목" 으로 구글 검색합니다. 아직 구글에 색인되지 않았다면 건너뛰세요 – 검색 트래픽이 전혀 없는 스레드에 댓글을 달아도 의미가 없습니다.
5. AI‑보조 답변
게으른 기분이라면 본인의 OpenAI/Claude API 키를 넣어 답변 초안을 자동 생성하게 할 수 있습니다. 출력물을 직접 편집하지만, 빈 텍스트 박스에 머무는 것보다 훨씬 편합니다.
전체가 로컬에서 실행되므로 Reddit은 일반 가정용 IP가 인간 수준의 속도로 요청하는 것으로 인식합니다. 전환 이후 차단 0회.
가격 – 무료 티어 & 프리미엄
- 무료 티어: 하루 15회 스크래핑 – 대부분의 사용자에게 충분합니다.
- 프리미엄: 무제한 스크래핑 + CSV 내보내기 기능을 제공하는 월 $9.
저는 저를 위해 만들었지만, “모든 것에 구독을 해야 한다”는 모델에 지친 사람이라면 누구에게든 공유합니다.
다운로드: https://www.wappkit.com/reddit-toolbox
“로컬‑퍼스트” 움직임
이 프로젝트를 통해 클라우드 툴에 과도하게 지불하고 있었다는 사실을 깨달았습니다.
| 클라우드 툴 | 로컬 대안 |
|---|---|
| Notion ($10/월) | Obsidian (무료, 로컬 마크다운) |
| Airtable ($20/월) | SQLite (파일 하나) |
| Brand24 ($99/월) | Reddit Toolbox (무료) |
클라우드 툴이 나쁘다고는 말하지 않지만, 데이터 수집·분석에서는 로컬에서 실행하는 것이 더 빠르고, 저렴하며, 안전합니다.
앞으로의 계획
- 현재 Windows / Mac 데스크톱 전용.
- 일부 사용자는 브라우저 확장판을 원하고 있습니다 – 멋지긴 하지만 위험도가 더 높아집니다 (Reddit이 더 쉽게 탐지할 수 있음).
Reddit 마케팅을 하거나 연구용 데이터가 필요하다면 한 번 써보세요. 버그를 발견했거나 기능 아이디어가 있으면 댓글에 남겨 주세요 – 현재 적극적으로 개발 중입니다.
행복한 스크래핑 되세요! 🚀