6시간 전 · software

내 블로그 게시물의 복제본을 온라인에서 찾았다 — 모든 표절된 버전을 추적하기 위해 만든 툴

자신이 쓴 기사에서 한 문단을 구글링해 본 적 있나요… …그리고 그 문단이 마치 자신이 쓴 것처럼 5개의 다른 웹사이트에 게시된 것을 발견한 적 있나요? 저에게도 그런 일이 있었습니다. 한 번이 아니라 여러 번. Aft...

1일 전 · software

누구든지 php + Userscript를 이용한 중앙 집중식 mturk 히트 캐처에 대해 아시나요?

!Forem 로고 https://media2.dev.to/dynamic/image/width=65,height=,fit=scale-down,gravity=auto,format=auto/https%3A%2F%2Fdev-to-uploads.s3.amazonaws.com%2Fuploads%...

2일 전 · software

Scrapy 프레임워크에서 Residential Proxies를 위한 고급 구성 및 성능 튜닝

Scrapy를 사용하여 대규모, 고빈도 데이터 스크래핑을 할 때, 단순한 proxy 설정만으로는 금방 한계에 부딪힙니다. 무작위 IP rotation과 고정 delays는 …

2일 전 · software

자동화 테스트에서 봇 감지에 지쳐서, 이 4줄 Python 해결책을 만들었습니다

커버 이미지: 자동화 테스트에서 bot detection에 지쳐서, 이 4줄 Python fix를 작성했습니다 https://media2.dev.to/dynamic/image/width=1000,height=420,...

3일 전 · ai

2026년 스크래핑 예측: agentic workflow 및 AI

스크래핑을 위한 AI 에이전트는 대형 언어 모델(LLM)을 기반으로 하는 자율 시스템으로, 외부 도구를 활용해 계획하고 실행하며 적응할 수 있습니다.