· software
DOMParser와 Serverless를 활용한 탄력적인 메타 태그 분석기 구축
SEO 도구 만들기: CORS 및 HTML 파싱 함정 극복하기 SEO 도구를 만드는 것은 흔히 간단해 보이지만, 현대 웹 스크래핑의 두 가지 장벽에 부딪히기 전까지는 그렇지 않습니다.
-
- · software
왜 오늘 scraping은 겉보기에 비해 더 복잡한가?
오랫동안 스크래핑은 빠른 해결책으로 여겨졌습니다: 데이터가 필요하면 스크립트를 작성하고, 정보를 추출한 뒤 바로 진행합니다. 많은…
- · software
나는 “dead” LinkedIn 채용에 지원하느라 시간을 낭비하고 있다는 걸 깨달았다 — 그래서 작은 해결책을 만들었다
문제 몇 주 동안 나는 단지 구직에 서툴다고 생각했다. 매일 LinkedIn에 수많은 직무에 지원했지만… 아무것도 얻지 못했다. 내가 눈치챈 패턴들...
- · software
Chrome 쿠키 암호화 역공학 (AI 에이전트 인증을 위해)
문제 – 로그인 화면 웹사이트와 상호작용하는 AI 에이전트를 만든 적이 있다면, 이 벽에 부딪히게 됩니다: 로그인 화면. 에이전트는 다음을 수행해야 합니다: - LinkedIn 확인 …
- · software
잡보드 스크래핑: API 엔드포인트 & 치트 시트
LinkedIn 게스트 엔드포인트 URL: https://www.linkedin.com/jobs-guest/jobs/api/seeMoreJobPostings/search 메서드: GET 중요 헤더 http User-Agent: Mozilla/5.0 ....
- · software
Reddit Keyword Monitoring System을 만들었습니다. 실제로 효과가 있는 방법은 이것입니다.
Reddit를 “전략적으로” 3개월 동안 탐색하면서 한 가지를 깨달았다: 수동 모니터링은 규모를 확장할 수 없다. 나는 완벽한 스레드를 찾고 있었는데—사람들이 문자 그대로 ...
- · software
domharvest-playwright 내부: 프로덕션 레디 웹 스크래핑 도구를 설계한 방법
Core Architecture인 domharvest-playwright는 세 가지 주요 구성 요소를 중심으로 구축됩니다: - DOMHarvester Class – 주요 오케스트레이터 - Browser Management – Playwright...
- · software
domharvest-playwright 구축: 복잡함보다 단순함을 선택한 이유
소개: 저는 단순함과 신뢰성을 중시하는 오픈소스 DOM 추출 도구인 domharvest‑playwright를 만들고 있습니다. 이것은 이를 문서화하는 첫 번째 포스트입니다.
- · ai
왜 Markdown이 더 나은 AI의 비밀인가
AI에 대한 웹 스크래핑의 현 상황은 깨졌습니다. 10년 동안 웹 추출은 CSS selectors와 DOM structures를 둘러싼 전쟁이었습니다. 우리는 부서지기 쉬운 scrapers를 작성했습니다.
- · software
스케일링 헤드리스 브라우저: 컨텍스트 관리 vs. 인스턴스
1. 소개: 리소스 월 모든 browser‑automation 프로젝트의 라이프사이클에서—end‑to‑end testing, web scraping, 또는 synthetic monitoring을 위해—t...
- · software
WhatsApp Web 자동화 Chrome 확장 프로그램 만들기 (Bulk, Schedule, Filters, Logs)
도움이 되는 경우 - 옵트인한 연락처를 위한 캠페인/공지용 대량 메시징 — 그 사람은 되지 마세요. - “나중에 보낼게요”가 변명이 되지 않을 때 예약 메시지…
- · software
Python으로 정부 입찰 인텔리전스 시스템 구축: 실제 사례에서 얻은 교훈
정부 입찰 데이터: 개발자를 위한 가이드 정부 입찰 https://bidsathi.com/ 은(는) 인도에서 이용 가능한 가장 큰 구조화된 데이터 소스 중 하나입니다. 매일...