FileFeed: 새로운 클라이언트마다 CSV 파서를 작성하는 것을 중단하세요

Source: Dev.to

FileFeed란 무엇인가요?

FileFeed는 자동 파일 수집을 위한 파일 처리 플랫폼입니다. 파일은 SFTP, 이메일, API, 혹은 클라우드 스토리지를 통해 들어옵니다. FileFeed는 파일을 검증하고, 컬럼을 여러분의 스키마에 매핑하며, 변환을 수행하고, 정제된 JSON을 여러분의 제품에 전달합니다.

• 하나의 스키마.
• 모든 클라이언트가 그 스키마에 매핑됩니다.
• 맞춤 파서가 전혀 필요 없습니다.

작동 방식

1. 클라이언트가 파일을 SFTP에 업로드합니다.
2. FileFeed가 파이프라인을 감지합니다(클라이언트 + 폴더 매치).
3. 스키마 검증이 실행됩니다.
4. 필드 매핑이 적용됩니다.
5. 변환이 수행됩니다.
6. 웹훅이 여러분의 시스템에 전송됩니다.
7. API를 통해 정제된 JSON을 가져옵니다.

각 클라이언트는 자체 SFTP 자격 증명, 격리된 스토리지, 그리고 특정 필드 매핑이 적용된 파이프라인을 갖습니다. 스키마는 한 번 정의하면 되며, FileFeed가 모든 것을 그 스키마에 맞게 정규화합니다.

기본 제공 기능

• 멀티채널 수집: SFTP, 이메일, API, 클라우드 스토리지.
• 스키마 검증: 시스템에 도달하기 전에 잘못된 데이터를 차단합니다.
• 필드 매핑: Worker_ID → employee_id, 클라이언트별, 코드 없이.
• 내장 변환: toLowerCase, trim, formatPhoneNumber 등.
• 웹훅 전달: HMAC 서명, 파일 수신, 처리 완료, 혹은 실패 시 전송.
• 아웃바운드 전달: API, SFTP, 클라우드 스토리지, 이메일을 통해 정제된 데이터를 다시 푸시.
• 대시보드: 모든 파이프라인 실행 내역 확인, 원본 및 처리된 파일 다운로드.

대체되는 기존 방식

FileFeed가 나오기 전에는 팀들이 Couchdrop 같은 도구를 사용해 SFTP 파일 라우팅을 했습니다. 이러한 도구는 파일 전송은 처리하지만 파일 처리 자체는 하지 못했습니다. 엔지니어들은 여전히 파싱, 매핑, 검증 코드를 직접 작성해야 했습니다.

FileFeed는 수집부터 전달까지 전체 파이프라인을 처리합니다.

대상 고객

기업 고객이 데이터 파일을 전송하는 B2B SaaS 기업—HR‑tech, 핀테크, 헬스케어, 공급망 등. 엔지니어들이 제품 개발 대신 파일 파서를 작성하고 있다면, FileFeed가 그 레이어를 대신합니다.

사용해 보기

지금 바로 확인해 보세요.