Confidential · Data Platform
Canonical Entity Warehouse
여러 프로젝트의 사람·계정·조직을 하나의 정본으로 통합하는 비공개 데이터 웨어하우스 — 중복 제거와 soft-delete 거버넌스 위에서 각 프로젝트가 자기 슬라이스만 읽는다. (규모·대상 비공개)
개인기여도 100%
★핵심 지표: 정본 데이터 플랫폼 · 다중소스 dedup · soft-delete 거버넌스 · cron 분산 수집
엔지니어링 역할
BackendInfra
Confidential · Data Platform
Canonical Entity Warehouse
VIS
#Backend#Python#System#Personal
개요
여러 소스에서 들어오는 컨택·엔티티를 하나의 canonical Postgres 정본으로 합치는 로컬-퍼스트 ETL 웨어하우스. 다중 소스 어댑터, 이메일·도메인 기준 중복 제거, hard-delete를 막는 DB 가드(soft-delete only), 주기적 cron으로 여러 머신에 분산 재수집한다. UI 없이 데이터 파이프라인만. (실제 규모·대상 비공개)
핵심 포인트
- 다중 소스 → 하나의 canonical 정본 (이메일·도메인 dedup)
- hard-delete 차단 DB 가드 — soft-delete only 거버넌스
- cron 기반 다중 머신 분산 재수집 (ETL 어댑터)
- UI 없는 순수 데이터 파이프라인 (Postgres/Supabase)
타임라인
역할: 단독 설계·운영 (대상 마스킹)
기여도: 100%
협업: 개인
기술 스택
</>Postgres canonical store · 다중소스 ETL · dedup · soft-delete 가드 · cron 분산
PostgreSQLSupabasePythonBashDockercron