d5f7f24e0a
## Clinic Registry - data/clinic-registry/clinic_registry_working.csv — 91개 병원 채널 마스터 DB - data/clinic-registry/INFINITH_Outbound_List.csv — BD팀 아웃바운드 리스트 (17컬럼) - data/clinic-registry/update_csv.py — 안전 CSV 업데이트 스크립트 (빈 필드만 채움) - data/clinic-registry/extract_place_ids.py — 네이버 플레이스 ID 추출기 - scripts/import-registry.ts — CSV → Supabase clinic_registry 테이블 임포트 - supabase/migrations/20260406_clinic_registry.sql — clinic_registry 테이블 스키마 ## Pipeline P0 Bug Fixes (전수 감사 후) - fix(collect-channel-data): 강남언니 rating 0-10 스케일 오변환 제거 - 기존: rating ≤ 5이면 ×2 → 4.8/10을 9.6/10으로 잘못 변환 - 수정: Firecrawl 프롬프트가 이미 0-10 지시 → rawValue 직접 신뢰 - fix(generate-report): Perplexity 단일 fetch → fetchWithRetry 교체 - maxRetries:2, backoffMs:[5000,15000], timeoutMs:90s - 기존: 타임아웃/429 시 리포트 생성 전체 실패 - 수정: 자동 재시도로 일시적 API 오류 극복 ## Docs - docs/PIPELINE_IMPROVEMENT_PLAN.md — Sprint 0/1/2 완료 표시 + 전수 감사 결과 추가 - docs/REGISTRY_FUNCTIONAL_SPECS.md, DB_SCHEMA_V3.md 외 기획 문서 다수 추가 ## New Components & Features - supabase/functions/generate-content-plan, adjust-strategy — 콘텐츠 플랜/전략 조정 - src/components/plan/EditEntryModal, StrategyAdjustmentSection — 플랜 편집 UI - supabase/functions/_shared/dataQuality, foundingYearExtractor, urlClassifier — 데이터 품질 유틸 Co-Authored-By: Claude Sonnet 4.6 <noreply@anthropic.com>
101 lines
3.7 KiB
TypeScript
101 lines
3.7 KiB
TypeScript
/**
|
||
* Founding Year Extraction Guard — Harness 2
|
||
*
|
||
* Regex-based founding year extraction to complement Gemini Vision.
|
||
* Acts as a fallback when the LLM misses patterns like "2004년개원 이래".
|
||
*
|
||
* Defense layers:
|
||
* 1. Gemini Vision (primary)
|
||
* 2. This module on scraped text (secondary)
|
||
* 3. generate-report post-processing on all channel_data text (tertiary)
|
||
*/
|
||
|
||
// ─── Patterns ───
|
||
|
||
/**
|
||
* Regex patterns for founding year detection.
|
||
* Each captures a numeric group that is either:
|
||
* - A 4-digit year (1950–currentYear)
|
||
* - A 1-2 digit number to subtract from currentYear
|
||
*/
|
||
const FOUNDING_PATTERNS: RegExp[] = [
|
||
// Direct year expressions
|
||
/(\d{4})년\s*개원/, // "2004년개원", "2004년 개원"
|
||
/(\d{4})년개원\s*이래/, // "2004년개원 이래" ← 그랜드 패턴
|
||
/개원\s*(\d{4})년/, // "개원 2004년"
|
||
/설립\s*(\d{4})년/, // "설립 2004년"
|
||
/(\d{4})년\s*설립/, // "2004년 설립"
|
||
/since\s*(\d{4})/i, // "SINCE 2004"
|
||
/established\s*(?:in\s*)?(\d{4})/i, // "Established in 2004"
|
||
/(\d{4})년\s*오픈/, // "2004년 오픈"
|
||
/(\d{4})년\s*개업/, // "2004년 개업"
|
||
/개원일?\s*:\s*(\d{4})/, // "개원: 2004", "개원일: 2004"
|
||
// Anniversary / relative year expressions
|
||
/(\d{1,2})주년/, // "22주년" → currentYear-22
|
||
/(\d{1,2})년\s*전통/, // "20년 전통" → currentYear-20
|
||
/(\d{1,2})년\s*동안/, // "22년 동안" → currentYear-22
|
||
/개원\s*(\d{1,2})주년/, // "개원 15주년" → currentYear-15
|
||
/(\d{1,2})년\s*역사/, // "20년 역사" → currentYear-20
|
||
];
|
||
|
||
// ─── Extraction Function ───
|
||
|
||
/**
|
||
* Extract founding year from arbitrary text.
|
||
* Returns a 4-digit year or null if no pattern matches.
|
||
*
|
||
* @param text - Any text (HTML markdown, scraped content, vision output)
|
||
* @param currentYear - For relative calculations (default: current year)
|
||
*/
|
||
export function extractFoundingYear(
|
||
text: string,
|
||
currentYear: number = new Date().getFullYear(),
|
||
): number | null {
|
||
for (const pattern of FOUNDING_PATTERNS) {
|
||
const match = text.match(pattern);
|
||
if (!match) continue;
|
||
|
||
const num = parseInt(match[1], 10);
|
||
|
||
// 4-digit: direct year
|
||
if (num >= 1950 && num <= currentYear) return num;
|
||
|
||
// 1-2 digit: years ago → subtract from currentYear
|
||
if (num >= 1 && num <= 80) return currentYear - num;
|
||
}
|
||
|
||
return null;
|
||
}
|
||
|
||
// ─── Test Corpus ───
|
||
|
||
export const FOUNDING_YEAR_TEST_CORPUS: ReadonlyArray<readonly [string, number | null]> = [
|
||
["2004년개원 이래 중국, 베트남 환자들이 찾아오고 있습니다", 2004],
|
||
["SINCE 2004", 2004],
|
||
["22주년 기념 이벤트", 2004], // 2026-22
|
||
["개원 15주년을 맞이하여", 2011], // 2026-15
|
||
["20년 전통의 성형외과", 2006], // 2026-20
|
||
["2005년 설립된 뷰성형외과", 2005],
|
||
["설립 2010년, 강남에 위치한", 2010],
|
||
["Established in 2003", 2003],
|
||
["2018년 오픈한 신규 클리닉", 2018],
|
||
["개원: 2015", 2015],
|
||
["아무 관련 없는 텍스트입니다", null],
|
||
["전화번호 02-1234-5678", null],
|
||
];
|
||
|
||
/**
|
||
* Self-test: validate all known patterns.
|
||
* Uses fixed currentYear=2026 for deterministic results.
|
||
*/
|
||
export function validateFoundingYearExtractor(): { pass: boolean; failures: string[] } {
|
||
const failures: string[] = [];
|
||
for (const [text, expected] of FOUNDING_YEAR_TEST_CORPUS) {
|
||
const result = extractFoundingYear(text, 2026);
|
||
if (result !== expected) {
|
||
failures.push(`"${text.slice(0, 30)}...": expected ${expected}, got ${result}`);
|
||
}
|
||
}
|
||
return { pass: failures.length === 0, failures };
|
||
}
|