데이터적재2 [생활 속 금융 기술 #22] 카드사 DW 데이터는 어떻게 만들어질까?｜ETL·ELT·CDC의 차이와 데이터 적재 과정 우리가 신용카드를 사용하면 카드사에는 다양한 거래 데이터가 발생합니다.편의점에서 15,000원을 결제하거나 온라인 쇼핑몰에서 80,000원을 결제하면 관련 승인 정보가 생성됩니다. 이후 거래의 매입, 취소, 청구 등 업무가 진행되면서 새로운 정보가 만들어지거나 기존 정보의 상태가 변경됩니다.그렇다면 카드사는 이러한 데이터를 어떻게 활용할까요?예를 들어 카드사 마케팅 담당자가 다음과 같은 자료를 요청했다고 가정해 보겠습니다."지난달 고객들이 가장 많이 이용한 업종은 무엇인가요?""이번 달 승인 금액은 지난달보다 얼마나 증가했나요?""카드 상품별 매입 실적은 어떻게 달라졌나요?"이러한 질문에 답하려면 여러 업무 시스템에 흩어져 있는 데이터를 모으고, 기준을 통일하고, 분석할 수 있는 형태로 가공해야 합니다... 2026. 10. 27. [생활 속 금융 기술 #15] DW 배치 작업이 실패하면 어떻게 될까?｜데이터 적재 장애 원인 7가지와 복구 절차 "오늘 아침 카드 이용 실적 보고서가 조회되지 않습니다.""어제 승인 데이터가 아직 DW에 반영되지 않았습니다.""매일 새벽 정상적으로 끝나던 배치 작업이 오늘은 실패했습니다."금융회사에서 데이터웨어하우스(DW)를 운영하다 보면 이런 상황이 발생할 수 있습니다.현업 부서에서는 평소처럼 보고서를 조회했는데 전날 데이터가 보이지 않거나, 일부 통계가 갱신되지 않은 것을 발견합니다.하지만 문제의 원인은 보고서 화면이 아닐 수도 있습니다.새벽에 실행되는 데이터 수집 작업이 실패했거나, 데이터 변환 과정에서 오류가 발생했거나, 앞선 작업이 완료되지 않아 다음 작업이 시작되지 못했을 가능성이 있습니다.이처럼 정해진 시간에 데이터를 처리하는 작업을 일반적으로 배치(Batch) 작업이라고 합니다.특히 신용카드회사처럼 .. 2026. 10. 25. 이전 1 다음
