안녕하세요,저번 시간에는 SnowFlake on Azure Cloud에 대한 아키텍처를 간단히 알아보는 시간이었습니다. 아키텍처는 현업에서 어떻게 사용할것인지 목적성에 따라 많이 달라지는데요,제가 포스팅 할 내용은 "데이터 분석 플랫폼 구축" 아키텍처 입니다. 01. 현재 아키텍처의 목적성📌 데이터 분석 플랫폼 구축오늘 소개할 아키텍처와 가장 유사한 다이어그램이 있어서 예시로 가져왔습니다. ✅ 현재 아키텍처의 목적성 (데이터 분석 및 BI 시각화 중심) : 기업 데이터 분석 플랫폼에서 흔하게 사용중.SnowFlake를 Data warehouse로 사용, Power BI로 시각화 구조운영 + 분석 이중 목적VM에서 웹앱 운영, SQL DB로 트랜잭션 관리, 동시에 Data Factory / Databri..

안녕하세요,제 분야인 클라우드가 아닌, 데이터를 다루다 보니공부하면서 조금 기초적인 내용을 다룰 예정입니다 :) 대용량 정형 / 비정형 데이터를 통합적으로 관리하고 분석하기 위해 파이프라인 아키텍처를 구축하는데요,현업에서 사용되는 Azure Cloud + SnowFlake 아키텍처 및 기능, 데이터 처리 방식을 알아보겠습니다. 01. Data pipe line Architecture✅ 전체 흐름 개요 [Data Source] → [Azure Data Factory / Synapse] → [Azure Blob Storage] → [SnowFlake] → [Power BI / AI 분석] ✅ 주요 구성 요소Azure Data Factory / Synapse AnalyticsETL/ELT 파이프라인을 구성..