MapleStory Finger Point
Chapter 5. Docker HA Proxy
·
Cloud Architect/Docker
안녕하세요 :)컨테이너 환경이든, 온프레미스 환경이든인프라 운영에 가장 중요한 부하분산 테스팅을 해볼 예정입니다. 01. HA Proxy 환경 생성먼저, 웹서버 및 HA Proxy 컨테이너에서 사용할 docker network를 생성해보자. 📌Web server 생성부하분산 테스팅을 위해 앞에 LB를 생성하기 이전에, 테스팅용 웹서버를 컨테이너로 생성하자.docker run -d --name=ssunghwan-web01 --net=ssunghwan-proxy -h web01 dbgurum/haproxy:echodocker run -d --name=ssunghwan-web02 --net=ssunghwan-proxy -h web02 dbgurum/haproxy:echodocker run -d --name..
SnowFlake Data Flow Analysis
·
Data Engineering/Governance
안녕하세요,저번 시간에는 SnowFlake on Azure Cloud에 대한 아키텍처를 간단히 알아보는 시간이었습니다. 아키텍처는 현업에서 어떻게 사용할것인지 목적성에 따라 많이 달라지는데요,제가 포스팅 할 내용은 "데이터 분석 플랫폼 구축" 아키텍처 입니다. 01. 현재 아키텍처의 목적성📌 데이터 분석 플랫폼 구축오늘 소개할 아키텍처와 가장 유사한 다이어그램이 있어서 예시로 가져왔습니다. ✅ 현재 아키텍처의 목적성 (데이터 분석 및 BI 시각화 중심) : 기업 데이터 분석 플랫폼에서 흔하게 사용중.SnowFlake를 Data warehouse로 사용, Power BI로 시각화 구조운영 + 분석 이중 목적VM에서 웹앱 운영, SQL DB로 트랜잭션 관리, 동시에 Data Factory / Databri..
Chapter 4. Docker Network
·
Cloud Architect/Docker
안녕하세요, 주말에 인사 드립니다 :)쉬면서도 할껀 해야죠! 오늘은 도커 컨테이너의 기본적인 네트워크 구성 방식에 대해서 알아보겠습니다.네트워크 엔지니어 였던 만큼, 개인적으로 인프라에선 네트워크가 가장 중요하다고 생각합니다.네트워크 구성이 되지 않는다면 최종적인 서비스 구현 자체가 안되기 때문이죠~ 01. 기본 네트워크 구성도커 컨테이너도 마찬가지로, 리눅스 기반 네트워킹을 그대로 가져와서 사용하고 있습니다. 📌 리눅스 브리지 : 하드웨어 네트워크 스위치 처럼 작동하는 커널 모듈.도커도 docker0 라고 하는 브릿지 네트워크를 사용하고 있다.OSI 2layer에서 사용하는 MAC Address를 이용한 Bridge Service.veth pair라고 하며 가상 인터페이스의 쌍이라고 불린다. (Ho..
SnowFlake on Azure Cloud Architecture
·
Data Engineering/Governance
안녕하세요,제 분야인 클라우드가 아닌, 데이터를 다루다 보니공부하면서 조금 기초적인 내용을 다룰 예정입니다 :) 대용량 정형 / 비정형 데이터를 통합적으로 관리하고 분석하기 위해 파이프라인 아키텍처를 구축하는데요,현업에서 사용되는 Azure Cloud + SnowFlake 아키텍처 및 기능, 데이터 처리 방식을 알아보겠습니다. 01. Data pipe line Architecture✅ 전체 흐름 개요 [Data Source] → [Azure Data Factory / Synapse] → [Azure Blob Storage] → [SnowFlake] → [Power BI / AI 분석] ✅ 주요 구성 요소Azure Data Factory / Synapse AnalyticsETL/ELT 파이프라인을 구성..