MapleStory Finger Point
SnowFlake on Azure Cloud Architecture
·
Data Engineering/Governance
안녕하세요,제 분야인 클라우드가 아닌, 데이터를 다루다 보니공부하면서 조금 기초적인 내용을 다룰 예정입니다 :) 대용량 정형 / 비정형 데이터를 통합적으로 관리하고 분석하기 위해 파이프라인 아키텍처를 구축하는데요,현업에서 사용되는 Azure Cloud + SnowFlake 아키텍처 및 기능, 데이터 처리 방식을 알아보겠습니다. 01. Data pipe line Architecture✅ 전체 흐름 개요 [Data Source] → [Azure Data Factory / Synapse] → [Azure Blob Storage] → [SnowFlake] → [Power BI / AI 분석] ✅ 주요 구성 요소Azure Data Factory / Synapse AnalyticsETL/ELT 파이프라인을 구성..
[AWS CVPN] 안전하게 VPC 내부에 접근하는 방법은?
·
Cloud Architect/AWS
안녕하세요,AWS Console에서도 작업이 가능하지만,부득이하게 VPC 내부 자원에 직접 접근하여 작업을 해야 할 경우원격으로 안전하게 접속할 수 있는 방법을 알아보도록 하겠습니다. 01. AWS Client VPN Endpoint란?클라우드 환경이 아니여도, VPN을 사용하여 외부에서 내부로 원격 접근을 하는 경우가 많습니다.하지만 VPN도 어찌되었든 외부와 내부를 연결하는 통로이기 때문에 보안적인 리스크가 존재합니다. AWS Client VPN Endpoint의 장점은 AWS의 IAM 및 ACM 인증서 기반 보안이 결합된 VPN 솔루션입니다 !TLS 기반 암호화 : OpenVPN 프로토콜인증 방식 : 인증서 기반, Active Directory, SAML 지원확장성 : 수천 명의 Client 동시 ..
Chapter 3. Docker의 심해 속으로.
·
Cloud Architect/Docker
안녕하세요, 지난 챕터에서 컨테이너의 정의와 Docker에 대해서 간략하게 다뤄보았는데요번에는 Docker에 대해 조금 더 Detail 하게 들여다 보려고 합니다. 01. Container 격리 기술Docker container를 띄워놓고 안의 구조를 들여다 보았습니다.여기서 'bash' 명령어는 linux 안으로 들어간다는 의미입니다. (보통 linux의 Shell을 bash shell 이라고 하죠?!)즉, 컨테이너를 실행 시킨 후 바로 접근한다는 의미.docker run -it --rm --name=ssunghwan ubuntu:14.04 /bin/bash container 내부에 들어온 후에 'ls' 명령어를 쳤을 때 아래와 같이 출력이 된다. 우리가 흔히 아는 linux system의 디렉토리 구..
[AWS CloudFront] AWS에서 CDN서비스 사용하기.
·
Cloud Architect/AWS
01. What is a CDN?CloudFront를 알아보기에 앞서, CDN이 무엇인지 알고 CF에 대해서 알아보도록 하자. 💁‍♂️ CDN 이란?Content Delivery Network라고 불리며, 전 세계에 분산된 서버 네트워크를 통해 콘텐츠를 빠르고 안정적으로사용자에게 전달하는 기술을 의미한다. 특히나 웹사이트의 이미지나 JavaScript, CSS 파일 등과 같은 정적 콘텐츠의 로딩 속도를 개선하고트래픽을 효율적으로 분산시키는데 핵심적인 역할을 합니다. 💁‍♂️ CDN의 주 기능 1. 캐싱 (Cashing)콘텐츠를 사용자와 가까운 엣지 서버에 저장하여 빠르게 전달.자주 요청되는 파일은 원본 서버가 아닌 CDN 서버에서 제공된다.2. 지리적 분산전 세계 여러 지역에 서버가 위치해 있어 사..