Graph 공부하는 학생

MinIO의 두번째 배포방법으로 단일 노드 다중 저장소 방식이 있습니다. Single-Node Multi-Drive 이렇게 부르고, 줄여서 SNMD라고도 합니다. 서버는 한대로 해서, 단일 노드가 되는 것입니다. 다중 저장소라면 스토리지를 4개를 생성할 수도 있지만, 하나의 스토리지를 파티션으로 나눠서 마운트해줘도 됩니다. 저는 이 파티션으로 나누는 방식을 사용할 것입니다. 저장소(Drive)의 개수는 4의 배수로 하는 것을 권장하네요. 처음에는 노드라는 개념이 잘 이해가 가질 않았습니다. 그래서 그냥 '노드 = 서버'라고 생각하고 진행했습니다. 즉, SNMD는 서버 1대에 저장소 여러개로 생각하고 진행해보겠습니다.  1. 서버 생성 및 스토리지 추가이 작업은 이전 글과 동일하므로 생략합니다.  2. 스..

요새 MinIO라는 오픈소스를 공부하고 있습니다. 가장 좋은 것은 docs, 공식 문서를 잘 참고하는 것이지만, 이상하게 공식 문서도 어렵게 느껴질 때가 많습니다. 혼자 공식문서를 여러 사이트를 짜깁기하여 나름대로 구성해본 MinIO 구축 일대기를 정리해보려고 합니다. MinIO는 이전에도 소개한 것처럼, 사설 object storage를 구축하는 오픈소스 플랫폼입니다. 사설(private)라는 말처럼, 온프레미스 환경에서도 활용할 수 있습니다. 온프레미스에서 이걸로 스토리지를 만들고, 추가로 다른 클라우드의 공인 아이피를 활용해서 repo를 추가해주면, 온프레미스-클라우드 간 스토리지를 연동해볼 수도 있는 멋진 도구입니다. 그걸 일종의 Hybrid cloud라고도 부르는 것 같네요. 물론, 다양한 CS..

SAM(Serverless Application Model) 쌤, 줄임말입니다. 서버리스 애플리케이션 모델이라고 합니다. 서버리스 애플리케이션을 개발하고 배포하는 프레임워크입니다. 모든 configuration은 YAML 코드를 사용합니다. 단순한 SAM YAML 파일에서 복잡한 CloudFormation 생성합니다. 이 클라우드 포메이션(outputs, mappings, parameters, resources 등)에서 무엇이든 지원합니다.SAM은 람다 함수를 배포하는 CodeDeploy 사용할 수 있습니다. 그 외에도, 람다, API GW, DynamoDB를 로컬(localloy) 실행하도록 돕습니다. 원래 목적은 서버리스 애플리케이션을 사용하고 이를 통해 디버그하고 빠르게 배포하는 AWS 클라우드 서..

EC2Elastic Compute 라는 이름입니다. 소위 클라우드의 서버를 의미합니다. Bigdata에서 EC2는, 세가지 특성이 있습니다. 1. On demand, Spot & Reserved instances사용 방식에 따라 세가지 특징이 있습니다.Spot: 손실을 감안하고, 저 비용으로 사용합니다. 머신러닝 등에서 체크포인트 방식으로 활용하면 이 방식이 좋습니다.Reserved: 장기간 클러스터, 데이터베이스를, 최소 1년이상 사용할 때 저렴하게 쓸 수 있습니다.On demand: 그 외에 모든 워크로드에 해당합니다. (돈이 가장 많이 듭니다.) 2. Auto Scaling(자동확장)EMR의 레버리지 등으로 활용합니다.자동화된 DynamoDB, ASG 등의 사례가 있습니다. 3. EC2 is beh..

NCUC 판교 소모임 참여 후기네이버클라우드 사용자 모임에 참여했습니다. 발표 세션과 네트워킹 세션으로 나누어 진행했고, 특별히 이번에는 대학생 분들의 발표로 시작했습니다. 앞으로 멋진 클라우드 사용자로 활약하실 꿈나무의 이야기가 궁금했네요.  판교 소모임 소개네이버클라우드 마스터 이수진, 윤서율님의 소개로 시작했습니다. 메인 진행자는 이수진 마스터님입니다. 중요한 점은 이 모임은 User의 행사이며 해당 클라우드 사에서 주관하지 않는다는 것입니다. 장소나 간식, 선물을 지원받을 수 있지만, 본질적으로 사용자가 만들어나가는 행사라는 점을 강조해주셨습니다. 사용자들이 만드는 행사이므로, 네이버클라우드의 입장을 대변하지 않으며, 좀 더 자유롭게 논의할 수 있는 자리라는 점이 좋다고 생각합니다.  지난 피드백..

GSLB와 DNS 이중화GSLB 이론을 간단히 배우고 DNS를 이중화하는 방법을 배웠습니다. 단일 클라우드 이중화보다 2개의 데이터센터(멀티 클라우드 포함)으로 이론을 학습해보고, 실습은 kubernetes를 사용해서 재미있는 게임을 배포해보았습니다. 처음에는 콘솔로 만들어보고, 다음은 terraform이라는 IaC 도구를 통해 만들어볼 수 있었습니다. 네이버클라우드 역삼역 교육장에서 12시부터 5시까지 진행했습니다. 중간에 재미있는 현장에서 네트워크 이야기를 들어보면서 질의응답도 잘 해주셨습니다. 추가로, 모든 이론과 실습 자료는 아래의 블로그를 바탕으로 수행했습니다.https://brunch.co.kr/@topasvga/3938  이론: GSLB와 DNS 이야기이론 부분은 이 주제의 핵심인 DNS와 ..

MinIO는 쿠버네티스로도 운용할 수 있습니다. 그러나 쿠버네티스는 설치하고 관리하는 과정이 조금 까다롭습니다. 그래서 네이버클라우드에서 제공하는 Ncloud Kubernetes Service(NKS)를 활용해보기로 합니다.   NKS 세팅처음 NKS의 클러스터를 생성하려면, 아래와 같이 Subnet을 만들어야 합니다.  네트워크는 Private 이므로, Private 서브넷을 하나 만들고, LB는 Public/Private 각각 하나씩 만들어서 총 세개의 서브넷을 만들어 보겠습니다.   추가로 아웃바운드를 활성화하기 위해, 안내 메시지에 따라 NAT GW를 만들어야 합니다. 그러면, NAT를 위해서 서브넷을 하나 더 만들었습니다.  NAT GW를 만들고, Route Table(Private)에 아래처럼..

MinIO라는 도구를 처음으로 사용했습니다. 다양한 CSP사와 호환이 되고, 특히 AWS의 S3 호환이 아주 잘 된다고 합니다. 느낌이 오지 않아서, 직접 써봐야 알 수 있겠다고 생각했습니다. 총 세가지 환경을 두고 설치해보고 간단히 스토리지에 파일 업로드와 다운로드를 수행했습니다. Windows 환경 설치MinIO Object Storage for Windows — MinIO Object Storage for Windows공식 문서를 참고합니다. 먼저, 윈도우는 CMD 혹은 PowerShell 환경을 지원합니다. 저는 간단히 CMD를 사용했습니다. 1. 웹에서, 제시된 URL을 넣고 엔터를 누릅니다. 이 방법이 가장 간단합니다. 2. CLI 방식을 선호한다면, CMD 에서 curl -o 명령어로 내려받..

이번주는 각자가 찾아온 AI 뉴스레터에 대해 논의하고자 모였습니다.    각자가 정성스럽게 가져온 AI 뉴스레터를 1분씩 돌아가보며 설명하는 시간을 가졌습니다. 멋진 3DGS 미니 특강도 들을 수 있어 아주 유익한 시간이었습니다. 유용한 사이트들을 모아두었습니다. 자주 찾아서 읽어봐야겠네요. 1. The Trimodal Nature of Tech Compensation Revisited(https://newsletter.pragmaticengineer.com/p/trimodal-nature-of-tech-compensation)간단한 소개 : 기사 제목에서 확인할 수 있듯, 기술에 대한 보상 체계를 분석한 글입니다. 2. 제너럴리스트 의료 인공지능을 위한 첫번째 시도, Med-PaLM M(https://..

글을 쓰다보니, 왜 그 자리에서 익히고 가라는지 이해가 갑니다.  이 자리에서 이해하고 가시기 바랍니다. 집에 가니, 다시 하나씩 실험해보는 것이 쉽지 않았습니다. 사람은, 그런 것이네요. 마치 복습을 싫어하는 아이처럼, 하나씩 다시 해보고 있습니다.    https://brunch.co.kr/@topasvga/3806 네트워크 > 서버 > 애플리케이션" data-og-host="brunch.co.kr" data-og-source-url="https://brunch.co.kr/@topasvga/3806" data-og-url="https://brunch.co.kr/@topasvga/3806" data-og-image="https://scrap.kakaocdn.net/dn/ify6H/hyWzylnmah/k..