Big Data (빅데이터란)? (tistory.com) 글을 참조하기 바란다. Big Data (빅데이터란)? 2017년 5월 영국의 “the economist”에 따르면 “세계에서 가장 가치 있는 자원은 이상 기름이 아니라 Data이다.” 라는 선언을 했고 이 선언은 2021년 현재에도 막강한 힘을 가지고 있다. 기업에게 있 chicode.tistory.com 이전 시간 빅데이터에 대한 설명에 이어서 Amazon 에서 사용하는 bigdata에 대해 알아보도록 하자. 다음의 그림은 AWS에서 배포한(데이터 웨어하우스 | Redshift | Amazon Web Services) redshif에 대한 이미지이다. 아마존에서는 amazon redshift라고 하는 서비스를 통해 데이터 웨어하우징(DW)을 제..

이전 시간은 컨테이너에 대해 알아보았다. 이제 이어서 그 컨테이너를 통해 활용할 수 있는 docker에 대해 알아보는 시간을 가져보자. 왠 귀여운 돌고래가있다. 이 돌고래의 이름은 도커이며 2013년에 탄생하였다. 컨테이너 생성, 저장, 관리 및 실행을 지원하는 '경량 컨테이너 가상화 플랫폼'이며 자동화된 구축, 테스트 및 배포 파이프 라인과 쉽게 통합될 수 있다. 도커의 장점 1. 기본적으로 도커는 휴대용(이동식) 런타임 애플리케이션 환경이다. 2. 애플리케이션 및 해당 종속성을 이미지라는 불변의 단일 패키지화 시킬 수 있다. 3. 컨테이너 이미지를 생성한 후에는 도커가 지원하는 모든 곳으로 이동이 가능하다. 4.서로 다른 종속성과 라이브러리를 가진 여러 애플리케이션을 동시에 실행할 수 있다. 5. 이..

선박, 건설현장, 영화 등 한 번쯤은 봤을 법한 컨테이너 박스이다. 현실에서는 운송업이나 건설업에서 사용하는 사물이나 사람을 보관할 수 있는 장소로써 쓰인다. 기본적으로 과거에는 대형 화물을 선박으로 옮겼고 이것은 고 비용이 들었던 방법이다. 18C부터 컨테이너 라는 개념이 활성화 되기는 했지만 1958년 국제 운송 컨테이너가 개발되며 표준화가 완료되었다. 이 시점 이후로 컨테이너는 일정하며 예측가능한 장점이 생겼다. 기차와 트럭, 배 등으로 손 쉽게 옮길 수 있게 되었고 이것은 "추상화를 사용해 민첩성을 높이는 훌륭한 예시"가 되었다. 뜬금없는지만 왜 이런 컨테이너에 대해 주저리 주저리 설명하고 있을까? 바로 AWS에서도 이런 컨테이너를 사용하기 때문이다. 컴퓨팅 세계에서의 컨테이너의 정의는 "모든 컴..

공유 파일 시스템(Storage) 네트워크를 만든 가장 기본적인 이유는 멀리 떨어진 곳에서 자유롭게 정보를 공유하는 것이었다. 이와같이 instance에도 '네트워크'를 통해 공유를 할 수 있는데 어떤 기술과 종류로써 공유를 하는지 알아보도록 하자. * 여기서 말하는 네트워크는 인터넷 뿐 아니라 LAN, WAN등을 포함한 기기와 기기간 연결이 되어 서로 통신이 된다. 라는 큰 범위로 이야기 한다. 먼저 이전시간에 배운 EBS는 원칙적으로 1개당 1개의 인스턴스에만 연결이 된다. 즉 외장하드를 여기저기에 동시에 사용할 수 없는것과 같은 개념이다.(여러개를 연결할 수 있긴 하지만 일반적인 환경이 아닌 아주 특이한 케이스에서만 가능하다.) S3도 공유 스토리지 용으로 사용할 수 는 있다. 하지만 이상적이지는 ..

이전시간에 이어 이제는 instance가 사용하는 storage에 대해 알아보도록 하자. 인스턴스가 단독으로 사용하는 블록 레벨 스토리지는 2가지가 있는데 EBS(Elastic Block Store), instance storage 서비스 이다. 각각의 서비스가 어떤 상황에서 사용되는지 알아보자. EBS(Elastic Block Store)는 기본적으로 사용자가 만드는 어플리케이션이 블록 레벨 스토리지가 필요할때 사용된다.. 보통 이것은 SSD나 HDD에서 제공을 해 준다. 특히 instance storage와 달리 EBS는 휘발성이 아닌 지속적인 저장이 가능하다. 데이터 볼륨을 백업할 수 있는 스넵샷 기능을 제공하는데 여기서 말하는 스넵샷은 WM웨어같은 프로그렘에서 사용하는 개념과는 조금 다르다. 완전..

Elastic 이라는 단어는 어떤 이미지를 가지고 있을까? 찰랑찰랑한 샴푸? 유연하다? 탄력적이다? 등등의 이미지를 가지고 있다. Amazon에서도 이와 같은 컴퓨터 클라우드 환경을 구축하고 배포하기 위해 Amazon EC2(Elastic Compute Cloud)라는 서비스를 만들었다. 이 서비스는 일정한 규모와 크기로 사용하기 위해, 즉 트레픽의 변동이 그다지 크지 않은 일정한 환경에서 운영하는 에플리케이션을 실행하기 위한 컴퓨팅 환경을 제공하는 기능이다. 이런 EC2서비스는 온프레미스 환경(현실)에서 서버로 구현했던 '모든 것'을 EC2에서 구현 할 수 있으며 EC2에서 만들어지는 '서버'도 마찬가지로 구현할 수 있다. 즉 EC2서비스는 가상의 서버를 만들고 관리를 하기 위해 만드는 서비스 이름이다..