004. [AWS] 저장소(Storage)

by

01. Storage 이해하기

(01) Storage 종류

  • 파일 스토리지
    우리가 알고있는 일반적인 스토리지 이다. 폴더 내의 파일들이 위치하며, 제일 최상단의 스토리지 부터 시작된다.
  • 블록 스토리지
    블록 스토리지는 동일한 데이터 청크(데이터의 크기) 단위로 데이터를 분할하여, 디스크 볼륨에 저장된다. 일반적으로 서버에서 많이 사용되며, RAID 와 같은 시스템에 최적화 되어 있다.
    가상머신은 블록 스토리지를 기반으로 운영된다.
  • Object 스토리지
    오브젝트 스토리지는 파일 스토리지와 유사하게 파일형태로 저장되나, 폴더 구조를 지니지 않고, 각각을 나타내는 주소값으로 파일명과 맵핑되어 있다.

(02) File Storage

  • Amazon EFS
    확장 가능한 네트워크 파일 시스템
  • Amazon FSx for Windows File Server
    윈도우 서버에 구성된 파일 스토리지

(03) Block Storage

  • Amazon EBS
    사용하기 쉽고, 고성능의 블록 스토리지 (EC2가 사용하고 있음)

(04) Object Storage

  • Amazon S3
    많은 데이터들을 저장하고 조회할 수 있으며, 세계 어디에라도 쉽게 찾을 수 있는 서버

(05) Backup

  • AWS Backup
    AWS 에서 동작하는 서비스들을 자동으로 백업하고 중앙에서 관리할 수 있도록 하는 서비스

(06) Data Transfer

  • AWS Storage Gateway
    On-premises 환경에서 클라우드 스토리지에 접근할수 있도록 기능을 제공하는 서비스
  • AWS Data Sync
    AWS의 데이터 전송 송도가 최대 10배 빠른 서비스
    • On Premise 데이터를 가져오는데도 사용한다.

02. AWS S3

01) 개념 이해하기

(01) AWS S3란 ?

  • AWS S3 는 객체 스토리지 서비스를 이야기 한다.
  • S3 는 무제한 저장소를 지니고 있다.
  • 저장된 데이터는 공개 저장소 / 개인 저장소로 구별할 수 있다.
  • AWS대부분의 데이터는 S3에 저장한다.
  • 99.9999999999% 의 안정성을 보인다. (100만 분의 1 의 확률 )

(02) S3 살펴보기

  • 보안 설정(ACL, 버킷 정책, 엑스스 접근 정책)에 따라, 버킷은 외부에 공개할 수 있으며, 접근 사용자등을 제한할 수 있다.
  • 버전 관리가 가능하다.
  • 로그 관리가 되고 있다.
  • S3 는 일반적으로 특정 지역에 한해 사용된다 하지만, 이름은 글로벌 단위로 단일해야한다.

(03) 고 가용성과 내구성

  • 고 가용성 : 언제든지 데이터에 대해 접근할수 있는 것을 이야기 한다. (99.99 % )
  • 내구성 : 데이터가 손실되지 않고 지속적으로 남아 있는 것을 이야기 한다. (11 9)

(04) S3 서비스 종류

S3는 기본적으로 성능에 따라 다른 비용을 지불하게 만들어져 있다. 즉, 저장용의 데이터는 저렴한 저장소로, 자주 액세스 하는 데이터는 비싼 저장소에 넣는다면, 운영 효율성과 비용 절감을 할 수 있다.

  • S3 Standard
    기본적으로 많이 사용하는 스토리지이다.
    • 자주 데이터에 엑세스 하는 경우 사용
    • 여러 가용 영역에서 운영
  • s3 Standard -infrequent / S3 One Zone -infrequent
    가끔 접속하는 데이터의 경우 지정한다.
    • 자주 엑세스 하지 않지만, 빠른 속도로 접근해야하는 경우 사용된다.
    • 둘간의 차이는 zone 을 몇개 쓰는지만 관련되어 있다.
  • S3 Glacier / S3 Glacier Deep Archive
    거의 접근하지 않는 데이터들을 여기에 지정한다.
    • 장기적인 데이터 보관을 위해 주로 사용한다.
  • S3 intelligent Tiering
    S3 사용 패턴에 따라 자동으로 데이터를 옮겨 비용을 절감하도록 한다.
    • 머신러닝을 통해 데이터들을 저렴한 비용의 저장소로 옮긴다.
    • 여러 가용영역에서 운영
  • S3 Outposts
    On-premise 에서 오브젝트 스토리지를 제공한다.
    • 단일 스토리지 클래스만 제공한다.

(05) S3 세부 비교

(06) S3 Glacier

  • 데이터를 오랜기간 보관하는데 사용하는 용도
  • 데이터를 조회 하기 위해서는 하루 혹은 2일의 시간이 필요할 수 있음
  • 요금 : 한달에 1TB 당 1달러
  • Query in place 가 가능하다. ( 데이터를 내 플랫폼에 저장하지 않아도 조회할 수 있다. )
  • 검색 옵션
    • standard : 저비용
    • 벌크 검색 : 많은 데이터를 검색하는데 사용하기에 좋은 (중간 비용)
    • expedited : 급한 경우 더 비싸지만 조회하는데 사용할 수 있다. ( 1 ~ 5분 사이)
  • Deep Archive 의 경우, 실제로 비용은 더 저렴하고 대신 12시간에서 48시간의 조회 시간이 필요하다.

(07) S3 가 사용되는 예시

  1. Website 의 static 파일의 대한 처리 ( Cloud Front 를 활용하여 CDN 기능을 이용하면 짧은 지연시간의 서비스가 가능하다. )
  2. 데이터 장기 보관을 위해 ( Glacia 활용)
  3. 데이터 분석을 위해 (Athena 와 같이 대용량 데이터 분석을 위한 데이터로 사용할 수 있다. )
  4. 모바일 앱의 데이터 보관을 위해

02) S3 사용하기

(01) S3 생성 옵션 살펴보기

기본적인 이름 지정 (이름은 Unique 해야 한다)

버킷 관련 소유권 설정

  • ACL을 통해 외부와 공유할지 말지 / 외부에서 데이터를 올리게 할지 말지를 결정하는 단계

공용 저장소 여부 설정

버킷 버전 관리 설정

  • 버전 관리를 설정하면, 파일을 삭제하거나 수정하는 경우 복구등을 할 수 있다.
  • CodeCommit 과 같은 Git 도구를 사용한다면 Enable 해야 사용할 수 있다.

[데이터 암호화 방식]

[객체 삭제 방지 조건]

03. Amazon EFS

01) 개념 이해하기

(01) Amazon EFS 란 ?

  • NFS 를 제공하는 완전히 관리되는 저장 시스템을 이야기 한다.
  • 여러대의 EC2 가 연결되어 공유할 수 있도록 사용할 수 있다.
  • 가용성이 높고 동시성이 높다.
  • EFS 를 사용하는 기기 장애에 대한 보호 기능을 내장하고 있다.
  • 데이터를 기본적으로 암호화 하여 저장하고 있다.

(02) EFS 의 스토리지 클래스

  • 스탠다드
  • Infrequent Access
    (접근하는 주기가 7 , 14, 30, 60일 등이 넘어가는 경우 자동으로 넘길 수 도 있다.)

04. AWS Storage Gateway

01) 개념 이해하기

(01) AWS Storage Gateway 란 ?

  • On-premise 환경에서 AWS의 데이터를 접근하기 위해 사용하는 서비스를 이야기한다.
  • 기본적으로 3가지 방식을 지원하고 있다.
    • File Gateway
      S3의 SMB 나 NFS 인터페이스를 제공한다.
    • Tape Gateway
      테이프에 데이터를 백업할수 있도록 제공한다.
    • Volume Gateway
      iSCSI 방식으로 블록 스토리지를 제공한다. 이를 통해, 로컬의 서버들의 하드디스크로 활용할 수 있으며, 모든 데이터는 S3에 저장하지만, 자주 접근하는 데이터의 경우, 로컬에도 동시 저장하여 속도를 보장한다.

05. EC2 Storage

01) 개념 이해하기

(01) EC2 Storage 란 ?

EC2 의 경우 여러가지 연결 방식을 지니고 있다. 일반적으로, EC2 의 경우 컴퓨트를 담당하는 서버와 데이터를 저장 하는 공간이 별개로 분리되어 운영 되지만, 필요에 따라 우리가 사용하는 컴퓨터 처럼 직접 마운트 되어 사용되는 경우도 있다.

아래는, EC2 의 연결되는 방식의 예시이다.

  • EBS : 일반적인 블록 스토리지로 외부에 별개로 전용 데이터 블록이 있어 여기서 데이터를 쓸수 있다.
    • 데이터 인스턴스가 동작하지 않아도 보관이 가능하다.
    • 하나의 인스턴스 / 같은 가용영역에서 운영된다.
    • 빠르게 데이터를 주고 받을 수 있으며, 장기적인 데이터 운영도 가능하다.
  • Instance Store : 렉 상에 직접 저장소가 붙어서 사용되는 경우이다.
    • 호스트에 물리적으로 연결하는 방식이다.
    • EC2 가 종료되면 바로 데이터가 사라진다.
    • 네트워크 연결이 필요없어 데이터 속도가 매우 빠르다.
  • EFS : Elastic File System 으로, 별개의 스토리지를 사용하지만, 다른 EC2 나 기기들과 데이터를 공유하며 사용한다.
    • 리눅스 파일 시스템에서만 사용이 가능하다.
    • 전체 리전 / 많은 가용영역에서 운영이 가능하다.
    • EBS 보다 비용이 비싼 편이다.
    • 주로, 공유 폴더 구조로 운영이 필요할 때 사용하는 편이다.

06. AWS Backup

01) 개념 이해하기

(01) AWS Backup란 ?

  • AWS 의 사용되는 데이터들을 백업하는데 유용하게 사용한다.

07. Snow Family

01) 개념 이해하기

(01) AWS Snow Family

  • 데이터를 마이그레이션을 진행할때 ,물리적으로 데이터를 이관하는 방식을 이야기 한다.

[snow 유형]

  • snowcone : 8TB 까지 데이터 운송이 가능한 장치
  • snowball : 페타바이트 가량의 데이터 전송을 위한 장치 (큰 장비)
  • snowmobil : 멀티 페타바이트나 엑사 바이트를 옮기기 위한 방식 (컨테이너 사용)

710 thoughts on “004. [AWS] 저장소(Storage)”

  2. Pingback: brand cialis trial pack
  3. Pingback: minocycline pharmacy
  4. Pingback: online pharmacy india oxycodone
  5. Pingback: nebenwirkungen tadalafil
  6. Pingback: pharmacy price comparison viagra
  7. Pingback: viagra for men for sale
  8. Pingback: sildenafil 100mg australia
  10. Pingback: best price
  11. Pingback: tadalafil samples
  12. Pingback: sulfamethoxazole and trimethoprim tablets usp
  13. Pingback: furosemide verpakking
  14. Pingback: trulicity vs ozempic vs rybelsus
  15. Pingback: semaglutide pcos
  16. Pingback: fluoxetine benefits

  18. Элвис Пресли, безусловно, один из наиболее влиятельных музыкантов в истории. Родившийся в 1935 году, он стал иконой рок-н-ролла благодаря своему харизматичному стилю и неповторимому голосу. Его лучшие песни, такие как “Can’t Help Falling in Love”, “Suspicious Minds” и “Jailhouse Rock”, стали классикой жанра и продолжают восхищать поклонников по всему миру. Пресли также известен своими выдающимися выступлениями и актёрским талантом, что сделало его легендой не только в музыке, но и в кинематографе. Его наследие остается живым и вдохновляет новые поколения артистов. Скачать музыку 2024 года и слушать онлайн бесплатно mp3.

    응답
  19. Pingback: first day on escitalopram
  20. Pingback: can you take amoxicillin if you're allergic to penicillin
  33. Pingback: cephalexin for cats
  34. Pingback: bactrim over the counter cvs
  73. Pingback: how long does buspar take to work
  74. Pingback: celexa nausea
  176. Pingback: tadalafil dose for erectile dysfunction
  177. Pingback: ivermectin cream canada cost
  178. Pingback: ivermectin 4 tablets price
  179. Pingback: slevotra vardenafil
  180. Pingback: tadalafil 20 mg e20

  193. Do you mind if I quote a couple of your posts as long as I provide credit and
    sources back to your website? My website is in the exact same area of interest as
    yours and my users would certainly benefit from some of the information you provide here.
    Please let me know if this ok with you. Regards!

    Here is my page :: Tracey

    응답

  199. I’ve been browsing online more than 2 hours today, yet I never found any interesting article like
    yours. It is pretty worth enough for me. Personally,
    if all website owners and bloggers made good content as you did, the internet will be
    much more useful than ever before.

    Website under
    maintenance vector

    응답
  200. Pingback: animal porn
  201. Pingback: animal porn
  202. Pingback: ananın amı

  204. I think that is among the most important info for me.
    And i’m satisfied reading your article. But wanna observation on few general issues,
    The web site style is ideal, the articles is in reality great :
    D. Just right job, cheers

    my web site – webpage

    응답

  205. Good day! This is my first visit to your blog! We
    are a collection of volunteers and starting a new initiative in a community in the same niche.
    Your blog provided us valuable information to work on. You have done a wonderful job!

    Feel free to visit my blog – Seo Hawk

    응답
  207. Pingback: child porn
  228. Pingback: augmentin and breastfeeding
  232. Pingback: amoxicillin and ibuprofen
  235. Pingback: max dose gabapentin
  241. Pingback: what is flagyl for
  247. Pingback: can you drink while taking cephalexin
  250. Pingback: nolvadex for sale
  256. Pingback: doxycycline 100 mg
  314. Pingback: porn
  316. Pingback: Cocuk pornosu

  324. Hmm it seems like your website ate my first comment (it was super long) so I guess
    I’ll just sum it up what I submitted and say, I’m thoroughly
    enjoying your blog. I as well am an aspiring blog blogger but I’m still
    new to the whole thing. Do you have any tips for rookie blog writers?
    I’d certainly appreciate it.

    my blog post :: webpage

    응답

  325. May I simply say what a relief to find a person that really knows what they’re talking about on the web.
    You actually understand how to bring a problem to light and make it
    important. A lot more people really need to check this out and understand this side of your story.
    I was surprised that you are not more popular because you certainly possess the gift.

    Here is my web-site web design affordable seo company india

    응답
  327. Pingback: child porn
  328. Pingback: child porn
  330. Pingback: porn
  331. Pingback: child porn

  368. Sur notre site web, vous pouvez decouvrir toutes les informations concernant les medias en Afrique. Nous couvrons une variete de sujets, traitant des dernieres nouvelles dans les industries de la television, de la radio et de la presse ecrite, aux evolutions dans les medias numeriques et les reseaux sociaux https://africanmedia.africa/centrafrique-5-melodies-pour-la-paix.html. Notre equipe de journalistes chevronnes et de correspondants locaux s’emploie sans relache pour vous offrir des actualites precises et a jour.

    Nous accordons une attention particuliere aux innovations et aux tendances qui changent le paysage mediatique africain. Que ce soit l’essor des plateformes de streaming, la presence croissante des blogs et des podcasts, ou l’effet des politiques gouvernementales sur la liberte de la presse, vous trouverez des analyses approfondies et des reportages exclusifs sur notre site. Nous mettons egalement en lumiere les initiatives locales et les talents emergents qui aident a faconner l’avenir des medias sur le continent.

    En plus des actualites, notre site propose des interviews avec des personnalites influentes du milieu des medias et des experts, ainsi que des articles d’opinion rediges par des specialistes. Nous invitons nos lecteurs a participer activement en publiant des commentaires et en echangeant leurs points de vue. Venez nous voir des aujourd’hui pour rester informe et investi avec les dynamiques passionnantes du monde des medias en Afrique.

    응답

  413. I loved as much as youll receive carried out right here The sketch is attractive your authored material stylish nonetheless you command get bought an nervousness over that you wish be delivering the following unwell unquestionably come more formerly again as exactly the same nearly a lot often inside case you shield this hike

    응답

  434. Срочно нужны деньги? ALL-CREDIT.RU предлагает где взять деньги с плохой кредитной историей и просрочками . Удобное онлайн-оформление и высокий процент одобрения. Независимо от вашей кредитной истории, деньги будут на вашей карте в кратчайшие сроки. Попробуйте!

    응답

  496. hello from Seo hawk, there and thank you for your information ? I?ve definitely picked up anything new from right here. I did however expertise some technical points using this web site, as I experienced to reload the site many times previous to I could get it to load correctly. I had been wondering if your web hosting is OK? Not that I’m complaining, but slow loading instances times will often affect your placement in google and could damage your high quality score if ads and marketing with Adwords. Well I am adding this RSS to my email and can look out for much more of your respective interesting content. Ensure that you update this again soon.. website https://www.provenexpert.com/semson1/?mode=preview

    응답

  498. Когда нужна срочная продажа автомобиля, на помощь приходит услуга выкупа авто срочно. На tvoy-auto.ru мы предлагаем быструю и честную оценку вашего транспортного средства с последующим выкупом на выгодных для вас условиях. Это идеальный вариант для тех, кто хочет избежать долгих и утомительных поисков покупателя.

    Процесс выкупа авто срочно занимает минимум времени и усилий с вашей стороны. Все, что вам нужно сделать — оставить заявку на сайте, после чего наш специалист оперативно свяжется с вами для оценки автомобиля. Мы гарантируем, что предложим цену, соответствующую рыночной стоимости, и обеспечим вам моментальную выплату после завершения сделки.

    Наши клиенты ценят прозрачность и оперативность процесса, что позволяет быстро решать финансовые вопросы без лишней суеты. Выберите выкуп авто срочно на tvoy-auto.ru и убедитесь в высоком уровне нашего сервиса.

    응답

  500. Портфолио дизайнера интерьера mudryakova.ru

    По теме дизайнер квартир в спб Вы на верном пути. Чтобы получить консультацию дизайнера, необходимо заполнить заявку на онлайн портале mudryakova.ru или позвонить по номеру телефона +7(812)408-00-07. Мы расположены по адресу: г. Санкт-Петербург, ул. Мебельная, д. 49/92. Режим работы с пн по пт с 9:00 до 19:00. Фото наших проектов можно посмотреть на отмеченном сайте, также локально. Работаем как под ключ, также оказываем отдельные услуги.

    응답
  518. Pingback: fuck

  522. Нужно срочно найти займ, но банки отказывают из-за плохой кредитной истории? Не волнуйтесь, канал https://t.me/s/zaim_bez_otkaza_srochno готов помочь! Здесь публикуются списки МФО, которые реально выдают срочные займы на карту без отказа, начиная с 18 лет. Узнайте, как получить деньги в кратчайшие сроки и улучшить свое финансовое положение. Подписывайтесь на канал, чтобы всегда быть в курсе актуальных предложений и советов от экспертов!

    응답

  526. Вам нужно ворота иркутск мы Вам поможем. Оформляйте заявку на онлайн ресурсе vorota-38.ru или звоните по номеру телефона 8(950)111-68-77 прямо сегодня. У нас осуществляется бесплатный замер опытными мастерами, работаем без посредников, а соответственно без ваших доплат. Даётся гарантия на материалы 5 лет.

    응답

  530. Eligibility Ages Eligible for Study: 5 Years to 17 Years Genders Eligible for Study: Both Accepts Healthy Volunteers: No Sampling Method: Non-Probability Sample Study PopulationPatients aged 5 to 17 diagnosed with Autism Spectrum Disorder will be enrolled.
    Some pharmacies that sell meijer glucophage pills from this online portal
    Armour appears to be grandfathered in by the FDA, since it was around before 1938 when the FDA was created.

    응답

  536. If early HIV infection is suspected, your provider can test directly for the virus, using a test called “PCR” or a “4th generation” HIV test that looks for the antibody and the virus at the same time , as well as doing the standard antibody test to determine whether HIV is present in the blood.
    a recommendation from someone you trust before you buy any how quickly does prednisone work for sinusitis at the same prices and discounts?
    Journal of Neuroimmunology, 102: 26-31.

    응답
  546. Pingback: child porn

  547. Наши услуги: чистка бассейнов или мытье витражей, химчистка ковров, чистка бытовой техники, чистка бассейнов, уборка различных территорий, уборка наледи зимой, полировка полов и многие другие. Узнайте все обстоятельства у нашего менеджера по вышеуказанному телефону или оформите обратную связь. Мы находимся по адресу: г. Иркутск, ул. Советская, д. 115 Г.

    응답