Notice
Recent Posts
Recent Comments
Link
| 일 | 월 | 화 | 수 | 목 | 금 | 토 |
|---|---|---|---|---|---|---|
| 1 | ||||||
| 2 | 3 | 4 | 5 | 6 | 7 | 8 |
| 9 | 10 | 11 | 12 | 13 | 14 | 15 |
| 16 | 17 | 18 | 19 | 20 | 21 | 22 |
| 23 | 24 | 25 | 26 | 27 | 28 | 29 |
| 30 |
Tags
- Spring
- S3
- boto3
- namenode
- MySQL
- database
- ES6
- EventScheduler
- 구현
- hdfs
- Algorithm
- SQL
- priorityqueue
- Transaction
- BFS
- datanode
- JPA
- ACID
- 시뮬레이션
- 프로그래머스
- MVC
- 우선순위큐
- procedure
- wrapper class
- BIT연산
- greedy
- 백준
- Parquet
- spark
- bigdata
Archives
- Today
- Total
목록bigdata (1)
IT 개발일지
[빅데이터 파이프라인 마스터] Week5 - S3 소개
S3 : Simple Storage Service의 약자로, 파일 서버의 역할을 하는 서비스 S3는 왜 필요할까? 1. 데이터 저장 역할- 대규모의 데이터를 저장, 관리, retrieve하기 위한 역할- 다양한 형식의 데이터(파일, 이미지, 비디오, 문서 등)을 bucket이란 공간에 저장- S3를 사용함으로써 application 및 서비스가 대규모의 데이터에 쉽게 접근, 사용, 가공할 수 있다.- 또한 전 세계 어디서나 데이터를 손쉽게 업로드 및 다운로드 할 수 있다.2. 트래픽 증가에 대한 확장성- 일반적인 파일 서버는 트래픽이 증가함에 따라서 장비를 증설해야 한다.- 하지만 S3를 이용하게 되면 이를 AWS에서 대행해주어 트래픽에 따른 시스템적인 문제를 걱정할 필요가 없어진다.3. 접근 제어 설..
카테고리 없음
2024. 6. 18. 23:24