동영상 데이터 저장하는 방법에 대해 생각해봤어
https://www.itworld.co.kr/news/73658
빅 데이터의 열쇠 하둡 총정리 2 하둡 vs RDBMS 비용 분석
많은 사람들은 오픈소스 데이터 프레임워크인 하둡을 아주 방대한 양의 데이터 관리와 연관해 생각한다. 여기에는 물론 나름대로 합당한
www.itworld.co.kr
난 동영상 저장을 S3를 안쓰고 하둡을 사용하는 걸 생각해봤었거든!
그런데 더 찾아보니까 속도는 빨라질 수 있어도 가격 측면으로는 더 비싸질 수도 있을 것 같아… GCP에서 구현한다면 또 모르겠지만??
만약 우리가 틱톡처럼 유저들 모으고 추천 동영상도 제대로 제공할 생각이 있다면 나중에 확장하면 좋을듯..?!
https://sda1547.gitbook.io/data-engineering/hadoop/hdfs-s3
HDFS와 S3비교 - Data Engineering
연간 99.999999999%의 내구성 즉, 10,000년에 한 번씩 10,000,000개당 단일 객체 손실 가능성
sda1547.gitbook.io
더 찾아보니까 s3 ec2는 그대로 두고 emr만 추가로 적용해서 속도 개선하는 것 같더라고
https://aws.amazon.com/ko/about-aws/whats-new/2022/07/use-result-fragment-caching-emr-runtime-apache-spark-boost-query-performace-15x/
https://www.megazone.com/techblog_180711_automatic-scaling-in-amazon-emr/
지금은 이런 방법이 있을 수 있다! 정도로만 알아둬도 되지 않을까??
'👩💻 Web Programming > Idea' 카테고리의 다른 글
| 동그라미 원 숫자 기호 / 네모, 세모, 동그라미, 하트 기호 / 화살표 특수문자 모음 (0) | 2023.08.15 |
|---|---|
| [개발방법론] 폭포수 설계 (0) | 2021.05.08 |
| [WebRTC] 프로젝트 기획 (0) | 2021.04.29 |
| [WebRTC] WebRTC 개발 설계 (0) | 2021.04.22 |
| [APP] 애플 개발자 계정 - 개인? 공동? (0) | 2021.04.02 |
동영상 데이터 저장하는 방법에 대해 생각해봤어
https://www.itworld.co.kr/news/73658
빅 데이터의 열쇠 하둡 총정리 2 하둡 vs RDBMS 비용 분석
많은 사람들은 오픈소스 데이터 프레임워크인 하둡을 아주 방대한 양의 데이터 관리와 연관해 생각한다. 여기에는 물론 나름대로 합당한
www.itworld.co.kr
난 동영상 저장을 S3를 안쓰고 하둡을 사용하는 걸 생각해봤었거든!
그런데 더 찾아보니까 속도는 빨라질 수 있어도 가격 측면으로는 더 비싸질 수도 있을 것 같아… GCP에서 구현한다면 또 모르겠지만??
만약 우리가 틱톡처럼 유저들 모으고 추천 동영상도 제대로 제공할 생각이 있다면 나중에 확장하면 좋을듯..?!
https://sda1547.gitbook.io/data-engineering/hadoop/hdfs-s3
HDFS와 S3비교 - Data Engineering
연간 99.999999999%의 내구성 즉, 10,000년에 한 번씩 10,000,000개당 단일 객체 손실 가능성
sda1547.gitbook.io
더 찾아보니까 s3 ec2는 그대로 두고 emr만 추가로 적용해서 속도 개선하는 것 같더라고
https://aws.amazon.com/ko/about-aws/whats-new/2022/07/use-result-fragment-caching-emr-runtime-apache-spark-boost-query-performace-15x/
https://www.megazone.com/techblog_180711_automatic-scaling-in-amazon-emr/
지금은 이런 방법이 있을 수 있다! 정도로만 알아둬도 되지 않을까??
'👩💻 Web Programming > Idea' 카테고리의 다른 글
| 동그라미 원 숫자 기호 / 네모, 세모, 동그라미, 하트 기호 / 화살표 특수문자 모음 (0) | 2023.08.15 |
|---|---|
| [개발방법론] 폭포수 설계 (0) | 2021.05.08 |
| [WebRTC] 프로젝트 기획 (0) | 2021.04.29 |
| [WebRTC] WebRTC 개발 설계 (0) | 2021.04.22 |
| [APP] 애플 개발자 계정 - 개인? 공동? (0) | 2021.04.02 |
