Legacy
기존에는 당연히 mysql, postgresql과 같이 관계형 데이터베이스가 주를 이루었었습니다. 하지만 요즘 같은 시대만 해도 넷플릭스의 추천시스템을 위한 사용자의 로그데이터, 다양한 음성데이터를 쌓아야 합니다. 이를 S3와 같은데에다 다 쌓을 순 있어도 매우 비 효율적입니다. 그리고 이를 관계형 데이터베이스에 넣자니, 데이터 형식(스키마)의 변동이 잦아서, 예측이 불가능하다는 한계가 있습니다.
Current
DakeLake는 아무 데이터를 의미합니다. 요즘에는 데이터가 매우 중요한 자산이기 때문에, 이러한 데이터와 데이터베이스는 매우 중요한 서비스가 됩니다. 그래서 기존에 ETL보다는 그냥 다 로드 한다음에 정제하는 ELT가 뜨고 있는 이유입니다.
다음시간부터 본격적으로 DynamoDB ( NoSQL )을 알아보겠습니다.
'DevOps > AWS Architecture' 카테고리의 다른 글
[ DevOps ] - (DynamoDB) DynamoDB 구성하기 (0) | 2022.07.20 |
---|---|
[ DevOps ] - (DynamoDB) DynamoDB 개요와 Index 구성 (0) | 2022.07.20 |
[ DevOps ] - (AWS Lambda) Lambda Step Functions 구현 (0) | 2022.07.20 |
[ DevOps ] - (AWS Lambda) Step Functions 권한 설정 (0) | 2022.07.20 |
[ DevOps ] - (AWS Lambda) EFS 파일시스템 생성 + 연동 (0) | 2022.07.20 |