파일에서 테이블로: Parquet, Iceberg, Delta Lake와 데이터 레이크하우스 | 최신 데이터 인프라 이해하기 시즌2 EP03
레이크에는 파일이 쌓여 있는데, 분석가는 어떻게 주문 테이블 이름으로 데이터를 조회할까요?
지난 6개월간의 키보드 광고 캠페인과 쇼핑몰 주문을 예로, 데이터 레이크의 세 가지 역할을 구분합니다. Parquet, ORC, Avro는 데이터를 담는 형식, Iceberg와 Delta Lake는 여러 파일을 테이블로 관리하는 형식, 카탈로그는 이름에서 테이블 정보를 찾아가는 연결입니다.
객체 저장소와 버킷부터 Hive ACID, Hive Metastore와 AWS Glue Data Catalog, DuckLake까지 같은 지도에서 살펴봅니다. 타임 트래블, 스키마 변경, 파티셔닝과 …
https://news.hada.io/geekcast/data-infra-s2-ep03
파일에서 테이블로: Parquet, Iceberg, Delta Lake와 데이터 레이크하우스 | 최신 데이터 인프라 이해하기 시즌2 EP03 레이크에는 파일이 쌓여 있는데, 분석가
GeekNews
@GeekNewsHadaGeekNews 공식 텔레그램 채널입니다. GeekNews 에 올라오는 주요 뉴스를 자동으로 전송합니다. 더 많은 뉴스를 위해서는 긱뉴스를 방문해 주세요. https://news.hada.io 긱뉴스 위클리 뉴스레터를 구독하시면 매주 월요일 아침에 이메일로 주요 뉴스를 받아보실수 있습니다. https://news.hada.io/weekly
2 425 підписників
Відкрити в Telegram