본문 바로가기

AWS/Data

(2)
[NEW] Amazon SQS launches the Extended Client Library for Python to support payloads up to 2GB 해당글은 AWS의 What's New 에 공개되어 있는 내용을 기반으로 작성하였으며 작성일 기준보다 최신사항이 업데이트 경우도 있습니다. 이 경우는 Docs 참고를 하시는편이 좋습니다(작성일 2024-03-04)_ Amazon SQS launches the Extended Client Library for Python to support payloads up to 2GB 해당 글을 기준으로 테스트 한 내용이 작성되어있습니다. Amazon Simple Queue Service(SQS)는 대용량 메시지 페이로드를 보내고 받을 수 있는 오픈 소스 Python용 확장 클라이언트 라이브러리를 출시합니다. Amazon SQS는 마이크로서비스, 분산 시스템, 서버리스 애 aws.amazon.com](https://a..
[Snowflake <> AWS] Iceberg 테이블 연동성과 관련한 특이사항 해당내용은 2024-02-28 일자 기준으로 작성된 업데이트 기능사항 기준으로 작성된 문서임으로 AWS상의 기능 변경 및 Snowflake 의 기능변경으로 인하여 내용이 상이해질수 있습니다. 최근 스노우플레이크 ICEBERG TABLE 테스트를 하면서 알게된 내용들 정리해서 공유드립니다. 먼저 ICEBERG에 대한 간단한 소개를 드리자면 object storage(S3)에 아래의 4가지 기능을 통해서 보다 쉽고 간편하게 데이터를 관리할 수 있도록 설계된 오픈소스입니다. ACID (atomicity, consistency, isolation, durability) transactions Schema evolution Hidden partitioning Table snapshots 이외 에도 ICEBERG,..