AWS ادغام‌های zero-ETL بیشتری را به Amazon RedShift اضافه می‌کند

ادغام های جدید شامل به روز رسانی پایگاه های داده رابطه ای و غیر رابطه ای مانند Amazon Aurora PostgreSQL، Amazon DynamoDB و Amazon RDS برای MySQL است.

در ادامه تلاش‌های خود برای ETL صفر برای خدمات انبارداری داده، AWS در کنفرانس جاری re:Invent 2023، ادغام‌های جدید RedShift Amazon را با Amazon Aurora PostgreSQL، Amazon DynamoDB و Amazon RDS برای MySQL اعلام کرد.

شرکت‌ها معمولاً از extract, transform, load (ETL) برای ادغام داده‌ها از چندین منبع در یک فروشگاه داده منفرد استفاده می‌کنند تا در  انبار داده بارگیری شوند. تجزیه و تحلیل.

با این حال، بیشتر مهندسان داده ادعا می‌کنند که تبدیل داده‌ها از متفاوت منابع ممکن است یک کار دشوار و وقت گیر باشد زیرا این فرآیند شامل مراحلی مانند تمیز کردن، فیلتر کردن، تغییر شکل و خلاصه کردن داده های خام است.

به گفته AWS، مسئله دیگر هزینه اضافی نگهداری تیم هایی است که خطوط لوله داده را برای اجرای تجزیه و تحلیل آماده می کنند.

در مقابل، به گفته این شرکت، ادغام‌های جدید صفر-ETL، نیاز به انجام ETL بین Aurora PostgreSQL، DynamoDB، RDS برای MySQL و RedShift را از بین می‌برند، زیرا داده‌های تراکنش در این پایگاه‌های داده می‌توانند تقریباً بلافاصله در RedShift تکرار شوند. برای اجرای تجزیه و تحلیل آماده است.

در حال حاضر، هر سه ادغام در پیش نمایش هستند.

سال گذشته، AWS دو قابلیت جدید را معرفی کرد:ادغام Amazon Aurora zero-ETL با Amazon Redshift و Amazon Redshift برای Apache Spark.

علاوه بر این، ارائه‌دهنده خدمات ابری، ادغام Amazon DynamoDB zero-ETL با سرویس جستجوی باز آمازون را به طور کلی در دسترس قرار داد.

AWS گفت:

این ادغام به متخصصان داده در سراسر شرکت‌ها اجازه می‌دهد تا با تکثیر خودکار و تبدیل آن‌ها بدون کد سفارشی یا زیرساخت، جستجوی روی داده‌های DynamoDB خود انجام دهند.

ادغام Amazon DynamoDB zero-ETL با Amazon OpenSearch Service می‌تواند در هر منطقه AWS که در حال حاضر OpenSearch Ingestion در دسترس است، استفاده شود.