.NET برای Apache Spark 1.0 API های NET با کارایی بالا را برای Apache Spark از جمله Spark SQL، Spark Streaming و MLlib ارائه می کند.
آپاچی اسپارک
مایکروسافت و دیتابریکس می گویند موتور پرس و جو بردار نوشته شده در C++ بار کاری Apache Spark را تا ۲۰ برابر تسریع می کند.
نسخه اصلی بعدی چارچوب پردازش داده در حافظه از توابع شتابدهنده GPU توسط Nvidia RAPIDS پشتیبانی میکند.
Databricks برای مقابله با انتقادات رقبا و مقابله با Apache Iceberg و همچنین محصولات انبار داده Snowflake، Starburst، Dremio، Google Cloud، AWS، Oracle و HPE، دلتا لیک را منبعدهی باز میکند.
Apache Spark سریع، انعطافپذیر و سازگار با توسعهدهندگان، پلتفرم پیشرو برای SQL در مقیاس بزرگ، پردازش دستهای، پردازش جریانی و یادگیری ماشین است.
پلت فرم داده دریاچه و خانه دریاچه میزبان ابر مایکروسافت ابزارهای علوم داده جدیدی را به دست می آورد و مجموعه داده های Power BI را برای Python، R و SparkSQL باز می کند.
سرویس یکپارچهسازی دادههای بدون سرور در ابر آمازون همچنین از APIهای داخلی Pandas و فرمتهای Apache Hudi، Apache Iceberg و Delta Lake پشتیبانی میکند.