۲۳ خرداد ۱۴۰۴

Techboy

اخبار و اطلاعات روز تکنولوژی

Databricks تنگناهای AI را با طراح جریان دریاچه هدف قرار می دهد

ابزار NO-Code ETL با ترکیب یک دستیار تولید کننده هوش مصنوعی برای ایجاد خط لوله و کاتالوگ وحدت برای حاکمیت کار می کند.

ابزار NO-Code ETL با ترکیب یک دستیار تولید کننده هوش مصنوعی برای ایجاد خط لوله و کاتالوگ وحدت برای حاکمیت کار می کند.

Databricks یک ابزار جدید مدیریت داده بدون کد را نشان می دهد ، که توسط یک دستیار AI مولد ، در داده های در حال انجام خود + اجلاس AI ، که به منظور کمک به شرکت ها طراحی شده است ، طراحی شده است تا بطری های مهندسی داده ها را از بین ببرند ، و به نام های Lakeflow Designer ، ابزاری را طراحی می کند ، Transforms Data Data-Code (Emposter Dataines). به مهندسان داده هایی که همیشه مشغول هستند ، بنابراین سدی برای تسریع در پروژه های هوش مصنوعی یا استفاده از موارد ، گفت

در حالی که شرکت ها از ابزارهای کم کد یا بدون کد برای تحلیلگران داده استفاده می کنند تا بار خود را برای مهندسان داده ها محدود کنند ، این ابزارها فاقد حاکمیت و مقیاس پذیری هستند ، Aslam گفت ، با بیان اینکه طراح دریاچه برای کاهش این چالش ها طراحی شده است.

“طراح دریاچه به یک مشکل کلیدی مدیریت داده ها پرداخته است: تنگناهای مهندسی داده ها با ابزارهای قطع شده در مورد مصرف داده ها ، آماده سازی ، پاکسازی و ارکستراسیون ، حرکت AI را از بین می برند.” “طراح Lakeflow با قرار دادن قدرت یک ابزار بدون کد در دست تحلیلگران ، ضمن اینکه آن را ایمن نگه می دارد ، درها را باز می کند.”

ni به نام طراح Lakeflow “Canva of Etl”-توسعه فوری ، بصری ، AI-به کمک خطوط لوله داده-با این حال در زیر کاپوت ، این جرقه sql در مقیاس ماشین ، توسط کاتالوگ وحدت .

شرکت مشاوره ای ISG ، مدیر تحقیقات نرم افزار ISG ، مت آسک ، گفت: انتظار می رود ابزار جدید بار تیم های مهندسی داده ها را کاهش دهد اما خاطرنشان کرد که تحلیلگران داده به احتمال زیاد با تیم های مهندسی داده ها برای مواردی که در یک ادغام پیچیده تر و نیازهای تحول بیشتری دارند ، کار می کنند. خط لوله های ابرداده و CI/CD ، به این معنی که این موارد را می توان بازرسی کرد ، در صورت لزوم توسط مهندسان ویرایش می شود.

مانند Aslett ، تحلیلگر خاطرنشان کرد که ابزار جدید به احتمال زیاد به بنگاهها در موارد کمتر استفاده پیچیده ، مانند ردیابی حاشیه منطقه ای ، انطباق ، جمع آوری متریک ، نظارت بر پنجره نگهدارنده و همگام سازی کمک می کند ، اگرچه از توسعه سفارشی پشتیبانی می کند.

طراح دریاچه بخشی از Lakeflow است که اکنون به طور کلی در دسترس خواهد بود. Lakeflow دارای سه ماژول است – Lakeflow Connect ، خطوط لوله اعلامی Lakeflow و مشاغل Lakeflow. طراح در خطوط لوله اعلانی ادغام شده است.

در هدف متحد ، تقسیم شده در رویکرد

طراح دریاچه ، علی رغم اینکه بسیار شبیه به رقیب است diffflow هر دو پیشنهاد نیز در بلوغ متفاوت هستند. در حالی که جریان Openflow Snowflake نسبتاً جدید است ، Lakeflow در طی سالها از نظر عملکردی بالغ شده است و طراح آخرین ابزار آن است. “قابلیت های اتصال به همراه Arcion در سال ۲۰۲۳ به دست آمد. عملکرد خطوط لوله اعلامی تکامل DLT (Delta Live Tables) است ، و Jobs تکامل گردش کار Databricks است.” Aslett اضافه کرد. کد ، DAGS ، داده های نمونه و اشکال زدایی-همه در یک فضای کاری یکپارچه.

آزاد کردن طراح دریاچه و IDE جدید با هم یک نمایشنامه استراتژیک است ، به گفته NI ، به عنوان ارائه دهنده Lakehouse هر دو انتهای سررسید خط لوله را هدف قرار می دهد-کمد کمد برای حرکت سریع و کامل ایده آل به مقیاس و حفظ پیپلین ها.