تحتضن مونت كارلو Fivetran ، مما يتيح إمكانية المراقبة الشاملة لخطوط أنابيب البيانات

قامت شركة Monte Carlo Data التي تتخذ من سان فرانسيسكو مقراً لها ، وهي مزود لقدرات مراقبة البيانات الآلية للشركات ، بتوسيع نطاق انتشارها من خلال الإعلان عن تكامل بدون رمز مع شركة Fivetran الرئيسية لاستيعاب البيانات. ستمكّن هذه الخطوة العملاء المشتركين للشركات من مراقبة سلامة خطوط أنابيب البيانات الخاصة بهم من البداية إلى النهاية.

أعلنت Monte Carlo بالفعل عن تكامل مع العديد من اللاعبين في النظام البيئي للبيانات ، بما في ذلك Snowflake و BigQuery. يمثل التكامل مع Fivetran خطوة أخرى لمونتي كارلو نحو إمكانية مراقبة البيانات الكاملة لمكدس البيانات الحديث ، مباشرة من طبقة التزامن إلى مخازن البيانات. تتنافس الشركة مع لاعبين مثل Acceldata و BigEye في الفضاء.

لعبة البيانات

الشركات اليوم متفائلة بشأن المبادرات التي تعتمد على البيانات. إنهم يستوعبون المزيد والمزيد من المعلومات من مصادر مختلفة ، مما يجعل خطوط الأنابيب معقدة ويزيد من فرص تعطل البيانات – الفترات التي تكون فيها البيانات غير دقيقة أو خاطئة. يمكن أن تلحق البيانات السيئة الضرر بالتطبيقات والمستخدمين بشكل مباشر ، مما يؤدي إلى اتخاذ قرارات غير دقيقة وفي النهاية تكفي لأيام من مكافحة الحرائق.

تواجه Monte Carlo ، التي تأسست في عام 2019 ، هذا التحدي من خلال نظامها الأساسي القائم على التعلم الآلي والذي يوفر لمحللي بيانات المؤسسات نظرة شاملة لموثوقية البيانات لحالات استخدام منتجات الأعمال والبيانات الهامة في الوقت الفعلي تقريبًا. يكتشف النظام الأساسي الحوادث ويرسلها بشكل أسرع ، مما يسمح للفرق بمعالجة وقت تعطل البيانات قبل أن يكون لها تأثير كبير على الأعمال.

تكامل Fivetran من أجل ملاحظة خط الأنابيب

من خلال مشاركتها مع شركات مثل Snowflake و Databricks و Google BigQuery ، عالجت Fivetran التحدي المتمثل في مراقبة البيانات حيث يتم تخزينها ، لكن ذلك لم يشمل النظام البيئي الكامل. لذلك بدأت الشركة في التوسع إلى طبقات أخرى ، من خلال إدخال أدوات ذكاء الأعمال مثل Looker و Tableau و Mode بالإضافة إلى عروض ETL مثل dbt و Airflow.

“لقد رأينا اعتمادًا لا يصدق لتكامل dbt الخاص بنا ، والذي أظهر لنا أن العملاء يحتاجون إلى المزيد والمزيد من الرؤية في طبقة التنسيق. ومع كون Fivetran أحد أدوات ELT المفضلة لعملائنا ، سيكون هذا التكامل الجديد تحويليًا ويمنحهم القدرة على اكتشاف واستكشاف الأخطاء وإصلاحها [data pipeline] قال ليور غافيش ، الرئيس التنفيذي والمؤسس المشارك لمونتي كارلو ، “القضايا أسرع”.

أخبر Gavish Venturebeat أن التكامل السريع بدون رمز يضمن مراقبة خطوط أنابيب البيانات التي تم إنشاؤها باستخدام موصلات Fivetran بمجرد بنائها. تم دمج إمكانية المراقبة فيها ، مما يعطي رؤية واضحة للمشكلات الأولية – من المشكلات المتعلقة بحداثة البيانات والحجم والتوزيع إلى فجوات المخطط والنسب – قبل أن تؤثر على المنتجات النهائية.

والجدير بالذكر أنه عند حدوث مشكلة ، تظهر الإشعارات داخل واجهة مستخدم مونت كارلو ويتم إرسالها كتنبيهات في Slack و Microsoft Teams وما إلى ذلك. وهذا يأخذ المستخدم مباشرةً إلى جميع المعلومات والسياق ، مثل سجلات Fivetran ، التي يحتاجون إلى معالجتها المشكلة.

“التكامل هو الأحدث في قائمة طويلة من الحلول والأنظمة الأساسية التي توفرها مونت كارلو … والتي توسع نطاق الملاحظة عبر مكدس البيانات الحديثة. لقد ساعد حلنا الشركات التي تستخدم نظام Fivetran في تقليل حوادث البيانات بنسبة 90٪ تقريبًا وتوفير أكثر من 100 ساعة كل ربع من الوقت الذي تستغرقه هندسة البيانات في اكتشاف مشكلات جودة البيانات وحلها “.

تم اختبار العرض بشكل تجريبي من قبل العديد من المؤسسات ، بما في ذلك Backcountry.com و Checkout.com و MasterClass ، ويمكن الآن إضافته إلى المجموعة مجانًا من قبل العملاء المشتركين للشركتين.