توجه إلى مكتبتنا عند الطلب لعرض الجلسات من VB Transform 2023. سجل هنا
تمتلك الشركات اليوم كميات هائلة من البيانات غير المنظمة المنتشرة عبر العديد من البيئات.
“السر القذر” ، وفقًا لمؤسس Unstructred.io والرئيس التنفيذي Bryan Raymond ، هو أن علماء البيانات غالبًا ما يزالون يعالجون كل تلك البيانات تمامًا كما كانوا يفعلون قبل 20 عامًا ، عادةً عن طريق إنشاء إرشادات ما قبل المعالجة يدويًا.
قال للجمهور في VentureBeat Transform 2023: “يكره علماء البيانات المعالجة المسبقة. الأمر أشبه بالذهاب إلى طبيب الأسنان.”
تم اختيار Unstructured.io ، الذي يستخدم اللغة الطبيعية لتحويل البيانات من شكلها الأولي إلى جاهز للتعلم ، على أنه الأكثر احتمالية للنجاح في معرض الابتكار في VentureBeat Transform 2023.
حدث
VB Transform 2023 حسب الطلب
هل فاتتك جلسة من VB Transform 2023؟ سجل للوصول إلى المكتبة عند الطلب لجميع جلساتنا المميزة.
سجل الان
توصيل البيانات بـ LLMs
وصف ريموند منصة شركته بأنها ETL – استخراج وتحويل وتحميل – لنماذج اللغات الكبيرة (LLMs).
قال: “نحب أن نفكر في أنفسنا على قمة نفق”.
يربط Unstructured.io البيانات بـ LLM ويستخدم مجموعة متنوعة من التقنيات – بما في ذلك رؤية الكمبيوتر ومعالجة اللغة الطبيعية (NLP) ونصوص Python – لاستخراج التعقيد.
أوضح ريموند أن البيانات غير المهيكلة يتم تنسيقها وتنظيفها من القطع الأثرية وجعلها جاهزة لـ LLM. هذه إستراتيجية أبسط وأسرع ولا يضطر علماء البيانات إلى كتابة مئات الأسطر من كود التحليل.
يمكن أن تكون البيانات المنظمة والمنظّمة بعيدة المنال
قال ريموند إن واجهة برمجة التطبيقات الخاصة بالمؤسسة تتيح سير عمل المتصفح لجميع أنواع المطورين ، وتدعم المعالجة المسبقة لأكثر من 25 نوعًا من أنواع الملفات وآلاف التنسيقات بأكثر من 100 لغة. وهي متاحة كواجهة برمجة تطبيقات مجانية ، وكمفكرة Google Colab وعلى GitHub ، حيث توفر مكتبتها مكونات مفتوحة المصدر لمعالجة المستندات النصية مسبقًا مثل مستندات PDF و HTML و Word.
قال ريموند إنه جاء بفكرة للشركة بعد أن “علق في جحيم هندسة البيانات” لدى صاحب عمل سابق. وقال إن مجرد الحصول على بيانات نظيفة ومنظمة استغرق سنوات.
قال ريموند إن Unstructured.io تأسست في عام 2022 وتعمل الشركة الآن بجدية على موصلات البيانات على مستوى المؤسسات والتي تقاوم الانقطاعات ويمكنها اكتشاف إصدارات الملفات الجديدة والتوازي بسهولة. تمتلك الشركة حاليًا 15 رابطًا للبيانات ، وتخطط لزيادة عددها إلى أكثر من 30.
أبرز معرض الابتكار في VentureBeat Transform لهذا العام 10 شركات فريدة في مجالات الذكاء الاصطناعي التوليدية والتعلم الآلي (ML) والتحليلات. الفائزون الثلاثة هم Unstructured.io و Arize AI (أفضل تقنية) و Skyflow (أفضل أسلوب عرض تقديمي) ، إلى جانب سبع إشارات شرفية.
>> اتبع جميع تغطية VentureBeat Transform 2023 الخاصة بنا <<
مهمة VentureBeat هو أن تكون ساحة المدينة الرقمية لصناع القرار التقنيين لاكتساب المعرفة حول تكنولوجيا المؤسسات التحويلية والمعاملات. اكتشف إحاطاتنا.
اكتشاف المزيد من نص كم
اشترك للحصول على أحدث التدوينات المرسلة إلى بريدك الإلكتروني.