01
صفحات المستندات
مثال على استعلام
“اعثر على الرسم البياني للاحتفاظ بالعملاء حسب الفئة.”
ترميز الصفحات المعروضة مع نصوصها ورسومها وتخطيطها ليُسهم السياق البصري في البحث.
OmniSpectraنموذج تضمين متعدد الوسائط
وسائط متعددة. فضاء دلالي واحد.
OmniSpectra نموذج تضمين متعدد الوسائط. يرمّز المستندات والصور والفيديو والصوت والنص إلى متجهات قابلة للمقارنة، لدعم البحث عبر الوسائط وإعادة استخدام المحتوى.
المستندات والصور والفيديو والصوت والنصوص هي مدخلات OmniSpectra الذي يرمّزها إلى متجهات. يستخدم النص كمحتوى وكنص استعلام المُرمّز نفسه، وترتبط المتجهات حسب المعنى في فضاء دلالي مشترك. المحتوى ومواضع المتجهات توضيحية.
المحتوى مثال استعلام· نص
- الرياح تولّد الكهرباء المستندات
-
صورة - فيديو
- «طاقة الرياح» صوت
- فحص شفرات التوربينات نص
طاقة الرياح البحرية
فضاء دلالي مشترك
محتوى مختلف. يربطه المعنى.
يمكن ربط الاستعلام النصي بصفحة مستند أو صورة أو فيديو أو صوت. ينتج النموذج التضمينات، ويستخدم تطبيقك تشابه المتجهات لاسترجاع المحتوى المرتبط.
02
الصور والفيديو
مثال على استعلام
“توربين رياح يعمل في البحر.”
ربط النص بمعاني العناصر والمشاهد والحركات في الصور ولقطات الفيديو.
03
الصوت والكلام
مثال على استعلام
“اعثر على الجزء الذي يشرح الاحتفاظ بالعملاء في المحاضرة.”
ربط معنى الكلام والأحداث الصوتية بالاستعلامات النصية للبحث في التسجيلات والمقابلات والمحاضرات.
استرجاع لقطات الفيديو. استعلامات بالإنجليزية والصينية.
مقارنة إصدارات النماذج في استرجاع لقطات الفيديو باستعلامات إنجليزية وصينية. تخص النتائج هذه المهمة والإصدارات المعروضة.
- المهمة
- استرجاع دلالي على مستوى اللقطة
- المقياس
- Average(Recall@5, Recall@10)
- لغات الاستعلام
- الإنجليزية / الصينية
- النموذج المعروض
- OmniSpectra 2.5 2605
-
Text description
-
Jina CLIP v2
-
TwelveLabs Marengo 2.7
-
TwelveLabs Marengo 3.0
-
Amazon Nova · 1024-dim
-
Amazon Nova · 3072-dim
-
OmniSpectra 2.0 preview
-
OmniSpectra 2.5
استدلال على الجهاز
OmniSpectra Edge
OmniSpectra Edge هو إصدار OmniSpectra الذي يعمل على الجهاز. يرمّز المحتوى متعدد الوسائط محليًا لدعم سير عمل الاسترجاع على أجهزتك.
- استدلال محلي للنموذج
- ترميز متعدد الوسائط
- البحث في الملفات المحلية
واجهة API للنموذج
ادمجه في نظام البحث لديك.
احصل على التضمينات عبر API أو حزم SDK لقاعدة المتجهات أو البحث بالتشابه أو نظام المعرفة لديك. يرمّز النموذج المحتوى، وينظم تطبيقك التخزين والاسترجاع.
راجع مرجع API للاطلاع على نقاط النهاية المتاحة وصيغ الإدخال وأمثلة الطلبات.
قيّم الأداء على المواد التي تهمّك.
قيّم مستندات وصورًا وتسجيلات ممثلة لعملك. تحقّق من العثور على المحتوى المناسب، ثم قيّم زمن الاستجابة والأجهزة المطلوبة لنشر التطبيق.
ناقش خطة التقييم