حاسبة تخزين التضمينات المتجهية (Embeddings)

كم من المساحة تشغل تضميناتك؟ أدخل عدد المتجهات التي ستخزّنها وأبعادها والدقة التي تُحفظ بها، فتضرب هذه الحاسبة ذلك بدقة: المتجهات × الأبعاد × البايتات لكل قيمة. وأضف هامشًا للبيانات الوصفية إذا كان كل متجه يحمل معرّفًا أو حمولة. وللحجم التشغيلي لقاعدة بيانات متجهية بفهرس ونسخ متماثلة، استخدم مقدّر حجم قاعدة البيانات المتجهية.

تتم المعالجة محليًا في متصفحك. لا يتم رفع بياناتك إلى خوادمنا.

متجه واحد لكل قطعة أو مستند أو عنصر تضمّنه.

حجم مخرجات نموذج التضمين لديك، من وثائقه.

معرّفات أو مقتطفات نصية أو حمولة تُخزَّن بجانب كل متجه.

النتيجة

حساب دقيق على أرقامك

أدخل عدد المتجهات والأبعاد لترى التخزين.

تخزين خام فقط: لا يشمل الفهرس ولا النسخ المتماثلة ولا الضغط ولا حمل قاعدة البيانات.

أمثلة

أمثلة محلولة (دون بيانات وصفية):

المتجهاتالأبعادالدقةلكل متجهالمتجهات الخام
1,000,0001,536FP326 KiB (6.14 KB)5.72 GiB (6.14 GB)
10,000,000768FP161.5 KiB (1.54 KB)14.31 GiB (15.36 GB)
100,000,0001,024INT81 KiB (1.02 KB)95.37 GiB (102.4 GB)
1,000,000,0001,024ثنائي128 B119.21 GiB (128 GB)

الصيغة والمنهجية

التخزين الخام حساب دقيق على الأرقام التي تدخلها:

البايتات لكل متجه = الأبعاد × البايتات لكل قيمةبايتات المتجهات الخام = المتجهات × الأبعاد × البايتات لكل قيمةإجمالي البايتات = بايتات المتجهات الخام + المتجهات × بايتات البيانات الوصفية لكل متجه

من المفيد أن تعرف

  • البايتات لكل قيمة: FP32 تساوي 4، وFP16 وBF16 تساوي 2، وINT8 تساوي 1، والتكميم الثنائي يخزّن بتًّا واحدًا لكل بُعد (0.125 بايت).
  • يختلف GB (‏10⁹ بايت) عن GiB (‏2³⁰ بايت) بنحو 7%؛ وتعرض النتائج الاثنين.
  • تحتفظ بعض الأنظمة بالمتجهات الأصلية كاملة الدقة إلى جانب نسخة مكمَّمة. احسب الاثنين إن كان نظامك كذلك.
  • الدقة الأقل توفّر مساحة لكنها قد تخفض جودة الاسترجاع. اختبر على بياناتك قبل القرار.
  • هذا حجم المتجهات نفسها. وتضيف قاعدة البيانات المتجهية فهرسًا ونسخًا متماثلة وحملًا آخر: راجع مقدّر حجم قاعدة البيانات المتجهية.

كيفية الاستخدام

  1. أدخل عدد المتجهات التي ستخزّنها.
  2. اختر أبعاد نموذج التضمين لديك ودقة القيم المخزَّنة.
  3. يمكنك إضافة بايتات البيانات الوصفية المخزَّنة مع كل متجه.
  4. اقرأ التخزين لكل متجه وفي الإجمالي بوحدتي GB وGiB.

الأسئلة الشائعة

كيف أحسب تخزين التضمينات؟

اضرب عدد المتجهات في الأبعاد وفي البايتات لكل قيمة. فلمليون متجه FP32 بـ1,536 بُعدًا يكون الناتج 1,000,000 × 1,536 × 4 بايت، أي نحو 6.1 GB (‏5.7 GiB).

كم بايتًا يشغل التضمين الواحد؟

الأبعاد × البايتات لكل قيمة. متجه FP32 بـ1,536 بُعدًا يشغل 6,144 بايت؛ وبدقة FP16 يشغل 3,072؛ وبدقة INT8 يشغل 1,536؛ ومع التكميم الثنائي يشغل 192.

هل يقلّل التكميم التخزين؟

نعم، بما يتناسب مع البايتات لكل قيمة: INT8 ربع FP32 والثنائي 1/32. وقد يخفض جودة الاسترجاع، وبعض الأنظمة تحتفظ أيضًا بالمتجهات الأصلية، فتحقق من الحجم والجودة معًا.

هل هامش البيانات الوصفية إلزامي؟

لا. اتركه فارغًا أو صفرًا لترى المتجهات وحدها. وإذا كان كل متجه يحمل معرّفًا أو مصدرًا أو نصًّا فأضف متوسط البايتات ليعكس الإجمالي ما تخزّنه فعلًا.

هل هذا حجم قاعدة بياناتي المتجهية؟

ليس تمامًا. هذا هو التخزين الخام للمتجهات. وتضيف قاعدة البيانات فهرسًا ونسخًا متماثلة وحملًا آخر، وهذه تعتمد على النظام والإعدادات. استخدم مقدّر حجم قاعدة البيانات المتجهية للحصول على نطاق.

آخر تحديث: