llama.cpp

llama.cpp يتيح تشغيل نماذج القرار على الخوادم المحلية ويسرّع توليد النصوص

llama.cpp

llama.cpp يتيح تشغيل نماذج القرار على الخوادم المحلية ويسرّع توليد النصوص

أصدر llama.cpp، البرنامج مفتوح المصدر لتشغيل نماذج الذكاء الاصطناعي على الحاسوب الشخصي، الإصدار 0.6.0. وأضاف إلى خادمه واجهة جديدة باسم /v1/systemone لنماذج القرار، مع دعم كامل لنموذج Clef نصًا وصورة. كما يوسّع الإصدار طرق التسريع مثل MTP وDFlash، ويضيف دعم GLM-5.3-Flash وتنزيل النماذج من واجهة الوي

GlobalFeed Editor tarafından
llama.cpp 0.4.0: دعم أولي لـ Qwen3.8-Flash-Next وNemotron-3-Puzzle، وتغييران يخفضان استهلاك الذاكرة

llama.cpp

llama.cpp 0.4.0: دعم أولي لـ Qwen3.8-Flash-Next وNemotron-3-Puzzle، وتغييران يخفضان استهلاك الذاكرة

أصدر المشروع الذي يعتمد عليه معظم من يشغّلون النماذج على أجهزتهم نسخة جديدة. عائلتان جديدتان من النماذج تحصلان على دعم أولي، لكن الأهم عملياً في جانب الذاكرة: صارت الموترات تُقرأ عند الطلب، ووُضع سقف للمكمِّم. وعلى جانب الخادم صار حد السياق يُطبَّق لكل فتحة على حدة.

GlobalFeed Editor tarafından