Kunning AI va GPU yangiliklari

Qwen3-VL-Embedding: saralashga nimalar tushganini tekshiring

Qidiruv natijalarini tartiblashni yaxshiladingiz, ammo tanish skan hamon topilmayapti. Qwen’ning 2026-yil yanvardagi hisobotida taqdim etilgan Qwen3-VL-Embedding-2B misolida nega avval hujjatlarning dastlabki tanlovini tekshirish kerakligini ko‘ramiz.

Qwen hujjatida vazifalar ajratilgan: Embedding dastlabki qidiruv uchun matn va rasmlarni vektorlarga aylantiradi, Reranker esa keyingi bosqichda «so‘rov — hujjat» juftliklarini baholaydi. Bundan muhim xulosa kelib chiqadi: kerakli skan uzatilgan ro‘yxatga kirmagan bo‘lsa, keyingi tartiblash uni qaytara olmaydi.

Kerakli hujjati oldindan ma’lum bo‘lgan o‘nta so‘rovni oling. Reranker’dan oldingi nomzodlar ro‘yxatini saqlang: avval 20 ta, keyin 100 ta hujjat tanlab. Har bir ro‘yxatda kerakli ID borligini tekshiring. Ikkalasida ham bo‘lmasa, birinchi bosqichni tekshiring; bor bo‘lib, keyin pastga tushsa, tartiblashni o‘rganing. Bu tavsiya etilgan sinov, biz o‘lchagan model natijasi emas.

GPU tanlashdan oldin har ikki variantda javob vaqtini va VRAM’ning eng yuqori sarfini o‘lchang. Kengroq tanlov to‘g‘ri javobni kafolatlamaydi: nomzodlar orasidan mos hujjatni hali ajratish kerak. Faqat natijalar tartibini emas, kerakli hujjat tanlovga tushganini ham tekshiring.

AI JSON’ga yozdi — nega fayl endi o‘qilmayapti?

Siz AI’dan arizalarni JSON’ga chiqarishni so‘raysiz. Skript xatosiz tugaydi, lekin import faylni ocholmaydi. Faqat yozish muvaffaqiyatini emas, tayyor natijani qayta o‘qib tekshirishni so‘rang.

Python hujjatida ogohlantirilgan: turli obyektlar uchun bir oqimga json.dump’ni qayta-qayta chaqirish noto‘g‘ri JSON-fayl hosil qiladi. Har bir yozuv alohida to‘g‘ri bo‘lishi mumkin, ammo ularni yonma-yon yozish yagona hujjat yaratmaydi. Bir nechta konvert hali bitta jo‘natma emas.

Kichik hajmdagi eksport uchun mana tayyor prompt: Arizalarni bitta JSON-massiv sifatida, json.dump’ni bir marta chaqirib saqla. Faylni yopgach, json.load bilan qayta och. id soni va tartibini boshlang‘ich ma’lumotlar bilan solishtir. Bo‘sh ro‘yxat va ikkita arizali ro‘yxatni tekshir. Tekshiruv natijalarini ko‘rsat.

Ikkita ariza bilan sinash muhim: bitta yozuvda yonma-yon yozish xatosi bilinmaydi. Tayyor faylni to‘liq tekshiring, faqat alohida yozuvlarni emas. Muvaffaqiyatli o‘qish parser faylni qabul qilganini bildiradi, ammo summalar va boshqa maydonlar tekshirilganini emas — ularni alohida solishtirish kerak.