Bilimlar bazasi bo'yicha AI-assistent: joriy etish va sinov

Bilimlar bazasi bo’yicha AI-assistent shunday tizimki, u xodimlarning savollariga ichki hujjatlaringizga asoslanib javob beradi va javob qaysi hujjatdan olinganini ko’rsatadi. Bilimlar modelning ichiga oldindan joylab qo’yilmaydi: har bir savolga tizim sizning reglamentlaringiz, yo’riqnomalaringiz va shartnomalaringizdan mos fragmentlarni topadi, javobni esa faqat shular asosida shakllantiradi. Bu yerda asosiy foyda matn generatsiyasining o’zida emas, intizomda: assistent manbaga qanchalik aniq amal qiladi va ma’lumot bo’lmaganda javob berishdan qanchalik halol bosh tortadi.

Quyida shunday modulni ekspluatatsiyaga qabul qilish metodikasi: ishga tushirishdan oldin nimani tekshirish kerak, nazorat savollarini qanday yig’ish va javoblar sifati yetarli ekanini qaysi mezonlar bo’yicha hal qilish. Bu biznes uchun AI-modullar stsenariylaridan biri. Buyurtmachi bilan ishlab chiqish jamoasi o’rtasida kutilmalar tafovuti ko’pincha aynan shu stsenariyda yuzaga keladi. Gap aynan xodimlarga ichki hujjatlar asosida javob berish haqida: mijozlar bilan tashqi yozishmadagi stsenariy boshqacha ishlaydi.

---

Assistent qachon kerak, oddiy qidiruv qachon yetarli?

Assistent javobni bir necha hujjatdan yig’ishga to’g’ri keladigan, xodim esa aniq ibora va fayl nomlarini bilmaydigan joyda o’zini oqlaydi. Agar baza kichik va yaxshi tuzilgan bo’lsa, oddiy to’liq matnli qidiruv arzonroq va bashoratliroq bo’ladi.

Amaliy belgi: izlash so’rashdan uzoqroq vaqt olgani uchun bir xil savol muntazam ravishda hamkasblarga chatda berilaversa, assistent o’zini oqlaydi. Agar xodimlar kerakli narsani bir daqiqada topsa, yechim assistentda emas.

Bu oddiy ChatGPT’dan nimasi bilan farq qiladi?

Hammaga ochiq model sizning reglamentlaringizni bilmaydi, hujjatning amaldagi va bekor qilingan versiyasini farqlamaydi, xodimning kirish huquqlarini hisobga olmaydi. Bilimlar bazasi bo’yicha assistent bu model atrofiga qurilgan alohida tizim. Muhandislik ishining deyarli hammasi aynan shu tizimga to’g’ri keladi.

Ekspluatatsiya uchun muhim farqlar:

• Javob manbasi. Javob modelning umumiy bilimlariga emas, faqat sizning hujjatlaringizdan topilgan fragmentlarga tayanadi.
• Hujjat va versiyaga havola. Xodim birlamchi manbani ochib, iborani tekshirishi mumkin.
• Kirish huquqlari. Assistent odamga ko’rishga ruxsat etilgan doira ichida javob beradi.
• Boshqariladigan rad javobi. Tizim shunday sozlanadiki, u ishonarli matn to’qib chiqarish o’rniga «hujjatlarda bu yo’q» deb aytsin.
• Bilimlarni yangilash. Reglament o’zgardi, qayta indeksatsiya qilindi, javoblar yangilandi. Modelni qo’shimcha o’qitish shart emas.
• So’rovlar jurnali. Nima so’ralayotgani, tizim nimaga javob bermayotgani va bilimlar bazasi qayerda bo’shligi ko’rinadi.

Assistent javobni qanday shakllantiradi?

Savol bosib o’tadigan yo’l besh qadamdan iborat, ularning har birida sifat yo’qolishi mumkin.

Sohada bunday yondashuvni RAG deb atashadi: topilgan hujjatlarga tayanib javob generatsiya qilish. Oddiy qilib aytganda, model javobni eslamaydi, balki unga berilgan matnni qayta hikoya qiladi. Qabul qilish uchun asosiy xulosa shundan kelib chiqadi: xatolarning ko’pchiligi qidiruv va hujjatlarni tayyorlashdagi xato, «model aqlsiz» degani emas.

Qanday hujjatlarni ulash mumkin?

Matn ko’rinishida saqlanadigan deyarli hamma narsani ulash mumkin. Masala shundaki, ulardan qaysi biri katta tayyorgarlik ishisiz foyda beradi.

Bu ikki guruh orasida uchinchisi ham bor: tayyorgarlik talab qiladiganlar. Bunga matn qatlamisiz skanlar (matnni tanib olish va natijani tekshirish kerak), murakkab jadvallar va taqdimotlar (matnga ajratishda tuzilma ko’pincha buziladi) hamda tushunarli bo’limlarga ajratilmagan uzun hujjatlar kiradi. Ularni ham ulash mumkin, lekin bunga alohida ish rejalashtiriladi. O’ng ustundagi manbalar faqat tanlab olinadi, u ham tozalashdan keyin.

Texnik jihatdan manbalar kompaniyaning joriy konturiga ulanadi: fayl ombori, portal, task-treker, hisob va korporativ tizimlar. Ichki tizimlar bilan integratsiya haqida integratsiyalar sahifasida alohida yozilgan.

Nega avval hujjatlarda tartib o’rnatish kerak?

Chunki assistent bilimlar bazasining mazmunini yaxshilamaydi, u mazmunga kirishni tezlashtiradi. Agar bazada bitta reglamentning uchta versiyasi saqlanayotgan bo’lsa, tizim ulardan biri bo’yicha halol javob beradi, holatlarning yarmida esa bu kerakli versiya bo’lmaydi.

Ishga tushirishdan oldingi minimal tartib:

• har bir hujjatda egasi va oxirgi qayta ko’rib chiqilgan sana ko’rsatilgan;
• bekor qilingan va arxiv versiyalar amaldagilardan alohida joyda saqlanadi;
• dublikatlar o’chirilgan, nomi o’zgartirilgan emas;
• fayl nomidan bu qanday hujjat ekani ko’rinadi, «Reglament_final_2_tuzatilgan» emas.

Bu tartib haqidagi mavhum talab emas. Versiya va status belgilari tizimga texnik jihatdan kerak: ularsiz qidiruv bosqichida eskirgan fragmentni filtrlab bo’lmaydi.

Kirish huquqlarini qanday tashkil qilish kerak?

Huquqlar ishga tushirishdan oldin loyihalanadi va qidiruv bosqichida qo’llanadi, modeldan «ortiqcha gapirmaslik» so’ralmaydi. Promptdagi ko’rsatma xavfsizlik mexanizmi emas.

Ishlaydigan sxema:

• Rollar, shaxsiy ro’yxatlar emas. Kirish darajalari rollarga bog’lanadi (xodim, bo’lim rahbari, HR, moliya) va kompaniyaning joriy foydalanuvchilar katalogidan olinadi.
• Indeks darajasidagi filtr. Foydalanuvchiga ochiq bo’lmagan fragmentlar javob kontekstiga umuman tushmasligi kerak.
• Baza bo’limlari bo’yicha ajratish. Kadrlar va moliya hujjatlari o’z qoidalariga ega alohida makonlarda saqlanadi.
• Jurnalga yozish. Kim, nima so’radi, qaysi manbalarni oldi. Bu hodisalarni tahlil qilish uchun ham, sifatni baholash uchun ham kerak.
• Qayta ishlash konturi. Javob generatsiyasi paytida hujjat fragmentlari qayerga ketishi va ular qancha vaqt saqlanishi alohida qayd etiladi.

Xavfsizlik va ma'lumotlarni qayta ishlash konturi haqida batafsil ->

Hujjatlarda javob bo’lmasa nima qilish kerak?

To’g’ri xatti-harakat bu ochiq rad javobi. Bahsli vaziyatda ishonarli matn beradigan assistent umuman assistent bo’lmaganidan xavfliroq: xodim ishonch bilan aytilgan to’g’ri javobni ishonch bilan aytilgan noto’g’ri javobdan ajrata olmaydi.

Amalda bu qanday tashkil etiladi:

1. Agar qidiruv yetarlicha mos fragment topmasa, javob generatsiya qilinmaydi.
2. Foydalanuvchi «ulangan hujjatlarda javob yo’q» ko’rinishidagi iborani va eng yaqin materiallar ro’yxatini ko’radi.
3. Savolni odamga uzatish taklif qilinadi: mas’ul ekspertga, qo’llab-quvvatlash xizmatiga yoki arizalar navbatiga.
4. Javobsiz qolgan savol hisobotga tushadi. To’plangan ro’yxat bilimlar bazasini rivojlantirishning tayyor rejasi.

Bunday hisobot dastlabki oylarda ko’pincha assistentning o’zidan foydaliroq bo’lib chiqadi: u kompaniyada qaysi hujjatlar umuman yo’qligini ko’rsatadi.

Nazorat savollari to’plamini qanday tayyorlash kerak?

Nazorat to’plami bu qabul qilishning asosiy vositasi. Usiz sifat haqidagi bahs taassurotlar almashinuviga aylanadi.

Uni qanday yig’ish kerak:

• Savollar manbasi bu xodimlar, dasturchilar emas. So’nggi oylardagi chatlar, tiketlar va yangi kelganlarning savollaridan real murojaatlarni oling.
• Hajm: birinchi ishga tushirish uchun 50-100 savol. Kamrog’i statistika bermaydi, ko’prog’ini qo’lda yuritish og’ir.
• Har bir savolga oldindan etalon javob va etalon manba yoziladi (hujjat va bo’lim). Buni ishlab chiqish jamoasi emas, mavzu bo’yicha ekspert bajaradi.

To’plam turli tiplarni qamrab olishi kerak:

To’plam qayd etiladi va har bir muhim o’zgarishdan keyin qaytadan o’tkaziladi: yangi hujjatlar, boshqa model, o’zgargan qidiruv mantig’i. Bu regression test, bir martalik mashq emas.

Javoblar sifatini qanday baholash kerak?

Sifat oltita o’lchanadigan xususiyatga bo’linadi. Ularni nazorat to’plami bo’yicha ikki mustaqil tekshiruvchi tomonidan baholash kerak, kelishmovchilik chiqqanda esa ekspert hakam rolini bajaradi. Har bir xususiyat bo’yicha maqsadli qiymatlarni kompaniya xato narxidan kelib chiqib o’zi belgilaydi.

Javobning mazmunan to’g’riligi

Tizim berilgan savolga javob beradimi va ma’no etalon javob bilan mos keladimi. Uch qiymatli shkala foizlardan yaxshiroq ishlaydi: to’liq javob, qisman, noto’g’ri. Qisman javoblar ulushi alohida hisoblanadi: ular to’g’ridan-to’g’ri xatolardan xavfliroq, chunki ishonarli ko’rinadi.

Manbaga muvofiqlik

Javobdagi har bir da’vo ilova qilingan fragmentlarda bor-yo’qligi tekshiriladi. «O’zidan» qo’shilgan qism, hatto faktik jihatdan to’g’ri bo’lsa ham, xato hisoblanadi. Bu ishonchning asosiy metrikasi: aynan u bilimlar bazasi bo’yicha assistentni umumiy modeldan ajratib turadi.

Havolaning to’g’riligi

Havola javob haqiqatan olingan hujjat va bo’limga olib borishi hamda amaldagi versiyaga tegishli bo’lishi kerak. Tez-tez uchraydigan, ko’zga tashlanmaydigan nosozlik: javob matni to’g’ri, havola esa qo’shni bandga olib boradi. Xodim manbani ochadi, iborani topa olmaydi va tizimga ishonishni to’xtatadi.

Rad javobini bera olish

Ikkita ko’rsatkich hisoblanadi. To’g’ri rad javoblari: tizim «hujjatlarda bu yo’q» deb javob bera olgan tuzoq-savollar ulushi. Noto’g’ri rad javoblari: bazada javob bo’lgan, lekin tizim javob berishdan bosh tortgan savollar ulushi. Birinchi ko’rsatkich imkon qadar oshiriladi, ikkinchisi oqilona doirada ushlab turiladi, aks holda assistentdan foydalanishni to’xtatadilar.

Savolni odamga uzatish

Faqat matn emas, butun marshrut tekshiriladi: savol kerakli ekspertga yoki kerakli navbatga tushdimi, unda muloqot konteksti bormi, xodim statusni ko’radimi. Shu yerda murojaatlarning qancha ulushi oxir-oqibat odamga yetib borishi o’lchanadi. Baza to’lib borgan sari bu ulush kamayayotgan-kamaymayotgani ham kuzatiladi.

Bitta so’rovning tezligi va narxi

Tezlik ikkita raqam bilan o’lchanadi: javobning birinchi so’zlari paydo bo’lgunicha o’tgan vaqt va havolalar bilan tayyor javobgacha bo’lgan to’liq vaqt. Birinchisi tizim qanday ishlayotgani haqidagi taassurotga kuchliroq ta’sir qiladi.

Bitta so’rov narxi oldindan hisoblanadi va real hajmga ko’paytiriladi: xodimlar soni, murojaat chastotasi, cho’qqi kunlar. Narx nimalardan yig’iladi: uzatilgan kontekst hajmi, tanlangan model, takroriy aniqlashtiruvchi savollar, hujjatlarni muntazam qayta indeksatsiya qilish. Agar so’rov narxi ishga tushirishdan oldin hisoblanmagan bo’lsa, u haqiqiy ish yuklamasining birinchi oyidayoq ma’lum bo’ladi.

Bulut yoki o’z konturi: tanlov nimaga ta’sir qiladi?

Tanlov javoblar sifatidan ko’ra ko’proq ishga tushirish tezligiga, xarajatlar tuzilmasiga va kompaniyaning ichki resurslariga qo’yiladigan talablarga ta’sir qiladi.

Nozik ma’lumotlar uchun amaliy murosa: indeks va qidiruvni kontur ichida ushlab turish, tashqi modelga esa faqat javobni shakllantirish uchun zarur bo’lgan shaxssizlantirilgan fragmentlarni berish. Bazaning ayrim bo’limlarini bunda butunlay yopib, lokal model bilan xizmat ko’rsatish mumkin. Qaror umumiy mulohazalar bo’yicha emas, ma’lumotlarga qo’yilgan talablar bo’yicha qabul qilinadi.

Nega 20-50 hujjatlik pilotdan boshlash kerak?

Bazaning cheklangan bo’limidagi pilot asosiy savolga arzon javob beradi: sizning hujjatlaringizda maqbul sifatga erishiladimi. Buni butun baza bo’yicha tekshirish uzoq va qimmat, natija esa o’sha-o’sha bo’ladi.

Pilot uchun bo’limni qanday tanlash kerak:

• savollar chastotasi yuqori (chatlar va tiketlardan ko’rinadi);
• hujjatlar maqbul holatda, egalari aniq;
• javoblarni tekshirishga tayyor ekspert bor;
• xato mijoz yoki buxgalteriya uchun kritik emas.

Boshlashdan oldin nima qayd etiladi: nazorat savollari to’plami, qabul qilish chegarasi, pilot muddati, tekshiruvchilar tarkibi. Yakunda nima baholanadi: yuqoridagi oltita xususiyat bo’yicha natija, so’rovning real narxi, butun bazaga qayta hisoblanganda hujjatlarni tartibga keltirish ishlarining hajmi.

Pilotning yana bir foydasi bor: u ekspertlar javoblarni tekshirishga qancha vaqt sarflashini ko’rsatadi. Bu odatda kech eslanadigan yashirin xarajat moddasi.

Ish bosqichlari va ekspluatatsiyaga topshirish qanday tashkil etilgan ->

Narx nimalardan tashkil topadi?

Aniq summani faqat hujjatlar va talablarni ko’rib chiqqandan keyin aytish mantiqli. Quyida unga eng kuchli ta’sir qiladigan omillar.

• Baza hajmi va holati. Ming sahifa tartibli hujjat uch yuz turli-tuman skandan arzonroq.
• Manba formatlari. Skanlar, murakkab jadvallar va taqdimotlar alohida qayta ishlash va tekshirishni talab qiladi.
• Manba-tizimlar soni. Har bir integratsiya alohida ish: ruxsatlar, sinxronizatsiya, yangilanishlarni qayta ishlash.
• Kirish huquqlari modeli. Hamma uchun bitta umumiy bo’lim va rollar bo’yicha huquqlar matritsasi bu mehnat hajmi jihatidan turli vazifalar.
• Bulut yoki o’z konturi. Lokal joylashtirish infratuzilma va administratsiyani qo’shadi.
• Sifat talablari. Manbaga muvofiqlik va rad javoblari bo’yicha yuqori chegara qidiruvni sozlashning ko’proq iteratsiyasini talab qiladi.
• So’rovlar hajmi. Ishlab chiqishga emas, operatsion xarajatlarga ta’sir qiladi.
• Tillar. Ko’p tilli baza va bir necha tildagi javoblar qidiruv va tekshiruvni murakkablashtiradi.
• Qo’llab-quvvatlash. Qayta indeksatsiya, yangi hujjatlarda sifat nazorati, nazorat to’plamini rivojlantirish.

AI-loyihalar narxini qanday hisoblaymiz ->

AI-assistent qachon kerak emas?

Vaziyatlar ikki xil bo’ladi va ular ko’pincha chalkashtiriladi. Birida assistent umuman kerak emas. Boshqasida u kerak, lekin birinchi qadam sifatida emas. Bu butunlay boshqa suhbat.

Assistent vazifani hal qilmaydi

• Baza kichik. Tushunarli mundarijaga ega bir necha o’nlab sahifa uchun qidiruv va tuzilma yetarli. Assistent bu yerda foydasidan qimmatroq.
• Savollar matn emas, hisob-kitob talab qiladi. «Iyun oyida bu mijozga qancha jo’natdik» bu hujjatlarga emas, hisob tizimi va hisobotlarga so’rov. Bunday stsenariylar korporativ tizimlar va hisobotlar yordamida hal qilinadi.
• Xato narxi yuqori, tekshirishga resurs yo’q. Agar javob yuridik ahamiyatga ega yoki moliyaviy qarorda ishlatilsa-yu, uni tekshiradigan odam bo’lmasa, javobni avtomatlashtirish yutuq bermaydi.
• Biznes tomonida egasi yo’q. Baza mazmuni uchun javob beradigan va javobsiz savollar hisobotini ko’rib chiqadigan odam bo’lmasa, texnika qanchalik yaxshi bo’lmasin, loyiha bir-ikki oyda so’nadi.

Assistent kerak, lekin undan boshlash kerak emas

• Bilimlar bazasi yuritilmaydi. Hujjatlar eskirgan, yiliga bir marta yangilanadi, mazmun uchun hech kim javob bermaydi. Assistent shunchaki dolzarb bo’lmagan javoblarni tezroq tarqatadi. Avval egalar va muntazam qayta ko’rib chiqish, keyin kirishni avtomatlashtirish.
• Hujjatlar bir-biriga zid. Qaysi versiya amalda ekanini hal qiladigan egasi bo’lmaguncha, tizim to’g’risini tanlay olmaydi. U tasodifiysini tanlaydi. Versiyalarni saralash loyihaning birinchi bosqichi, unga to’siq emas.
• Bilimlar odamlarning boshida. Agar asosiy jarayonlar hech qayerda yozib qo’yilmagan bo’lsa, assistentga qidiradigan narsa yo’q. Jarayonlarni yozib chiqish bu shunday loyiha boshlanadigan ishning o’zi.

Farq amaliy. Birinchi holatda assistent yordam bermaydi, buni darrov aytgan halolroq. Ikkinchisida vazifani hal qilish mumkin, shunchaki birinchi bosqich modelga emas, hujjatlarga bag’ishlanadi.

Kompaniya tayyor ekanini qanday bilish mumkin: chek-list

Allaqachon bajarilgan bandlarni belgilang.

---

Nimadan boshlash kerak

Biz bunday modullarni kompaniya jarayonlariga moslab ishlab chiqamiz: manbalarni ulash, kirish huquqlarini hisobga olgan qidiruv, rad javoblari nazorati va nazorat savollari to’plami bo’yicha qabul qilish. Keyingisi ko’p jihatdan chek-listni qanday o’tganingizga bog’liq.

Agar birinchi ikki guruh bajarilgan bo’lsa. Savollar chastotasi eng yuqori bo’lgan bo’limni olamiz, nazorat to’plamini yig’amiz, 20-50 hujjatda pilotni ishga tushiramiz va qabul mezonlarini boshlashdan oldin qayd etamiz. Yakunda javoblar sifati ham, so’rovning real narxi ham, qolgan baza bo’yicha ish hajmi ham ko’rinadi.

Agar bandlar yetishmasa. Modeldan emas, hujjatlardan boshlaymiz: nima borligini, buning uchun kim javob berishini, amaldagi versiyalar qayerda va dublikatlar qayerda ekanini ko’ramiz. Natijada nimani tartibga keltirish kerakligi xaritasi va bu qancha vaqt olishi haqidagi baho paydo bo’ladi. Bunday tahlil assistentni joriy etish keyinga qolsa ham, o’z-o’zidan foydali. Ish formati loyiha oldi auditi sahifasida yozilgan.

Ikkala holatda ham ish bir xil suhbatdan boshlanadi: qanday savollar, ular nechta va bugun ularga kim javob beradi.

Vazifani muhokama qilish yoki biznes uchun AI-modullar stsenariylarini ko’rish.

FAQ

Modelni bizning hujjatlarimizda qo'shimcha o'qitish kerakmi?

Ko'p hollarda yo'q. Assistent sizning hujjatlaringizdan fragmentlarni topadi va shular bo'yicha javob beradi, shuning uchun bilimlarni yangilash qayta indeksatsiyaga borib taqaladi. Qo'shimcha o'qitish alohida muhokama qilinadi va faqat tor vazifalar uchun qo'llaniladi, masalan sohaning o'ziga xos atamalari uchun.

Reglamentga tuzatish kiritilgandan keyin javoblar qanchalik tez yangilanadi?

O'zgargan hujjat qayta indeksatsiyadan o'tgandan keyin. Odatda bu avtomatik sozlanadi: tizim manbadagi o'zgarishlarni kuzatadi va indeksni odam ishtirokisiz yangilaydi.

Assistent noto'g'ri javob bersa nima qilish kerak?

Sababni bosqichma-bosqich ko'rib chiqish kerak: kerakli fragment topildimi, u kontekstga tushdimi, javob fragmentga mos keladimi. Ko'pincha muammo modelda emas, qidiruv bosqichida yoki hujjatlarning o'zida bo'ladi. Xato qaytmasligi uchun bunday savol nazorat to'plamiga qo'shiladi.

Ma'lumotlarni tashqi xizmatlarga uzatmasdan ishlash mumkinmi?

Ha, model kompaniya konturida joylashtirilganda. Bu infratuzilmaga qo'yiladigan talablarni va ishga tushirish muddatini oshiradi. Oraliq variant ham mumkin: indeks va qidiruv ichkarida ishlaydi, tashqariga esa faqat shaxssizlantirilgan fragmentlar chiqadi.

Ishga tushirish uchun qancha hujjat kerak?

Pilot uchun savollar chastotasi yuqori bo'lgan bitta bo'limdan 20-50 hujjat yetarli. Bu javoblar sifatini baholash va qolgan baza bo'yicha ish hajmini tushunish uchun kifoya qiladi.

Javoblar sifatini kim tekshirishi kerak: dasturchilarmi yoki buyurtmachimi?

Etalon javoblar va manbalarni buyurtmachi tomonidagi ekspert tayyorlaydi, bahsli holatlarda hakam ham u bo'ladi. Ishlab chiqish jamoasi nazorat to'plamini o'tkazish, xatolarni tahlil qilish va qidiruvni sozlash uchun javob beradi.

Assistent qo'llab-quvvatlash xizmatini yoki yangi kelganlar uchun murabbiyni almashtiradimi?

Yo'q. U hujjatlarda aniq javobi bor takrorlanuvchi savollar oqimini o'z zimmasiga oladi. Murakkab va nostandart holatlar avvalgidek odamga boradi, bunday uzatish marshruti esa assistent bilan birga loyihalanadi.