Lug'at nomuvofiqligi - Vocabulary mismatch - Wikipedia

Lug'at nomuvofiqligi tabiiy tillarni qo'llashda odatiy hodisa bo'lib, turli xil odamlar bir xil narsani yoki tushunchani boshqacha nomlashlarida yuzaga keladi.

Furnas va boshq. (1987), ehtimol so'z birikmasining mos kelmasligi muammosini miqdoriy jihatdan birinchi bo'lib o'rgangan.[1] Ularning natijalari shuni ko'rsatadiki, o'rtacha 80% turli xil odamlar (bir xil sohadagi mutaxassislar) bir narsani boshqacha nomlaydilar. Odatda bir xil narsaga tegishli bo'lishi mumkin bo'lgan o'nlab nomlar mavjud. Ushbu tadqiqotlar ishlashga turtki berdi yashirin semantik indeksatsiya.

Korpusdagi foydalanuvchi tomonidan yaratilgan so'rovlar va tegishli hujjatlar o'rtasidagi so'z boyligining mos kelmasligi nomuvofiqlik atamasini keltirib chiqaradi. ma'lumot olish. Chjao va Kallan (2010)[2] qidirish sharoitida so'z birikmasining mos kelmasligi muammosini miqdoriy jihatdan birinchi bo'lib o'rganganlar. Ularning natijalari shuni ko'rsatadiki, o'rtacha so'rov atamasi foydalanuvchi so'roviga mos keladigan hujjatlarning 30-40 foizida ko'rinmaydi. Ular, shuningdek, bu mos kelmaslik ehtimoli asosiy ehtimolliklarni qidirish modellaridan biri, ya'ni Ikkilik mustaqillik modeli. Ular yangi kalit so'zlarni qidirish modellari bo'yicha qidirib topishda potentsial ravishda 50-80% aniqlik yutuqlariga olib kelishi mumkin bo'lgan vaznni bashorat qilishning yangi usullarini ishlab chiqdilar. Yo'nalish bo'yicha olib borilgan qo'shimcha tadqiqotlar shuni ko'rsatadiki, mutaxassis foydalanuvchilar Boolean Conjunctive Normal Form kengaytmasidan foydalanib, qidiruv ish faoliyatini kengaytirilmagan kalit so'z so'rovlari bo'yicha 50-300% ga yaxshilaydilar.[3]

Mos kelmaydiganlikni hal qiladigan usullar

Adabiyotlar

  1. ^ Furnas, G., va boshq. Inson-tizim aloqalarida so'z birikmasi muammosi, ACM aloqalari, 1987, 30 (11), 964-971-betlar.
  2. ^ Zhao, L. va Kallan, J., Muddatning zarurligini bashorat qilish, Axborot va bilimlarni boshqarish bo'yicha 19-ACM konferentsiyasi materiallari (CIKM 2010). Toronto, Kanada, 2010 yil.
  3. ^ a b Zhao, L. va Callan, J., Tanlangan so'rovlarni kengaytirish uchun avtomatik termin mos kelmaslik diagnostikasi, SIGIR 2012.