ФИНКИ / Вештачка интелигенција и податоциВеб пребарувачки системи.
Разбери како пребарувачите собираат, индексираат и рангираат информации и како се оценува нивниот квалитет.
<>РАЗБЕРИ. ПРИМЕНИ. НАПРЕДУВАЈ.+
- 01Документи, индекси и векторски репрезентации
- 02Обработка на прашања и метрики за евалуација
- 03ElasticSearch и практична работа со Python
- 04Персонализација, слики и јазични модели
02 / РАЗБЕРИ ГО КОНЦЕПТОТ
Логиката зад
решението.
Пребарувачот не треба секогаш да ја чита целата содржина за секое прашање. Инвертен индекс поврзува збор со документите каде се појавува. Рангирањето проценува релевантност, а обработката на јазикот ги усогласува варијациите. Квалитетот се мери со тоа дали корисникот навистина ги добива соодветните резултати.
ПРИМЕР ОД СЕКОЈДНЕВНАТА ПРАКТИКАИЛУСТРАТИВЕН ПРИМЕР
Пребарување во каталог на книги
Каталог има книги со зборови „алгоритми“, „бази“ и „програмирање“. Посетител бара „алгоритми програмирање“.
- 01
Ги обработуваме насловите и описите и создаваме индекс по термини.
- 02
Од индексот ги добиваме кандидатите што го исполнуваат избраниот AND или OR услов.
- 03
Ги рангираме и проверуваме дали најрелевантните книги се меѓу првите резултати.
↳Што добиваме?AND бара двата термина, OR барем еден. Рангирањето и очекувањето на корисникот се посебен дел од задачата.
Сценариото и податоците се поедноставени за учење. Примерот не претставува конкретен клиентски проект или измерени резултати од продукциски систем.
03 / СТУДЕНТСКИ ПРАШАЊА
Прашај.
Разбери подобро.
Дали повеќе резултати значат подобро пребарување?+
Не. Може да има многу нерелевантни резултати. Разгледај precision, recall и редоследот на релевантните документи.
Што прави анализаторот во Elasticsearch?+
Го преобразува текстот во термини според конфигурацијата. Индексирањето и прашањето треба да имаат усогласена обработка.
Дали пребарувањето е исто што и SQL LIKE?+
Не. Пребарувачките системи поддржуваат специјализирани индекси, јазична обработка и рангирање што едноставен LIKE не ги обезбедува.
Твојот материјал.
Нашата следна задача.
Работиме на делот што ти е најпотребен: основни концепти, практични задачи или подготовка за колоквиум и испит. Содржината ја усогласуваме со материјалите што ги учиш во твојата генерација.
REC ТВОЈОТ ЧАС
▶
РАЗБЕРИ. ПОВТОРИ. ПРИМЕНИ.↺
НЕ САМО ЕДНАШ. КОЛКУ ШТО ТИ ТРЕБА.Часот завршува.
Знаењето останува.
Секој час се снима. Врати се на објаснувањата, паузирај кај потешките делови и повтори ги задачите со свое темпо.
↺Снимките се достапни најмалку
во текот на еден семестар.
Снимките се наменети за твоето учење. Споделување и објавување се дозволени само по претходен договор.