Речник

Сливане на класации по място

На английски RRF

Сливането на класации е начинът няколко подредби да станат една, като всеки резултат взима точки по мястото си и печели онзи, който е високо в повече.

3-ма интервюиращи са видели едни и същи кандидати.

Единият дава оценки от 1 до 10, вторият от 1 до 5, третият пише „да“ и „може би“. Как да ги съберете в едно решение?

Не можете да сумирате оценки на различни скали. Можете обаче да сумирате места: първи, втори, трети.

Точно това правят AI търсачките, когато търсят по 2 начина едновременно.

Сливане на класации е начин няколко подредби да се слеят в една, като всеки резултат получава точки по мястото си във всяка подредба, точките се събират и отгоре излизат тези, които стоят високо в повече списъци.

Бърз отговор

Сливането на класации е методът, при който всеки документ получава точки по мястото си във всяка подредба и подредбите стават една. Той е от 2009 г., не иска настройка и се ползва при търсене по думи и по смисъл.

Какво всъщност значи

На английски методът се казва „reciprocal rank fusion“ и името описва сметката.

„Rank“ е мястото в класацията. „Reciprocal“ значи, че точките са единица, разделена на мястото: първият взима повече от втория, вторият повече от третия.

„Fusion“ е сборът от всички списъци.

Методът е предложен като проста отправна точка и се оказва, че почти винаги подобрява най-добрия от слетите резултати и се равнява или надминава утвърдените дотогава методи.

Точките за документ са сборът от единица върху (постоянно число плюс място) по всяка класация.

Постоянното число е 60, избрано при пилотна проба и непроменяно след това.

Ролята му е да смекчи влиянието на високи места, дадени от система, която се отклонява от другите.

Elasticsearch добавя нещо важно.

Методът не иска настройка и отделните класации не трябва да са свързани помежду си, за да даде добър резултат.

Стойността по подразбиране там е 60, а по-високо число дава повече тежест на по-ниско класираните документи.

Бъркат го с усредняване на оценки.

Оценките от различни търсения са на различни скали и не се събират. Сливането на класации нарочно ги изхвърля и гледа само местата.

Защо това ви засяга

Върнете се при 3-мата интервюиращи.

Кандидат, когото и 3-мата слагат на второ място, ще победи кандидат, когото единият слага на първо, а другите 2-ма не споменават.

Това е решението на комисията и то е разумно: съгласието на 3-ма тежи повече от възторга на един.

AI търсачките, които отговарят с текст, често търсят по 2 начина.

По думи, както класическата търсачка, и по смисъл, чрез числово представяне на текста.

В Azure AI Search на Microsoft сливането на класации се ползва винаги когато 2 или повече търсения вървят едновременно, например при търсене по думи и по смисъл наведнъж.

Документите, които са отгоре по няколко метода, вероятно са по-подходящи и трябва да са по-високо в общия резултат.

За вас изводът е един.

Страница, която е силна само по един от 2-та начина, губи от страница, която е прилична и по 2-та.

Разликата я плащате с поръчките, които отиват при по-подготвения конкурент.

Точното съвпадение на думите без ясен смисъл не стига.

Ясният смисъл без думите, които хората ползват, също.

Как изглежда на практика

Сливане на класации по място

Ходът е един и същ навсякъде.

Пускат се няколко търсения едновременно и всяко връща своя подреден списък.

На всеки документ във всеки списък се дават точки: единица върху (постоянно число плюс мястото му). Точките на един и същ документ от всички списъци се събират. Списъкът се пренарежда по сбора.

Microsoft дава числата за мащаба.

Търсене по думи плюс едно търсене по смисъл са 2 изпълнения.

По думи плюс едно търсене по смисъл върху 2 полета са 3. По думи плюс 2 търсения върху 5 полета са 11.

Всички те се сливат в един резултат.

Има и една особеност. Горната граница на сбора зависи от броя слети търсения, защото всяко може да добави най-много около единица върху постоянното число.

Сливането на 3 списъка дава по-високи сборове от сливането на 2.

Затова сборовете не се сравняват между различни търсения.

Доклад, който ги сравнява, ви струва поправки на грешното място.

Какво струва и какво носи

За собственик на сайт това не е нещо, което купувате или настройвате. То е обяснение защо AI търсачките се държат така, както се държат, и защо оферта, която обещава „оптимизация за търсене по смисъл“ отделно от думите, гледа само половината от сметката.

Платите ли само за нея, оставате слаби точно по другата половина.

Носи разбиране за мерилото, не първо място в един списък, а добро място в няколко. Рискът да не го знаете е да работите само за единия начин на търсене и да се чудите защо страницата не излиза там, къде точно излиза отговорът на Google.

Мястото в отговора не се купува, а се работи, и работата има обявена цена.

Накъде отива

Известното е ограничено.

Методът е от 2009 г. и в Elasticsearch и при Microsoft е обичайна стъпка при едновременни търсения.

След сливането може да следва още едно пренареждане по смисъл, с отделна оценка. Дали Google, ChatGPT или Perplexity ползват точно тази сметка във вътрешните си системи, никой от тях не е публикувал.

2 примера

Сервиз за климатици има 2 страници.

Едната е пълна с точните думи, които хората пишат, но обяснява малко. Другата обяснява добре, но с езика на техниците, не на клиентите.

При търсене по думи първата е отпред, при търсене по смисъл втората. След сливането и 2-те са по средата, а конкурентът, който е прилично и по 2-те, е отгоре.

Примерът на Elasticsearch.

Едно търсене по думата „обувки“ и едно търсене по смисъл се изпълняват поотделно, всяко връща най-добрите си 50 резултата, после на един възел 2-та списъка се сливат и пренареждат по сметката.

Въпросите, които ще ви хрумнат

Ако страницата ми е първа в Google по точната дума, значи ли, че ще е първа и при AI търсачките?

Не.

AI търсачките, които търсят по думи и по смисъл едновременно, събират местата от 2-та списъка, така че първо място по думи и слабо място по смисъл дава среден сбор. Страница, която е втора и по 2-та начина, може да излезе пред вас.

Кое се оправя първо, думите, които хората пишат, или обяснението по същество?

Това, което ви липсва.

Отворете страницата и я прочетете веднъж като клиент, който търси с точните си думи, и веднъж като човек, който описва проблема със свои думи.

Ако тя работи само за единия, добавете другото.

Точните думи в заглавието и първия абзац, ясното обяснение в тялото.

Как да проверя за 10 минути дали това ме засяга?

Пряко не можете, защото Google, ChatGPT и Perplexity не са публикували дали ползват този метод.

Можете обаче да проверите 2-те страни на сметката: пуснете в търсачката един и същ въпрос веднъж с жаргона на бранша и веднъж както би го казал клиент без опит.

Ако страницата ви излиза само при единия вариант, знаете кое ѝ липсва.

Прочетете най-важната си страница 2 пъти, на глас: веднъж като клиент, който търси с точните си думи, и веднъж като човек, който описва проблема със свои думи. Ако тя работи само за единия, вече знаете къде е загубата.