Reranking

De eerste zoekstap is snel maar grof. Die kan honderden passages van wisselende kwaliteit opleveren.

Een rerankingmodel geeft elk van die passages een score voor de vraag. Alleen de beste gaan door naar het taalmodel.

In het eigen retrieval-voorbeeld van Anthropic leverde de eerste stap de beste 150 passages op, en gaf de reranker de beste 20 door.

Anthropic noemt reranking een veelgebruikte filtertechniek. Het geeft betere antwoorden en verlaagt de kosten, omdat het model minder leest.

Voor je pagina betekent het: gevonden worden is niet genoeg. De passage moet ook duidelijk relevant uitkomen voor de vraag.

• Maak de relevante passage overduidelijk over de vraag: noem het onderwerp in de kop en de eerste zin.
• Houd secties gefocust in plaats van meerdere onderwerpen te mengen.
• Onderbouw beweringen met concrete feiten, zodat elke passage inhoud heeft.

Passage ranking

Passage ranking is een benoemd systeem van Google Search. Reranking is een algemene stap die veel retrieval-systemen gebruiken.