cosine similarity w pracach FunkyMEDIA
Przygotowujemy korpusy, podział dokumentów, reprezentacje i proces pobierania kontekstu dla odpowiedzi opartych na źródłach.
Ten materiał opisuje zagadnienie „cosine similarity” w ramach powyższego obszaru prac. Poszczególne techniki dobieramy do problemu i zakresu współpracy.
Funkcja techniczna w realizacji
Miara zgodności kierunku dwóch niezerowych wektorów: cos(a,b) = (a·b)/(‖a‖‖b‖). Nie mierzy bezpośrednio prawdziwości tekstu.
Punkt kontroli tego elementu
Dla a=(1,0) i b=(1,1) wynik wynosi około 0,707; dla wektora zerowego wzór jest nieokreślony.
Obliczenie i granice interpretacji
a = (1, 0)
b = (1, 1)
a · b = 1
‖a‖ = 1; ‖b‖ = √2
cos(a,b) = 1 / √2 ≈ 0,7071Wynik dotyczy kierunku wektorów. Nie jest prawdopodobieństwem prawdziwości dokumentu ani odsetkiem zgodnych faktów. W ogólnej przestrzeni rzeczywistych niezerowych wektorów zakres wynosi od −1 do 1; rozkład wyników embeddingów zależy od modelu i danych.
Relacje w procesie pracy
| Relacja | Element | Znaczenie |
|---|---|---|
| Jest częścią obszaru prac | Projektowanie i kontrola rozwiązań RAG | Przypisanie elementu do zakresu realizacji FunkyMEDIA. |
| Może być używane w | vector search | Metryka porównania jest elementem konfiguracji wyszukiwania. |
Zakres pracy nadrzędnej
Przygotowujemy korpusy, podział dokumentów, reprezentacje i proces pobierania kontekstu dla odpowiedzi opartych na źródłach.
Konkretna konfiguracja i jej wdrożenie zależą od uzgodnionego środowiska i zakresu; nie każdy projekt wymaga RAG.
Ten element dobieramy do problemu w uzgodnionym zakresie; nie stanowi automatycznie osobnego pakietu usług.
Podstawy techniczne
- Stanford IR book — Dot products — cosine similarity niezerowych wektorów.