Косинусна подібність (Cosine Similarity)(Косинусна подібність: простий математичний компас семантичного пошуку)
Математична метрика, що вимірює кут між двома векторами в багатовимірному просторі. Показує ступінь смислової спорідненості двох текстів від -1 (протилежні) до +1 (повні синоніми), ігноруючи довжину речень.
1. Огляд концепції та призначення
Уявіть два компаси. Якщо обидві стрілки дивляться на північ — кут між ними дорівнює нулю, а напрямок ідеально збігається. Якщо одна дивиться на північ, а інша на схід — кут складає 90 градусів.
Косинусна подібність (Cosine Similarity) — це саме такий компас для нейромереж:
- Вона бере два вектори (числові координати смислу двох фраз).
- Вимірює кут між ними у просторі понять.
- Повертає число від
0.0до1.0(або від -1 до 1), де 1.0 — це абсолютна смислова спорідненість.
Це фундаментальна математична формула, завдяки якій працюють ChatGPT при пошуку по файлах, Notion AI та векторні бази даних.
2. Наочна геометрія смислу
^ Поняття про їжу
│
│ / Текст А: «Купити свіжий хліб»
│ /
│ / ) кут близький до 0° -> косинус ≈ 0.96
│ /
│ /---- Текст Б: «Булочка з пекарні»
│
│
│─────────────────────────────> Поняття про IT
│ Текст В: «Написати скрипт на Python»
│ (кут 90° -> косинус ≈ 0.04)
3. Чому кут кращий за абсолютну довжину
У традиційній геометрії чим довша лінія, тим далі її кінець. Якби ми міряли звичайну відстань:
- Слово
«автомобіль»(короткий вектор). - Стаття у Вікіпедії про будову автомобілів на 10 сторінок (дуже довгий вектор з багатьма словами).
Евклідова відстань порахувала б їх різними речами, бо один текст короткий, а другий довгий. А косинус оцінює лише векторний напрямок думок, розуміючи: обидва тексти цілковито присвячені транспорту.
4. Порівняльна шкала косинусних оцінок
| Оцінка подібності | Що це означає | Приклад пари речень |
|---|---|---|
| 0.90 – 1.00 | Прямий синонім або дублікат | «Як замінити колесо» ↔ «Інструкція з монтажу шини» |
| 0.75 – 0.89 | Тісний контекстний зв'язок | «Кредитна картка» ↔ «Відсоткова ставка за позикою» |
| 0.40 – 0.70 | Далекий дотичний зв'язок | «Смартфон Apple» ↔ «Акумулятор для електрокара» |
| 0.00 – 0.30 | Повна відсутність зв'язку | «Вирощування полуниці» ↔ «Криптографічні ключі SSH» |
5. Практичний висновок для користувача
Коли ви налаштовуєте пошук у базі знань або корпоративному чат-боті, ви часто бачите параметр similarity_threshold = 0.75. Тепер ви знаєте: це фільтр косинуса, який відсікає всі документи, чий кут відхилення від запиту користувача перевищує допустиму похибку.
FAQ: Косинусна подібність (Cosine Similarity)
Пов'язані терміни
Ембеддінги на пальцях (Як текст стає числами)
Фундаментальна технологія перетворення слів, речень чи зображень у багатовимірні списки чисел (вектори). Дозволяє комп'ютеру математично вимірювати смислову близькість між різними думками та концепціями.
Векторні бази даних (Vector DBs & ANN Search)
Спеціалізовані СУБД та розширення (Qdrant, pgvector, Milvus, Chroma, Turso), оптимізовані для зберігання мільйонів багатовимірних векторів та надшвидкого наближеного пошуку найближчих сусідів (Approximate Nearest Neighbors).
Семантичний пошук (Пошук за змістом, а не за буквами)
Технологія пошуку інформації на основі концептуального змісту запиту, а не точного збігу літер чи ключових слів. Розуміє синоніми, перефразовування, помилки в словах та абстрактні питання природною мовою.
Пов'язані матеріали екосистеми
Дізнайтеся більше про практичну реалізацію, термінологію та інструменти
Семантичний пошук (Пошук за змістом, а не за буквами)
Технологія пошуку інформації на основі концептуального змісту запиту, а не точного збігу літер чи ключових слів. Розуміє синоніми, перефразовування, помилки в словах та абстрактні питання природною мовою.
Прихований простір (Latent Space)
Багатовимірний математичний векторний простір, створений нейромережею для внутрішнього представлення концепцій, стилів та образів. Дозволяє виконувати дивовижні арифметичні операції над поняттями: наприклад, «Король» мінус «Чоловік» плюс «Жінка» дорівнює «Королева».
Як створити власну дизайн-систему в Claude Design: від мудборду до анімованого маскота
Повний практичний посібник зі створення дизайн-системи бренду в Claude Design: збір візуальних референсів, генерація 4 концепцій, токенізація, стрес-тестування та розробка анімованого SVG-маскота.
50 стилів візуального дизайну: фундаментальний посібник для дизайн-систем, UI/UX та арт-дирекшну
Повний візуальний словник із 50 стилів дизайну: аналіз естетики, кольорові палітри, шрифтові пари, правила для дизайн-систем та точне керування ШІ.
OpenAI пропонує безкоштовні скидання підписникам
OpenAI надає безкоштовні скидання всім підписникам щодня, поки немає доступу до Astra.
Модель Astra від OpenAI тепер доступна всім підписникам
Модель Astra від OpenAI стала доступною для всіх підписників Plus, Pro, Enterprise та Business.