שליפת מידע

חדש באנתרופיק: Contextual Retrieval לשיפור דרמטי ב-RAG

אנתרופיק (Anthropic) מציגה את Contextual Retrieval, שיטה חדשנית לשיפור דרמטי של תהליך שליפת המידע במודלי שפה גדולים (LLM) המבוססים על ארכיטקטורת RAG (Retrieval-Augmented Generation). הפתרון מטפל בבעיית אובדן ההקשר בשליפת מידע מסורתית על ידי הוספת הקשר מפורש לכל קטע טקסט לפני הפיכתו ל-embedding או יצירת אינדקס BM25. באמצעות Contextual Embeddings ו-Contextual BM25, השיטה מצליחה להפחית את שיעור כשלי השליפה בעד 49%, ועם דירוג מחדש (Reranking) עד 67%. אנתרופיק מדגישה כי השיטה ניתנת לפריסה בעלות נמוכה במיוחד בזכות יכולות שמירת הפרומפטים במטמון של Claude.