Контент доступен только для PRO подписчиков
Чтобы получить доступ к полному содержанию этого исследования, оформите PRO подписку
Протознание формирует поведение LLMs в downstream задачах Запоминание и обобщение с знаниями
КЛЮЧЕВАЯ СУТЬ
Адаптировать под запрос
LLM работает с СЕМАНТИЧЕСКИМ СМЕЩЕНИЕМ – она гораздо лучше знает популярные темы, чем нишевые. Вместо того чтобы полагаться на внутренние знания модели, нужно превентивно предоставлять контекст прямо в промпте. Модель имеет ПРОТОЗНАНИЯ (усвоенную информацию о фактах и связях), но они неравномерны и смещены к популярным сущностям.