Kas gali būti įtrauktas į kontekstinį langą be naudotojo žinučių? Kodėl naujas tuščias pokalbis gali būti užpildytas 15%?

В контекстное окно помимо сообщений пользователя могут входить:

• Сообщения ассистента (бота), чтобы поддерживать диалог и учитывать предыдущие ответы.
• Системные инструкции или подсказки, задающие поведение модели.
• Метаданные, например, информация о пользователе, настройках или целях диалога.
• История предыдущих сессий или сообщений для сохранения контекста.

Новый пустой чат может быть заполнен на 15% из-за того, что в контекст уже загружаются системные подсказки и инструкции, а также шаблоны приветственных сообщений или базовые настройки. Это необходимо для корректной работы модели и формирования релевантных ответов, даже если пользователь ещё не ввёл свои сообщения.