GitHub Action
commited on
Commit
·
0116389
1
Parent(s):
6bc18d4
Sync from GitHub with Git LFS
Browse files
docs/HMP-agent-REPL-cycle.md
CHANGED
@@ -179,17 +179,21 @@ REPL-цикл является основой HMP-агента [Cognitive Core](
|
|
179 |
**«Оцени корректность данного сообщения в диапазоне от -3 (полностью некорректное)
|
180 |
до +3 (полностью корректное). Если не уверен — 0»**.
|
181 |
|
182 |
-
**Если количество валидаторов (LLM из `llm_registry
|
183 |
Результаты сохраняются в `llm_recent_responses` в виде:
|
|
|
184 |
- `rating` — агрегированная итоговая оценка (среднее арифметическое);
|
185 |
- `distribution` — распределение голосов (например `{"-1":1,"0":2,"+2":3,"+3":1}`);
|
186 |
- `validators` — список сырых оценок вида
|
187 |
`[{"LLM":"gpt-4","rating":-1}, {"LLM":"gemini-1.5","rating":0}, ...]`.
|
188 |
|
189 |
-
|
190 |
-
|
191 |
-
|
192 |
-
|
|
|
|
|
|
|
193 |
|
194 |
**Правило исполнения команд:**
|
195 |
Команды из сообщений выполняются только если `rating >= +1` или auto_pass = 1.
|
|
|
179 |
**«Оцени корректность данного сообщения в диапазоне от -3 (полностью некорректное)
|
180 |
до +3 (полностью корректное). Если не уверен — 0»**.
|
181 |
|
182 |
+
**Если количество валидаторов (LLM из `llm_registry`, помеченных как валидаторы) > 0**
|
183 |
Результаты сохраняются в `llm_recent_responses` в виде:
|
184 |
+
- `auto_pass = 0`
|
185 |
- `rating` — агрегированная итоговая оценка (среднее арифметическое);
|
186 |
- `distribution` — распределение голосов (например `{"-1":1,"0":2,"+2":3,"+3":1}`);
|
187 |
- `validators` — список сырых оценок вида
|
188 |
`[{"LLM":"gpt-4","rating":-1}, {"LLM":"gemini-1.5","rating":0}, ...]`.
|
189 |
|
190 |
+
**Особый случай, без валидаторов:**
|
191 |
+
Если количество валидаторов - 0, то `auto_pass = 1`, `rating = 0`, `distribution = {}`, `validators = []`.
|
192 |
+
|
193 |
+
**Особый случай самооценки:**
|
194 |
+
Если валидация выполняется только одной LLM, и она же используется в основном цикле,
|
195 |
+
это фиксируется в `validators` как самооценка. Достоверность результата ограничена,
|
196 |
+
но REPL продолжает работу. Рекомендуется использовать минимум 2 независимых валидатора.
|
197 |
|
198 |
**Правило исполнения команд:**
|
199 |
Команды из сообщений выполняются только если `rating >= +1` или auto_pass = 1.
|