АРЧ АП11 - Добавить builder смешанных AGENT-прогонов и починить meta-memory recall в turnaround 11

2026-04-17 12:54:47 +03:00
parent f7edf6aacb
commit 9f0f7f3e79
22 changed files with 5765 additions and 65 deletions
@@ -1,4 +1,88 @@
 [
+  {
+    "generation_id": "gen-ag04170941-87680e",
+    "created_at": "2026-04-17T09:41:32+00:00",
+    "mode": "saved_user_sessions",
+    "title": "AGENT | Phase 7 mixed replay for documents, selected-object continuity, meta context, and cross-domain pivots",
+    "count": 14,
+    "domain": "address_phase7_meta_domain_mix",
+    "questions": [
+      "привет, как дела?",
+      "по какой компании мы сейчас работаем?",
+      "покажи все документы по чепурнову",
+      "что нам отгружал чепурнов, какой товар или услугу?",
+      "какие остатки на складе на март 2021",
+      "По выбранному объекту \"Столешница 600*3050*26 альмандин\": кто нам это поставил?",
+      "что ты умеешь?",
+      "По выбранному объекту \"Столешница 600*3050*26 альмандин\": покажи документы по этой позиции",
+      "а ты помнишь, что мы по этой позиции уже выяснили?",
+      "покажи еще раз остатки на эту же дату",
+      "кто нам должен на март 2020",
+      "остатки по складу на эту же дату",
+      "а исторические остатки тоже можешь?",
+      "хвосты покажи по счету 60 на август 2022"
+    ],
+    "generated_by": "codex_agent",
+    "saved_case_set_file": "assistant_autogen_saved_user_sessions_20260417094132_gen-ag04170941-87680e.json",
+    "context": {
+      "llm_provider": null,
+      "model": null,
+      "assistant_prompt_version": null,
+      "decomposition_prompt_version": null,
+      "prompt_fingerprint": null,
+      "autogen_personality_id": null,
+      "autogen_personality_prompt": null,
+      "source_session_id": null,
+      "saved_session_file": "assistant_saved_session_20260417094132_gen-ag04170941-87680e.json",
+      "saved_case_set_kind": "agent_semantic_scenario",
+      "agent_run": true,
+      "agent_focus": "mixed documents meta and cross-domain replay for turnaround 11",
+      "architecture_phase": "turnaround_11_phase7",
+      "source_spec_file": "X:\\1C\\NDC_1C\\docs\\orchestration\\address_truth_harness_phase7_meta_domain_mix.json"
+    }
+  },
+  {
+    "generation_id": "gen-ag04170931-6bb7e5",
+    "created_at": "2026-04-17T09:31:44+00:00",
+    "mode": "saved_user_sessions",
+    "title": "AGENT | Phase 7 mixed replay for documents, selected-object continuity, meta context, and cross-domain pivots",
+    "count": 14,
+    "domain": "address_phase7_meta_domain_mix",
+    "questions": [
+      "привет, как дела?",
+      "по какой компании мы сейчас работаем?",
+      "покажи все документы по чепурнову",
+      "что нам отгружал чепурнов, какой товар или услугу?",
+      "какие остатки на складе на март 2021",
+      "По выбранному объекту \"Столешница 600*3050*26 альмандин\": кто нам это поставил?",
+      "что ты умеешь?",
+      "По выбранному объекту \"Столешница 600*3050*26 альмандин\": покажи документы по этой позиции",
+      "а ты помнишь, что мы по этой позиции уже выяснили?",
+      "покажи еще раз остатки на эту же дату",
+      "кто нам должен на март 2020",
+      "остатки по складу на эту же дату",
+      "а исторические остатки тоже можешь?",
+      "хвосты покажи по счету 60 на август 2022"
+    ],
+    "generated_by": "codex_agent",
+    "saved_case_set_file": "assistant_autogen_saved_user_sessions_20260417093144_gen-ag04170931-6bb7e5.json",
+    "context": {
+      "llm_provider": null,
+      "model": null,
+      "assistant_prompt_version": null,
+      "decomposition_prompt_version": null,
+      "prompt_fingerprint": null,
+      "autogen_personality_id": null,
+      "autogen_personality_prompt": null,
+      "source_session_id": null,
+      "saved_session_file": "assistant_saved_session_20260417093144_gen-ag04170931-6bb7e5.json",
+      "saved_case_set_kind": "agent_semantic_scenario",
+      "agent_run": true,
+      "agent_focus": "mixed documents meta and cross-domain replay for turnaround 11",
+      "architecture_phase": "turnaround_11_phase7",
+      "source_spec_file": "X:\\1C\\NDC_1C\\docs\\orchestration\\address_truth_harness_phase7_meta_domain_mix.json"
+    }
+  },
  {
    "generation_id": "gen-ag04170911-ff51e1",
    "created_at": "2026-04-17T09:11:27+00:00",
@@ -0,0 +1,173 @@
+{
+  "saved_at": "2026-04-17T09:31:44+00:00",
+  "generation_id": "gen-ag04170931-6bb7e5",
+  "mode": "saved_user_sessions",
+  "title": "AGENT | Phase 7 mixed replay for documents, selected-object continuity, meta context, and cross-domain pivots",
+  "agent_run": true,
+  "questions": [
+    "привет, как дела?",
+    "по какой компании мы сейчас работаем?",
+    "покажи все документы по чепурнову",
+    "что нам отгружал чепурнов, какой товар или услугу?",
+    "какие остатки на складе на март 2021",
+    "По выбранному объекту \"Столешница 600*3050*26 альмандин\": кто нам это поставил?",
+    "что ты умеешь?",
+    "По выбранному объекту \"Столешница 600*3050*26 альмандин\": покажи документы по этой позиции",
+    "а ты помнишь, что мы по этой позиции уже выяснили?",
+    "покажи еще раз остатки на эту же дату",
+    "кто нам должен на март 2020",
+    "остатки по складу на эту же дату",
+    "а исторические остатки тоже можешь?",
+    "хвосты покажи по счету 60 на август 2022"
+  ],
+  "metadata": {
+    "assistant_prompt_version": null,
+    "decomposition_prompt_version": null,
+    "prompt_fingerprint": null,
+    "agent_focus": "mixed documents meta and cross-domain replay for turnaround 11",
+    "architecture_phase": "turnaround_11_phase7",
+    "source_spec_file": "X:\\1C\\NDC_1C\\docs\\orchestration\\address_truth_harness_phase7_meta_domain_mix.json"
+  },
+  "source_session_id": null,
+  "session": {
+    "session_id": null,
+    "mode": "agent_semantic_run",
+    "items": [
+      {
+        "message_id": "agent-user-001",
+        "role": "user",
+        "text": "привет, как дела?",
+        "created_at": "2026-04-17T09:31:44+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      },
+      {
+        "message_id": "agent-user-002",
+        "role": "user",
+        "text": "по какой компании мы сейчас работаем?",
+        "created_at": "2026-04-17T09:31:44+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      },
+      {
+        "message_id": "agent-user-003",
+        "role": "user",
+        "text": "покажи все документы по чепурнову",
+        "created_at": "2026-04-17T09:31:44+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      },
+      {
+        "message_id": "agent-user-004",
+        "role": "user",
+        "text": "что нам отгружал чепурнов, какой товар или услугу?",
+        "created_at": "2026-04-17T09:31:44+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      },
+      {
+        "message_id": "agent-user-005",
+        "role": "user",
+        "text": "какие остатки на складе на март 2021",
+        "created_at": "2026-04-17T09:31:44+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      },
+      {
+        "message_id": "agent-user-006",
+        "role": "user",
+        "text": "По выбранному объекту \"Столешница 600*3050*26 альмандин\": кто нам это поставил?",
+        "created_at": "2026-04-17T09:31:44+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      },
+      {
+        "message_id": "agent-user-007",
+        "role": "user",
+        "text": "что ты умеешь?",
+        "created_at": "2026-04-17T09:31:44+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      },
+      {
+        "message_id": "agent-user-008",
+        "role": "user",
+        "text": "По выбранному объекту \"Столешница 600*3050*26 альмандин\": покажи документы по этой позиции",
+        "created_at": "2026-04-17T09:31:44+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      },
+      {
+        "message_id": "agent-user-009",
+        "role": "user",
+        "text": "а ты помнишь, что мы по этой позиции уже выяснили?",
+        "created_at": "2026-04-17T09:31:44+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      },
+      {
+        "message_id": "agent-user-010",
+        "role": "user",
+        "text": "покажи еще раз остатки на эту же дату",
+        "created_at": "2026-04-17T09:31:44+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      },
+      {
+        "message_id": "agent-user-011",
+        "role": "user",
+        "text": "кто нам должен на март 2020",
+        "created_at": "2026-04-17T09:31:44+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      },
+      {
+        "message_id": "agent-user-012",
+        "role": "user",
+        "text": "остатки по складу на эту же дату",
+        "created_at": "2026-04-17T09:31:44+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      },
+      {
+        "message_id": "agent-user-013",
+        "role": "user",
+        "text": "а исторические остатки тоже можешь?",
+        "created_at": "2026-04-17T09:31:44+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      },
+      {
+        "message_id": "agent-user-014",
+        "role": "user",
+        "text": "хвосты покажи по счету 60 на август 2022",
+        "created_at": "2026-04-17T09:31:44+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      }
+    ],
+    "agent_run": true,
+    "metadata": {
+      "assistant_prompt_version": null,
+      "decomposition_prompt_version": null,
+      "prompt_fingerprint": null,
+      "agent_focus": "mixed documents meta and cross-domain replay for turnaround 11",
+      "architecture_phase": "turnaround_11_phase7",
+      "source_spec_file": "X:\\1C\\NDC_1C\\docs\\orchestration\\address_truth_harness_phase7_meta_domain_mix.json"
+    }
+  }
+}
@@ -0,0 +1,173 @@
+{
+  "saved_at": "2026-04-17T09:41:32+00:00",
+  "generation_id": "gen-ag04170941-87680e",
+  "mode": "saved_user_sessions",
+  "title": "AGENT | Phase 7 mixed replay for documents, selected-object continuity, meta context, and cross-domain pivots",
+  "agent_run": true,
+  "questions": [
+    "привет, как дела?",
+    "по какой компании мы сейчас работаем?",
+    "покажи все документы по чепурнову",
+    "что нам отгружал чепурнов, какой товар или услугу?",
+    "какие остатки на складе на март 2021",
+    "По выбранному объекту \"Столешница 600*3050*26 альмандин\": кто нам это поставил?",
+    "что ты умеешь?",
+    "По выбранному объекту \"Столешница 600*3050*26 альмандин\": покажи документы по этой позиции",
+    "а ты помнишь, что мы по этой позиции уже выяснили?",
+    "покажи еще раз остатки на эту же дату",
+    "кто нам должен на март 2020",
+    "остатки по складу на эту же дату",
+    "а исторические остатки тоже можешь?",
+    "хвосты покажи по счету 60 на август 2022"
+  ],
+  "metadata": {
+    "assistant_prompt_version": null,
+    "decomposition_prompt_version": null,
+    "prompt_fingerprint": null,
+    "agent_focus": "mixed documents meta and cross-domain replay for turnaround 11",
+    "architecture_phase": "turnaround_11_phase7",
+    "source_spec_file": "X:\\1C\\NDC_1C\\docs\\orchestration\\address_truth_harness_phase7_meta_domain_mix.json"
+  },
+  "source_session_id": null,
+  "session": {
+    "session_id": null,
+    "mode": "agent_semantic_run",
+    "items": [
+      {
+        "message_id": "agent-user-001",
+        "role": "user",
+        "text": "привет, как дела?",
+        "created_at": "2026-04-17T09:41:32+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      },
+      {
+        "message_id": "agent-user-002",
+        "role": "user",
+        "text": "по какой компании мы сейчас работаем?",
+        "created_at": "2026-04-17T09:41:32+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      },
+      {
+        "message_id": "agent-user-003",
+        "role": "user",
+        "text": "покажи все документы по чепурнову",
+        "created_at": "2026-04-17T09:41:32+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      },
+      {
+        "message_id": "agent-user-004",
+        "role": "user",
+        "text": "что нам отгружал чепурнов, какой товар или услугу?",
+        "created_at": "2026-04-17T09:41:32+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      },
+      {
+        "message_id": "agent-user-005",
+        "role": "user",
+        "text": "какие остатки на складе на март 2021",
+        "created_at": "2026-04-17T09:41:32+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      },
+      {
+        "message_id": "agent-user-006",
+        "role": "user",
+        "text": "По выбранному объекту \"Столешница 600*3050*26 альмандин\": кто нам это поставил?",
+        "created_at": "2026-04-17T09:41:32+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      },
+      {
+        "message_id": "agent-user-007",
+        "role": "user",
+        "text": "что ты умеешь?",
+        "created_at": "2026-04-17T09:41:32+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      },
+      {
+        "message_id": "agent-user-008",
+        "role": "user",
+        "text": "По выбранному объекту \"Столешница 600*3050*26 альмандин\": покажи документы по этой позиции",
+        "created_at": "2026-04-17T09:41:32+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      },
+      {
+        "message_id": "agent-user-009",
+        "role": "user",
+        "text": "а ты помнишь, что мы по этой позиции уже выяснили?",
+        "created_at": "2026-04-17T09:41:32+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      },
+      {
+        "message_id": "agent-user-010",
+        "role": "user",
+        "text": "покажи еще раз остатки на эту же дату",
+        "created_at": "2026-04-17T09:41:32+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      },
+      {
+        "message_id": "agent-user-011",
+        "role": "user",
+        "text": "кто нам должен на март 2020",
+        "created_at": "2026-04-17T09:41:32+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      },
+      {
+        "message_id": "agent-user-012",
+        "role": "user",
+        "text": "остатки по складу на эту же дату",
+        "created_at": "2026-04-17T09:41:32+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      },
+      {
+        "message_id": "agent-user-013",
+        "role": "user",
+        "text": "а исторические остатки тоже можешь?",
+        "created_at": "2026-04-17T09:41:32+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      },
+      {
+        "message_id": "agent-user-014",
+        "role": "user",
+        "text": "хвосты покажи по счету 60 на август 2022",
+        "created_at": "2026-04-17T09:41:32+00:00",
+        "reply_type": null,
+        "trace_id": null,
+        "debug": null
+      }
+    ],
+    "agent_run": true,
+    "metadata": {
+      "assistant_prompt_version": null,
+      "decomposition_prompt_version": null,
+      "prompt_fingerprint": null,
+      "agent_focus": "mixed documents meta and cross-domain replay for turnaround 11",
+      "architecture_phase": "turnaround_11_phase7",
+      "source_spec_file": "X:\\1C\\NDC_1C\\docs\\orchestration\\address_truth_harness_phase7_meta_domain_mix.json"
+    }
+  }
+}
@@ -0,0 +1,67 @@
+{
+  "suite_id": "assistant_saved_session_gen-ag04170931-6bb7e5",
+  "suite_version": "0.1.0",
+  "schema_version": "assistant_saved_session_suite_v0_1",
+  "generated_at": "2026-04-17T09:31:44+00:00",
+  "generation_id": "gen-ag04170931-6bb7e5",
+  "mode": "saved_user_sessions",
+  "title": "AGENT | Phase 7 mixed replay for documents, selected-object continuity, meta context, and cross-domain pivots",
+  "domain": "address_phase7_meta_domain_mix",
+  "scenario_count": 1,
+  "case_ids": [
+    "SAVED-001"
+  ],
+  "cases": [
+    {
+      "case_id": "SAVED-001",
+      "scenario_tag": "agent_saved_user_sessions",
+      "title": "AGENT | Phase 7 mixed replay for documents, selected-object continuity, meta context, and cross-domain pivots",
+      "question_type": "followup",
+      "broadness_level": "medium",
+      "turns": [
+        {
+          "user_message": "привет, как дела?"
+        },
+        {
+          "user_message": "по какой компании мы сейчас работаем?"
+        },
+        {
+          "user_message": "покажи все документы по чепурнову"
+        },
+        {
+          "user_message": "что нам отгружал чепурнов, какой товар или услугу?"
+        },
+        {
+          "user_message": "какие остатки на складе на март 2021"
+        },
+        {
+          "user_message": "По выбранному объекту \"Столешница 600*3050*26 альмандин\": кто нам это поставил?"
+        },
+        {
+          "user_message": "что ты умеешь?"
+        },
+        {
+          "user_message": "По выбранному объекту \"Столешница 600*3050*26 альмандин\": покажи документы по этой позиции"
+        },
+        {
+          "user_message": "а ты помнишь, что мы по этой позиции уже выяснили?"
+        },
+        {
+          "user_message": "покажи еще раз остатки на эту же дату"
+        },
+        {
+          "user_message": "кто нам должен на март 2020"
+        },
+        {
+          "user_message": "остатки по складу на эту же дату"
+        },
+        {
+          "user_message": "а исторические остатки тоже можешь?"
+        },
+        {
+          "user_message": "хвосты покажи по счету 60 на август 2022"
+        }
+      ]
+    }
+  ]
+}
@@ -0,0 +1,67 @@
+{
+  "suite_id": "assistant_saved_session_gen-ag04170941-87680e",
+  "suite_version": "0.1.0",
+  "schema_version": "assistant_saved_session_suite_v0_1",
+  "generated_at": "2026-04-17T09:41:32+00:00",
+  "generation_id": "gen-ag04170941-87680e",
+  "mode": "saved_user_sessions",
+  "title": "AGENT | Phase 7 mixed replay for documents, selected-object continuity, meta context, and cross-domain pivots",
+  "domain": "address_phase7_meta_domain_mix",
+  "scenario_count": 1,
+  "case_ids": [
+    "SAVED-001"
+  ],
+  "cases": [
+    {
+      "case_id": "SAVED-001",
+      "scenario_tag": "agent_saved_user_sessions",
+      "title": "AGENT | Phase 7 mixed replay for documents, selected-object continuity, meta context, and cross-domain pivots",
+      "question_type": "followup",
+      "broadness_level": "medium",
+      "turns": [
+        {
+          "user_message": "привет, как дела?"
+        },
+        {
+          "user_message": "по какой компании мы сейчас работаем?"
+        },
+        {
+          "user_message": "покажи все документы по чепурнову"
+        },
+        {
+          "user_message": "что нам отгружал чепурнов, какой товар или услугу?"
+        },
+        {
+          "user_message": "какие остатки на складе на март 2021"
+        },
+        {
+          "user_message": "По выбранному объекту \"Столешница 600*3050*26 альмандин\": кто нам это поставил?"
+        },
+        {
+          "user_message": "что ты умеешь?"
+        },
+        {
+          "user_message": "По выбранному объекту \"Столешница 600*3050*26 альмандин\": покажи документы по этой позиции"
+        },
+        {
+          "user_message": "а ты помнишь, что мы по этой позиции уже выяснили?"
+        },
+        {
+          "user_message": "покажи еще раз остатки на эту же дату"
+        },
+        {
+          "user_message": "кто нам должен на март 2020"
+        },
+        {
+          "user_message": "остатки по складу на эту же дату"
+        },
+        {
+          "user_message": "а исторические остатки тоже можешь?"
+        },
+        {
+          "user_message": "хвосты покажи по счету 60 на август 2022"
+        }
+      ]
+    }
+  ]
+}