АРЧ АП11 - Добавить scenario acceptance gate для truth harness и закрыть Phase 7 агентным прогоном

2026-04-17 12:17:47 +03:00
parent f5ff844105
commit f7edf6aacb
9 changed files with 811 additions and 3 deletions
@@ -0,0 +1,43 @@
+{
+  "suite_id": "assistant_saved_session_gen-ag04170911-ff51e1",
+  "suite_version": "0.1.0",
+  "schema_version": "assistant_saved_session_suite_v0_1",
+  "generated_at": "2026-04-17T09:11:27+00:00",
+  "generation_id": "gen-ag04170911-ff51e1",
+  "mode": "saved_user_sessions",
+  "title": "AGENT | Phase 7 acceptance replay for inventory root, selected-object continuity, and human meta boundaries",
+  "domain": "address_phase7_acceptance_gate_mix",
+  "scenario_count": 1,
+  "case_ids": [
+    "SAVED-001"
+  ],
+  "cases": [
+    {
+      "case_id": "SAVED-001",
+      "scenario_tag": "agent_saved_user_sessions",
+      "title": "AGENT | Phase 7 acceptance replay for inventory root, selected-object continuity, and human meta boundaries",
+      "question_type": "followup",
+      "broadness_level": "medium",
+      "turns": [
+        {
+          "user_message": "какие остатки на складе на март 2021"
+        },
+        {
+          "user_message": "По выбранному объекту \"Столешница 600*3050*26 альмандин\": кто нам это поставил?"
+        },
+        {
+          "user_message": "По выбранному объекту \"Столешница 600*3050*26 альмандин\": покажи документы по этой позиции"
+        },
+        {
+          "user_message": "покажи еще раз остатки на эту же дату"
+        },
+        {
+          "user_message": "по какой компании мы сейчас работаем?"
+        },
+        {
+          "user_message": "а исторические остатки тоже можешь?"
+        }
+      ]
+    }
+  ]
+}
@@ -0,0 +1,39 @@
+{
+  "suite_id": "assistant_saved_session_runtime_job-Z-vWMI8lw_",
+  "suite_version": "0.1.0",
+  "schema_version": "assistant_saved_session_runtime_v0_1",
+  "title": "AGENT | Phase 7 acceptance replay for inventory root, selected-object continuity, and human meta boundaries",
+  "scenario_count": 1,
+  "case_ids": [
+    "SAVED-001"
+  ],
+  "cases": [
+    {
+      "case_id": "SAVED-001",
+      "scenario_tag": "saved_user_sessions_runtime",
+      "title": "AGENT | Phase 7 acceptance replay for inventory root, selected-object continuity, and human meta boundaries",
+      "question_type": "followup",
+      "broadness_level": "medium",
+      "turns": [
+        {
+          "user_message": "какие остатки на складе на март 2021"
+        },
+        {
+          "user_message": "По выбранному объекту \"Столешница 600*3050*26 альмандин\": кто нам это поставил?"
+        },
+        {
+          "user_message": "По выбранному объекту \"Столешница 600*3050*26 альмандин\": покажи документы по этой позиции"
+        },
+        {
+          "user_message": "покажи еще раз остатки на эту же дату"
+        },
+        {
+          "user_message": "по какой компании мы сейчас работаем?"
+        },
+        {
+          "user_message": "а исторические остатки тоже можешь?"
+        }
+      ]
+    }
+  ]
+}
@@ -0,0 +1,36 @@
+{
+  "suite_id": "assistant_saved_session_runtime_job-otA7X9BRT5",
+  "suite_version": "0.1.0",
+  "schema_version": "assistant_saved_session_runtime_v0_1",
+  "title": "AGENT | Phase 6 provider/runtime replay across chat, meta, and address boundaries",
+  "scenario_count": 1,
+  "case_ids": [
+    "SAVED-001"
+  ],
+  "cases": [
+    {
+      "case_id": "SAVED-001",
+      "scenario_tag": "saved_user_sessions_runtime",
+      "title": "AGENT | Phase 6 provider/runtime replay across chat, meta, and address boundaries",
+      "question_type": "followup",
+      "broadness_level": "medium",
+      "turns": [
+        {
+          "user_message": "привет, как дела?"
+        },
+        {
+          "user_message": "по какой компании мы сейчас работаем?"
+        },
+        {
+          "user_message": "что ты можешь по 1С?"
+        },
+        {
+          "user_message": "какие остатки на складе на март 2021"
+        },
+        {
+          "user_message": "а исторические остатки тоже можешь?"
+        }
+      ]
+    }
+  ]
+}