АРЧ АП11 - Оркестрация: дожать агентный прогон по выбору компании и возрасту активности в 1С

llm_normalizer/data/eval_cases/assistant_autogen_saved_user_sessions_20260417120833_gen-ag04171208-438c43.json

@@ -0,0 +1,58 @@
+{
+  "suite_id": "assistant_saved_session_gen-ag04171208-438c43",
+  "suite_version": "0.1.0",
+  "schema_version": "assistant_saved_session_suite_v0_1",
+  "generated_at": "2026-04-17T12:08:33+00:00",
+  "generation_id": "gen-ag04171208-438c43",
+  "mode": "saved_user_sessions",
+  "title": "AGENT | AssistantService boundary and transition delegation replay over mixed contextual chains",
+  "domain": "address_phase5_assistantservice_boundary_transition_mix",
+  "scenario_count": 1,
+  "case_ids": [
+    "SAVED-001"
+  ],
+  "cases": [
+    {
+      "case_id": "SAVED-001",
+      "scenario_tag": "agent_saved_user_sessions",
+      "title": "AGENT | AssistantService boundary and transition delegation replay over mixed contextual chains",
+      "question_type": "followup",
+      "broadness_level": "medium",
+      "turns": [
+        {
+          "user_message": "привет, как дела?"
+        },
+        {
+          "user_message": "по какой компании мы сейчас работаем?"
+        },
+        {
+          "user_message": "какие остатки на складе на март 2021"
+        },
+        {
+          "user_message": "По выбранному объекту \"Столешница 600*3050*26 альмандин\": кто нам это поставил?"
+        },
+        {
+          "user_message": "По выбранному объекту \"Столешница 600*3050*26 альмандин\": покажи документы по этой позиции"
+        },
+        {
+          "user_message": "покажи еще раз остатки на эту же дату"
+        },
+        {
+          "user_message": "а какой возраст у Альтернативы Плюс?"
+        },
+        {
+          "user_message": "что ты умеешь?"
+        },
+        {
+          "user_message": "а ты помнишь, что мы по этой позиции уже выяснили?"
+        },
+        {
+          "user_message": "кто нам должен на март 2020"
+        },
+        {
+          "user_message": "остатки по складу на эту же дату"
+        }
+      ]
+    }
+  ]
+}

llm_normalizer/data/eval_cases/assistant_autogen_saved_user_sessions_20260417132600_gen-ag04171326-15a132.json

@@ -0,0 +1,64 @@
+{
+  "suite_id": "assistant_saved_session_gen-ag04171326-15a132",
+  "suite_version": "0.1.0",
+  "schema_version": "assistant_saved_session_suite_v0_1",
+  "generated_at": "2026-04-17T13:26:00+00:00",
+  "generation_id": "gen-ag04171326-15a132",
+  "mode": "saved_user_sessions",
+  "title": "AGENT replay for company selection continuity and organization activity age",
+  "domain": "address_phase5_company_selection_and_activity_age",
+  "scenario_count": 1,
+  "case_ids": [
+    "SAVED-001"
+  ],
+  "cases": [
+    {
+      "case_id": "SAVED-001",
+      "scenario_tag": "agent_saved_user_sessions",
+      "title": "AGENT replay for company selection continuity and organization activity age",
+      "question_type": "followup",
+      "broadness_level": "medium",
+      "turns": [
+        {
+          "user_message": "привет, как дела?"
+        },
+        {
+          "user_message": "по какой компании мы сейчас работаем?"
+        },
+        {
+          "user_message": "какие остатки на складе на март 2021"
+        },
+        {
+          "user_message": "давай по Альтернативе Плюс"
+        },
+        {
+          "user_message": "тогда покажи остатки на март 2021"
+        },
+        {
+          "user_message": "По выбранному объекту \"Столешница 600*3050*26 альмандин\": кто нам это поставил?"
+        },
+        {
+          "user_message": "По выбранному объекту \"Столешница 600*3050*26 альмандин\": покажи документы по этой позиции"
+        },
+        {
+          "user_message": "покажи еще раз остатки на эту же дату"
+        },
+        {
+          "user_message": "а по Альтернативе Плюс сколько лет активности в базе 1С?"
+        },
+        {
+          "user_message": "что ты умеешь?"
+        },
+        {
+          "user_message": "а ты помнишь, что мы по этой позиции уже выяснили?"
+        },
+        {
+          "user_message": "кто нам должен на март 2020"
+        },
+        {
+          "user_message": "остатки по складу на эту же дату"
+        }
+      ]
+    }
+  ]
+}

llm_normalizer/data/eval_cases/assistant_saved_session_runtime_job-5avHfzugTU.json

@@ -0,0 +1,54 @@
+{
+  "suite_id": "assistant_saved_session_runtime_job-5avHfzugTU",
+  "suite_version": "0.1.0",
+  "schema_version": "assistant_saved_session_runtime_v0_1",
+  "title": "AGENT | AssistantService boundary and transition delegation replay over mixed contextual chains",
+  "scenario_count": 1,
+  "case_ids": [
+    "SAVED-001"
+  ],
+  "cases": [
+    {
+      "case_id": "SAVED-001",
+      "scenario_tag": "saved_user_sessions_runtime",
+      "title": "AGENT | AssistantService boundary and transition delegation replay over mixed contextual chains",
+      "question_type": "followup",
+      "broadness_level": "medium",
+      "turns": [
+        {
+          "user_message": "привет, как дела?"
+        },
+        {
+          "user_message": "по какой компании мы сейчас работаем?"
+        },
+        {
+          "user_message": "какие остатки на складе на март 2021"
+        },
+        {
+          "user_message": "По выбранному объекту \"Столешница 600*3050*26 альмандин\": кто нам это поставил?"
+        },
+        {
+          "user_message": "По выбранному объекту \"Столешница 600*3050*26 альмандин\": покажи документы по этой позиции"
+        },
+        {
+          "user_message": "покажи еще раз остатки на эту же дату"
+        },
+        {
+          "user_message": "а какой возраст у Альтернативы Плюс?"
+        },
+        {
+          "user_message": "что ты умеешь?"
+        },
+        {
+          "user_message": "а ты помнишь, что мы по этой позиции уже выяснили?"
+        },
+        {
+          "user_message": "кто нам должен на март 2020"
+        },
+        {
+          "user_message": "остатки по складу на эту же дату"
+        }
+      ]
+    }
+  ]
+}

llm_normalizer/data/eval_cases/assistant_saved_session_runtime_job-aJPgUUMefn.json

@@ -0,0 +1,60 @@
+{
+  "suite_id": "assistant_saved_session_runtime_job-aJPgUUMefn",
+  "suite_version": "0.1.0",
+  "schema_version": "assistant_saved_session_runtime_v0_1",
+  "title": "AGENT replay for company selection continuity and organization activity age",
+  "scenario_count": 1,
+  "case_ids": [
+    "SAVED-001"
+  ],
+  "cases": [
+    {
+      "case_id": "SAVED-001",
+      "scenario_tag": "saved_user_sessions_runtime",
+      "title": "AGENT replay for company selection continuity and organization activity age",
+      "question_type": "followup",
+      "broadness_level": "medium",
+      "turns": [
+        {
+          "user_message": "привет, как дела?"
+        },
+        {
+          "user_message": "по какой компании мы сейчас работаем?"
+        },
+        {
+          "user_message": "какие остатки на складе на март 2021"
+        },
+        {
+          "user_message": "давай по Альтернативе Плюс"
+        },
+        {
+          "user_message": "тогда покажи остатки на март 2021"
+        },
+        {
+          "user_message": "По выбранному объекту \"Столешница 600*3050*26 альмандин\": кто нам это поставил?"
+        },
+        {
+          "user_message": "По выбранному объекту \"Столешница 600*3050*26 альмандин\": покажи документы по этой позиции"
+        },
+        {
+          "user_message": "покажи еще раз остатки на эту же дату"
+        },
+        {
+          "user_message": "а по Альтернативе Плюс сколько лет активности в базе 1С?"
+        },
+        {
+          "user_message": "что ты умеешь?"
+        },
+        {
+          "user_message": "а ты помнишь, что мы по этой позиции уже выяснили?"
+        },
+        {
+          "user_message": "кто нам должен на март 2020"
+        },
+        {
+          "user_message": "остатки по складу на эту же дату"
+        }
+      ]
+    }
+  ]
+}