Сценарии работы с модулями ScrephScenarios using Screph modules

Для сценария недостаточно координат: нужны идентификатор объекта, визуальные признаки, состояния и данные для проверки.Coordinates alone are insufficient for a scenario: it needs object identity, visual features, states and verification data.

Экран или окно Windows, один снимок либо записанная последовательность.A Windows screen or window, a still image or a recorded sequence.

В проекте создаются элементы, отношения и аннотации. OCR, сопоставление и другие методы компьютерного зрения применяются при необходимости; предлагаемые результаты проверяются отдельно.The project stores elements, relations and annotations. OCR, matching and other computer-vision methods are optional; proposed results are reviewed separately.

Основной проект для Automation Runtime, выбранный main.py и отдельный контекст for_ai_agent для Screph Code или другого агентного инструмента.A main project for Automation Runtime, the selected main.py, and a separate for_ai_agent context for Screph Code or another agent tool.

Отдельный блокнот OpenCV сам по себе не связывает область интереса, параметры, визуальный результат и изменение проекта.An OpenCV notebook alone does not link the region of interest, parameters, visual output and project changes.

Изображение, снимок экрана или проверенный набор видео и папок.An image, screenshot or validated set of videos and folders.

Область интереса связывается с методом, линейной последовательностью или графом методов. Исходные данные сравниваются с результатом, маской, контурами, OCR и метриками.A region of interest is linked to a method, linear sequence or method graph. Source data is compared with the result, mask, contours, OCR and metrics.

Параметры методов, журнал выполнения и отдельные файлы результатов. Изменения элементов и признаков основного проекта сохраняются только после отдельного применения.Method parameters, an execution trace and separate result files. Changes to main-project elements and features are stored only after separate application.

Журнал нажатий клавиш и кнопок мыши не содержит проверенного визуального объекта, с которым взаимодействовал пользователь.A keyboard and pointer event log does not contain the reviewed visual object the user interacted with.

Запись действий с кадрами до, во время и после действия и с преобразованиями координат.An action recording with frames before, during and after the action and with coordinate transformations.

LLM предлагает план методов, методы компьютерного зрения исполняются локально, а предлагаемые результаты сравниваются с исходными кадрами и принимаются, изменяются или отклоняются отдельно.An LLM proposes a method plan, computer-vision methods run locally, and proposed results are compared with the source frames and accepted, edited or rejected separately.

Решения проверки, предлагаемые цели, сведения об их происхождении, предлагаемое изменение графа проекта и дополненный контекст автоматизации.Review decisions, proposed targets, provenance data, a proposed project-graph change and enriched automation context.

Общая разметка не содержит предметных типов дефекта, зоны измерения, области интереса, изменения и траектории.General markup does not include domain-specific types for defects, measurement zones, areas of interest, changes and tracks.

Промышленное изображение или область интереса либо кадр или серия UAV с доступными временными и пространственными данными.An industrial image or region of interest, or a UAV frame or series with available temporal and spatial data.

Создаётся задача выбранного режима, выполняется настроенный план методов, результаты сравниваются с исходными данными, а поддерживаемое изменение элемента или области применяется отдельно.A task for the selected mode is created, a configured method plan is executed, results are compared with the source data, and a supported element or region change is applied separately.

Основная разметка и отдельные файлы режима для дальнейшего исследования.Main markup and separate mode files for further investigation.