Задача: Изучение и тестирование форм.
Шаги.
Работа с DOM
1. Определение на странице сайта веб-объектов по принципу -(все что можно кликнуть, нажать) аналог функций EDGE(веб-объект) либо как у гугла в voice access "нумерация"
2. Обучение ИИ (TensorFlow, PyTorch и.т.д.) по текстам и изображения нужные классы ссылок.(с учётом: многоуровневый "вложения", модальные окна, фреймы и.т.д. ajax, javascript)
3. Обнаружение полей ввода. так же с обучением ИИ.
4. Заполнение полей, нужным контентом.
5. Анализ что всё успешно отработалось. окна модальные/ответы серверов 200,404/просто текст. что угодно с подтверждение.
6. Логирование, txt+скриншоты.
7. Интеграция с системой автоматизации(возможен ваш вариант).