Обратите внимание на системы атоматизированного тестирования приложений. Годная статья про них.
Их великое множество, есть дорогие, есть опенсорсные, под разные платформы, и т.д. Самые известные
- MS Coded UI - для десктоп-приложений
- Selenium (для web-приложений)
- Appium (для мобильных приложений)
Все они основаны на неких скриптовых макро-языках, и одна из главных задач этих макро-команд - попадать якобы-мышкой в элементы управления, вводить текст, выбирать опции из списков и так далее, то есть эмулировать работу реальных пльзователей.
Идентифицируют элементы управления эти системы по разному:
Если исследуемая программа уже существует и не меняется в процессе эксплуатации - скрипт нужно написать 1 раз, он будет разворачивать программу на полный экран и отлично попадать даже не зная названий элементов управления (по координатам).
Если же программа интенсивно меняется (особенно в части UI) - скрипты автоматизации QA резко теряют ценность, правильным является вопрос об их актуальности вообще до стабилизации UI.