вы что намекаете на то, что ваша java система будет считывать окна системы, как чтец с экрана и переработав покажет его в текстовом виде с возможностью взаимодействия с ним?