Java 简单的颜色识别程序

我想用Java编写一个简单的颜色识别程序。我希望这将在后台运行，这样我就能够更改窗口。然后，当某个用户指定的颜色出现在屏幕上时，我希望光标导航到，并单击该颜色出现的位置

问题是我不知道从哪里开始这样一个项目。我这样做纯粹是为了我自己的享受/面试准备，不希望使用任何外部API

---

有谁能为我如何开始这样的项目提供指导吗？然后我可以开始充实它，并提出更具体的问题。我可以在这里使用什么进口产品，如何才能最好地识别屏幕上的颜色？如何以编程方式移动光标并使光标单击？

这是一个非常大的问题，但是如果我能做到这一点，并且它是用Java和Python编写的，您可以只看它的代码。

这样做的大背景是什么？这个问题可能更适合@Vulcan-请不要建议程序员回答此类问题。那里对我们来说也太宽了。