用ruby从屏幕上获取信息？

我正在考虑创建一个机器人，使用预定义的策略解决一些（html）益智游戏

我的问题：是否有任何ruby库允许“读取屏幕”（即检查屏幕上某些像素的颜色）和应用操作（如单击某个位置或“按右键”）

我知道这在python中非常容易，但我只是想知道ruby是否可以这样做来节省我的时间

---

谢谢

我会使用一些很好的JavaScript驱动程序来实现这一点。您可以发送、单击并获取。对于图像处理和处理，我建议您仔细研究。

这个问题涉及面很广，没有显示出实际的努力（您可能进行了一些搜索，但没有提供任何信息）。为了改进这个问题，请展示你到目前为止所做的事情——包括你所搜索的任何东西以及为什么它对你不好。此外，直接询问外部资源的问题通常都是离题的——相反，请关注您正在尝试做什么，您迄今为止尝试了什么，以及您的困境。