Web crawler 跨平台web爬行引擎

我需要开发一个模块，使用网络爬网引擎，可以运行在几乎任何设备-iOS，android，Windows等

我需要一个完全自动化的非可视化web引擎，它可以以编程方式加载页面、执行JS（如果需要）、操作和提交表单、维护cookie等

就编程框架和引擎本身而言，我的最佳选择是什么

是否有这样一个许可证许可的web引擎可以在任何设备上高效运行

我更愿意在VisualStudio中进行开发，但这绝对不是必须的