Server side 用于检查服务器端运行时的脚本

Netcraft能够获得数百万个站点的统计数据，这些站点使用的是PHP、ASP.NET、JavaServlet等web技术。我想知道他们是如何从外部做到这一点的，是否有一些脚本可以用来检查随机站点的服务器端技术？

他们通过HTTP头获取大量信息，从whois注册表获取其他数据，我从finger猜测正常运行时间。请参阅更多关于netcraft的内容，该页底部提到了netcraft。

是的，我知道HTTP头，但并不总是返回服务器头。此外，服务器头不包含有关该技术的信息-此类信息包含在X-POWER-By中，X-POWER-By是非标准头，因此根本不保证返回。还有其他想法吗？