Hadoop 了解stackoverflow底层软件基础架构

Hadoop 了解stackoverflow底层软件基础架构,hadoop,redis,stack-overflow,Hadoop,Redis,Stack Overflow,我想知道所有数据库/数据库组合堆栈溢出在下面使用了什么,在不同的垂直方向上管理广泛的用户配置文件信息 正如我在twitter和facebook这样的社交网站上所做的那样,大数据管理是通过hadoop完成的。堆栈溢出是否也能处理如此大量的数据 如何索引信息,redis是stackoverflow解决方案的一部分吗 了解世界上最流行的技术论坛上部署的解决方案将非常有趣 本文简要介绍了stackoverflow的架构在2011年3月左右的样子: 从高层次来看,它是一个.NET应用程序,它使用MS SQ

我想知道所有数据库/数据库组合堆栈溢出在下面使用了什么,在不同的垂直方向上管理广泛的用户配置文件信息

正如我在twitter和facebook这样的社交网站上所做的那样,大数据管理是通过hadoop完成的。堆栈溢出是否也能处理如此大量的数据

如何索引信息,redis是stackoverflow解决方案的一部分吗


了解世界上最流行的技术论坛上部署的解决方案将非常有趣

本文简要介绍了stackoverflow的架构在2011年3月左右的样子:

从高层次来看,它是一个.NET应用程序,它使用MS SQL server作为数据库,Redis作为缓存,HAProxy作为负载平衡,以及一整套工具,托管在windows服务器和linux服务器(ubuntu+centos)上

在那篇文章发表时,他们似乎没有使用过任何hadoop,但这可能已经改变了。他们也可能正在为map/reduce类型的作业做一些不同的/自定义的事情,或者可能根本不需要类似的东西。通过精巧,SQL Server可以扩展到相当大的范围,而无需依赖“大数据”玩具。如果您可以从缓存层获取大部分数据,这一点尤其正确