大数据架构

2012年成立的滴滴打车，仅用了三年时间就书写了：覆盖300个城市，用户数从2200万增到1.5亿，月活跃用户增长了600多倍（2014年平安夜当天，全国用滴滴打车出行人数超过了3000万人），打车成功率高于90%……这些永远会被铭记在移动互联网历史中的神奇记录。而不为人知的是，支撑滴滴打车如此庞大用户数量的架构，以及那些曾无数次不眠不休应对挑战的技术伙伴们…

摘要：TA是一款面向第三方站长的免费网站分析系统，在数据稳定性、及时性方面广受站长好评，其秒级的实时数据更新频率也获得业界认可。本文将从实时数据处理、数据存储等多个方面带你深入探寻TA的系统架构及实现原理。 TA(Tencent Analytics，腾讯分析)是一款面向第三方站长的免费网站分析系统，在数据稳定性、及时性方面广受站长好评，其秒级的实时数据更新频…

Facebook一直是大数据技术最积极的应用者，因为它拥有的数据量极其巨大，一份资料显示2011年它拥有的压缩数据已经有25PB，未压缩数据150PB,每天产生的未压缩的新数据有400TB。

Twitter的大数据架构也是分为基于Hadoop的批处理和基于Storm的实时流计算等主要类型，主要基于开源项目中进行开发和发展。

Google是大数据时代的奠基者，其大数据技术架构一直是互联网公司争相学习和 研究的重点，也是行业大数据技术架构的标杆和示范。

对于企业用户来说，需要更好的了解大数据的含义，理解大数据实际上能做什么及其局限性是什么。

如果你正在尝试构建大数据应用或分析系统，你可能会清楚的意识到该领域缺少哪些功能。笔者将人们对大数据的愿景归纳为五大需求，分别是SQL(或SQL-like)分析、快速部署、高级分析、实时分析和网络分析选件。 好消息是人们正在努力应对这些问题，SQL分析选件就是其中之一。大批数据管理和数据分析专家们对SQL非常熟悉，自然想要利用SQL知识搞清楚Hadoop集群和…

本文讨论了不同的选择，并推荐了每种选择的适用场合。

关于OSGi的企业级框架的研究也告一段落，所以想利用CSDN这个平台将这次大数据平台实施过程记录下来。我想一定能为其它有类似想法的个人或公司提供很好的参考资料！

DataStax为企业提供基于开源NoSQL数据库Apache Cassandra的Hadoop大数据分析构建方案，总部位于美国加利福尼亚州的圣马特奥。在2012年10月近一个月的时间里，DataStax完成了B轮1100万和C轮2500万美元的融资，成为近期大数据市场中表现最强势的公司。