数据采集

摘要： 今天多数的大数据方案都是依托Hadoop环境来做结构化和非结构化数据处理，如何把自己的Hadoop算法快速部署到实际的生产环境当中去，对很多企业的大数据部署也提出了挑战。CSDN专访MathWorks中国资深技术专家陈建平，分享大数据解决方案。 近年来，随着大数据在Google、Facebook等企业的成功应用，很多传统企业和初创公司都转向应用大数据…

摘要：本文讨论一些实用的定量分析技术，帮读者面对移动用户数据“大胆假设，谨慎求证”，达到增加用户数量并获取市场份额的目的。第一篇文章(https://www.afenxi.com/8767.html)介绍了掌握用户数据的基础理念。 数据科学关注查找噪声中隐藏的信号。这一点说起来容易做起来难，但无需依靠众多数据专家即可实现。本文介绍的定量分析技术是非常实用的入…

说到我们要做数据分析，没有米下锅怎么行？没有数据，我们还怎么做数据分析？前几天有个哥们在现场就问我，说我们是一家创业公司，我们也非常想做数据分析、机器学习这些，但是我们没有数据啊！这可怎么办？我们也不懂这些数据从哪儿来，更不懂技术方面的东西，公司也就几个人，还都是从传统公司或者刚毕业的。 当时我就给他打了个比喻，这就有点像我们没米怎么煮饭一样。如果真的没米了…

摘要：凯文·凯利曾说：“不管你现在做什么行业，未来都是数据生意。” 但尽管如此，目前也只有像BAT这类的企业有强大的技术团队才能玩转数据，很多中小企业或者个人想要拥抱数据时代带来的福利往往很难，以往企业获得数据的途径更多的是采用网络爬虫的技术或者人工解决，耗时耗力。 近日，猎云网关注到的八爪鱼专注在数据采集领域，希望从数据源入手，用更简单的方法帮助有需求的企…

摘要：电信与媒体市场调研公司Informa Telecoms & Media在2013年的调查结果显示，全球120家运营商中约有48%的运营商正在实施大数据业务。该调研公司表示，大数据业务成本平均占到运营商总IT预算的10%，并且在未来五年内将升至23%左右，成为运营商的一项战略性优势。可见，由流量经营进入大数据运营已成为大势所趋。 电信运营商拥有…

导读：企业每天都受到大量信息的冲击。这些信息由邮件、社交媒体、网站和移动应用等等生成，来自于它们业务的各个方面。 业界估计数据每年的增长率在30%到50%之间，对于许多企业来说，每年将增长上PB的数据量。问题显然不是缺少数据，而是缺少“正确”的数据。 根据埃森哲近期的调查显示，仅40%的管理者认为他们现有的分析应用能够识别有效数据，只有20%对现存分析应用支…