千万不能把数据湖与数据仓库混在一起来理解 　　2014年年中，市场研究机构Gartner的两位分析师对于炒作越来越猛的数据湖(datalake)概念进行了一番尖锐的批评。 　　Gartner的研究主管NickHeudecker说：“数据湖方面的基本问题是，它对于信息使用者做了某些假设。” 　　“它假设使用者认识或了解关于采集如何数据的上下文偏见(contextualbias)，假... 继续阅读千万不能把数据湖与数据仓库混在一起来理解

大数据公司Palantir：行事低调 估值达200亿美金 　　课课家想问问大家，有听说过硅谷大数据公司Palantir Technologies吗？其实没听过也不足为奇。 　　据Buzzfeed News报道称 Palantir科技公司正打算融资5亿，其凭借其200亿美金的估值已然跻身美国第三大的创业公司，它的估值仅次于估值400亿美元的Uber和据华尔街日报称最近正在融资的估值240亿美元的... 继续阅读大数据公司Palantir：行事低调 估值达200亿美金

悼念当年剁过的手 大数据揭秘奸商陷阱 　　今年的电商购物节已结束，与往年一样，本次购物节也不乏大品牌的折扣商品，有的电商并不是直营商家依然打出相当可爱的价格，不停的挑拨着剁手党的心，虽然常年混迹网购的人已经练就了火眼金睛，但在超低价的干扰下，还是会做出不理智的行为，这时网络奸商就会心的笑了。 　　大数据时代奸商们也有了他们新的玩法，不知道这些新玩法的内幕，怕是剁手党们把手剁成肉馅也无法想通自己... 继续阅读悼念当年剁过的手 大数据揭秘奸商陷阱

大数据或因提前成为行业标准而消亡  在众多学习中，文章也许不起眼，但是重要的下面我们就来讲解一下！！   北京时间10月4日消息，据美国《福布斯》网站刊登网络性能管理软件提供商SevOne首席执行官迈克·费伦（Mike Phelan）的文章称，“大数据”（Big Data）或将因为提前成为行业标准而迅速消亡。一旦“大数据”变成“普通数据”（Any Data），届时的市场赢家无疑都是较早关注数... 继续阅读大数据或因提前成为行业标准而消亡

Exadata X3闪存提升4倍 In-Memory进入主流的讲解 在众多学习中，文章也许不起眼，但是重要的下面我们就来讲解一下！！ 近年来，云计算解决了应用部署中基础设施和平台环境的难题，成为企业加快变革的核心动力之一。随着IT从交易型向交互型的过渡，社交媒体和移动终端设备的大面积普及，非结构化的大数据呈现出爆炸性的增长。云计算和大数据为IT产业和企业IT部门提出了新的挑战，包括如何简化数据... 继续阅读Exadata X3闪存提升4倍 In-Memory进入主流的讲解

分布式文件系统HDFS中Block的介绍 恍惚恍惚又来到了文章的学习，想必大家又有很多问题吧! Block概念 磁盘有一个Block size的概念，它是磁盘读/写数据的最小单位。构建在这样的磁盘上的文件系统也是通过块来管理数据的，文件系统的块通常是磁盘块的整数倍。文件系统的块一般为几千字节(byte)，磁盘块一般为512字节(byte)。 HDFS也有Block的概念，但它的块是一个很大的单... 继续阅读分布式文件系统HDFS中Block的介绍

　　众所周知数据库的管理往往离不开各种的数据优化，而要想进行优化通常我们都是通过参数来完成优化的。那么到底这些参数有哪些呢？为此在本篇文章中课课家笔者就为大家简单介绍MySQL，以供大家参考参考，希望能帮助到大家。 　　1) 分布式DB水平切分中用到的主要关键技术：分库，分表，M-S,集群，负载均衡　　2) 需求分析：一个大型互联网应用每天几十亿的PV对DB造成了相当高的负载，对系统的稳定性的扩展... 继续阅读Mysql分表查询海量数据和解决方案

　　Hive起完全分布式的MR任务也可追踪，但是需要修改节点机上的MR启动时java参数，而且Hive起一个MR任务时，只有当MR启动后才能知道哪个节点机上启动了该任务，之后才能进行Remotedebug连接，这在运行环境为完全分布式时会比较麻烦。但如果运行环境为伪分布式，那么追踪可能会更方便些。　 下载编译 　　在git上下载合适的master分支，使用maven编译。执行编译的目的在于，确保过... 继续阅读全面讲解Hive源码编译及阅读修改调试

　　大数据（bigdata），指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强的决策力、洞察发现力和流程优化能力的海量、高增长率和多样化的信息资产。      目前，大数据领域每年都会涌现出大量新的技术，成为大数据获取、存储、处理分析或可视化的有效手段。大数据技术能够将大规模数据中隐藏的信息和知识挖掘出来，为人类社会经济活动提供依据，提高各个领域的运... 继续阅读你不得不了解大数据分析的6个核心技术

大数据在营销与销售中的运用技巧 在大数据在营销与销售的十大运用中，这篇文章讲述了非常详细，希望大家认真阅读，必会有不小的收获~     本文旨在给为大数据革命性改变市场营销和销售的众多趋势做一个概述， 其中综合了十个有关报告，介绍了十个大数据在如今的市场营销和销售策略中的应用。其中增长很快的一个领域就是定价：管理价格以及通过销售网络传播和优化定价。在有大数据算法和先进的分析技术的今天，为给定的... 继续阅读大数据在营销与销售中的运用技巧