关于传授面试经验的文章太多了，眼花缭乱，我这里就不谈了，点进来想获取几吨面试学习资料的同学，抱歉让你失望了。(我是真的找不到那么多资料...)。所以，今天我们只聊面试官。 作为一只老鸟，我的面试经验还算丰富，无论是作为面试者还是面试官。...
一、环境配置 JDK：1.8. Hadoop下载地址(我选择的是2.7.6版本)：https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/ Hadoop运行在Windows上需要安装winutils支持和hadoop.dll文件。 winutils(我选择的是2.7.1版本)下载地址：htt...
首先我们要明白，Apache 是一个 http 服务器，而我们熟悉的另一种说法Apache Hadoop中的 Apache 则指的是 Apache 软件基金会。Apache是 Apache 软件基金会中的一个项目。 关于其名字，流传最广的解释是(也是最显而易见的)：这个名字来自于一个事实：...
数据可视化的道路上充满了不可见的陷阱和迷宫，最近ClearStory Data的两位数据可视化开发人员分享了他们总结出来的数据可视化开发的7个不宣之秘，普通开发者了解这些方法能提升视野，少走弯路。 数据可视化， 特别是基于Web的数据可视化的时代已经到...
大数据这个概念本身就太大而且太宽，如果一定要严格定义是非常困难的一件事，不过Hadoop生态圈或者由其延伸的泛生态系统，基本上都是为了处理大量数据诞生的——一般而言，这种数据依赖单机很难完成。 这个圈子里的工具，就像是我们厨房里的各种厨具...
当今科技领域发生了巨大的变化，也为大数据改善各行各业的业务、促进经济增长打开了大门。数据能帮助组织机构更好地开展工作，大数据分析已经超越了热门的IT趋势标签，成为公司业务的一部分。以下是10个新的大数据趋势。 01 迅速发展的物联网技术 ...
Hadoop由HDFS、MapReduce、HBase、Hive和ZooKeeper等成员组成，其中最基础最重要元素为底层用于存储集群中所有存储节点文件的文件系统HDFS(Hadoop Distributed File System)来执行MapReduce程序的MapReduce引擎。 Pig是一个基于Hadoop...
或许您已经在网上看了许多的MOOC，阅读了很多工具书，但是您有可能仍然担心找不到工作或根本没有找到工作。在数据科学领域找到合适的工作的确有一定难度。最好的向HR展现您能力的方式就是准备一个文件夹。在文件夹中放入以下五种您做过的数据科学项目。...
大数据可视化工具因其能将数字变成酷炫的图表而进入大众视野，但大家对该产品的了解还很有限，本文将从竞争格局、发展现状以及未来趋势三个维度具体探究大数据可视化工具市场的发展。 大数据可视化工具的市场竞争格局 海比研究认为，大数据可视化...
DT(Data Technology)时代已经来临，使用BI工具代替手工统计分析数据，已经成为企业和政府快速致胜的武器。好的BI工具能有效的帮助企业提高分析效率、减少分析成本、提高数据价值、完善信息化水平。 新型的数据可视化产品层出不穷，基本上各种语言都...
大数据需要学习什么?很多人问过我这个问题。每一次回答完都觉得自己讲得太片面了，总是没有一个合适的契机去好好总结这些内容，直到开始写这篇东西。大数据是近五年兴起的行业，发展迅速，很多技术经过这些年的迭代也变得比较成熟了，同时新的东西也不...
数据挖掘是指这个过程：在庞大数据集当中发现模式，将它转换成有效的信息。该技术利用特定的算法、统计分析、人工智能和数据库系统，从庞大数据集中提取信息，并转换成易于理解的形式。本文介绍了广泛用于大数据行业的10种综合数据挖掘工具。 1. Ra...
一、大数据综述 随着DT(数据技术)时代的到来，人们能比以往更容易地获取更丰富的数据。数据作为一种新的能源形式，正在源源不断地发挥其巨大的价值，帮助我们激发更多的技术驱动力，提供更优质的服务。 在京东，有着EB级规模的历史数据，每天有近...
技术最终为业务服务，没必要一定要追求先进性，各个企业应根据自己的实际情况去选择自己的技术路径。 它不一定具有通用性，但从一定程度讲，这个架构可能比BAT的架构更适应大多数企业的情况，毕竟，大多数企业，数据没到那个份上，也不可能完全自研...
如今，区块链已证明了它的价值存在，那么它将如何帮助大数据，以及大数据如何促进区块链技术的应用和发展?让我们了解一下将这两种技术结合起来的六个大数据区块链项目。 1. Storj 区块链基本上是一个基于对等点访问事务的分布式分类账。网络中的...
在学术研究与教学中，很多算法都有一个基本假设，那就是数据分布是均匀的。当我们把这些算法直接应用于实际数据时，大多数情况下都无法取得理想的结果。因为实际数据往往分布得很不均匀，都会存在“长尾现象”，也就是数据不平衡”。 技术分享：数据...
现在数据已经成为了一些企业的“天”。近年来，近年来越来越多的公司已经意识到数据分析可以带来的价值，并且已经跳上了大数据旅行车。实际上，现在所有的一切都在被监控和测量，创造了大量的数据流，通常比公司可以处理的速度更快。问题是，根据定义，...
企业会将各种IT和业务功能外包给服务提供商，这就包括一些非常具有战略意义的功能。而数据分析也越来越多地成为技术领域更具竞争优势的领域之一。 通过数据分析外包，企业雇佣服务提供商对他们提供给外包公司的数据进行分析。有行业研究表明，市场对...
自从像AWS这样的公共云产品开辟了大数据分析功能以来，小企业通过挖掘大量的数据做到只有大企业才能做到的事情，至今大约有10年时间。这些事情其中包括网络日志、客户购买记录等，并通过按使需付费的方式提供低成本的商品集群。在这十年中，这些产品蓬...
数据交换模型 数据交换模型使得不同应用程序之间的数据交换成为可能。这里是一个最基本的动机：不同应用程序之间的组对会导致有 n*(n-1) 个数据接口。 而对作为对比，如果使用一个中间表示层，将只需要 2*n 个接口。数据交换模型，...
