前言：大数据 2.0 时代不期而至
随着大数据 2.0 时代悄然到来，大数据从简单的批处理扩展到了实时处理、流处理、交互式查询和机器学习应用。早期的处理模型 (Map/Reduce) 早已经力不从心，而且也很难应用到处理流程长且复杂的数据流水线上。另外，近年来涌现出诸多大数据应用...
water
7个月前 (04-22) 340℃ 0评论
0喜欢
转载请注明：学时网 » 中国省会城市地图...
water
7个月前 (04-17) 1067℃ 0评论
0喜欢
顾名思义，网关（Gateway）就是一个网络连接到另一个网络的“关口”。 按照不同的分类标准，网关也有很多种。TCP/IP协议里的网关是最常用的，在这里我们所讲...
water
7个月前 (04-16) 283℃ 0评论
0喜欢
1.查看分区
hive> show partitions table_name;
2.extended查看表/分区最新更新时间< transient_lastDdlTime : unix时间戳>
hive> desc extended table_n...
water
7个月前 (04-11) 1076℃ 0评论
0喜欢
1、我国行政区划的划分
《中华人民共和国宪法》明确规定了目前中国的行政区划，规定：第三十条 中华人民共和国的行政区域划分如下：
（1）全国分为省、自治区、直辖市；
（2）省、自治区分为自治州、县、自治县、市；
（3）县、自治县分为乡、民族乡、镇。直辖市和较大的市分为区、县。自治...
water
7个月前 (04-08) 623℃ 0评论
0喜欢
来源：学生旅行
2019年1月21日，国家统计局公布：去年中国国内生产总值GDP达900309亿元，同比增长6.6%，实现预期目标。城市GDP方面：截至1月28日，全国城市去年经济运行数据多已公布，根据信息汇总，2018中国城市GDP（经济总量）百强排名如下：
四大经济强省方面...
water
7个月前 (04-08) 223℃ 0评论
0喜欢
set hive.cli.print.header=true; // 打印列名
set hive.cli.print.row.to.vertical=true; //&nb...
water
7个月前 (04-02) 423℃ 0评论
0喜欢
答：void关键字表示函数没有返回结果，是java中的一个关键字。java.lang.Void是一种类型，例如给Void引用赋值null的代码为Void nil=null; 。
通过Void类的源代码可以看到，Void类型不可以继承与实例化。
final&...
water
7个月前 (04-01) 361℃ 0评论
0喜欢
本文简单介绍了持续集成的概念并着重介绍了如何基于 Gitlab CI 快速构建持续集成环境，主要介绍了 Gitlab CI 的基本功能和入门操作流程。
本文提到的 Gitlab 版本为 8.x ，新版的 Gitlab 界面可能会有所不同
什么是持续集成？
image.png...
water
8个月前 (03-29) 524℃ 0评论
0喜欢
MapReduce是一种编程模型，用于大规模数据集（大于1TB）的并行运算。概念"Map（映射）"和"Reduce（归约）"。
Tez是Apache开源的支持DAG作业的计算框架，它直接源于MapReduce框架，核心思想是将Map和Re...
water
8个月前 (03-28) 359℃ 0评论
0喜欢
很多人都知道大数据很火，就业很好，薪资很高，想往大数据方向发展。但该学哪些技术，学习路线是什么样的呢?用不用参加大数据培训呢?如果自己很迷茫，为了这些原因想往大数据方向发展，也可以，那么大讲台老师就想问一下，你的专业是什么，对于计算机/软件，你的兴趣是什么?是计算机专业，对操作系...
water
8个月前 (03-27) 279℃ 0评论
0喜欢
DNS是计算机域名系统(Domain Name System 或Domain Name Service) 的缩写，它是由域名解析器和域名服务器组成的。域名服务器是指保存有该网络中所有主机的域名和对应IP地址，并具有将域名转换为IP地址功能的服务器。其中域名必须对应一个...
water
8个月前 (03-15) 440℃ 0评论
0喜欢
Azkaban概述
Azkaban是由Linkedin公司推出的一个批量工作流任务调度器，用于在一个工作流内以一个特定的顺序运行一组工作和流程。Azkaban使用job配置文件建立任务之间的依赖关系，并提供一个易于使用的web用户界面维护和跟踪你的工作流。
在介绍A...
water
8个月前 (03-13) 474℃ 0评论
2喜欢
无数的文章、社交媒体在探讨Docker、Kubernetes、Mesos三者之间孰优孰劣。如果你听信了某些一知半解者的言论，你可能会认为这三个开源项目正在为争夺容器霸权而殊死战斗。同时，你也会相信，在这三者间的选择无异于对其所奉宗教的信仰，而且真正的信徒敢于大胆和异教徒作斗争，...
water
8个月前 (03-13) 353℃ 0评论
0喜欢
目前啊，都知道，大数据集群管理方式分为手工方式（Apache hadoop）和工具方式（Ambari + hdp 和Cloudera Manger + CDH）。
手工部署呢，需配置太多参数，但是，好理解其原理，建议初学这样做，能学到很多。该方式啊，均得由用户执行，细节太多，切当...
water
8个月前 (03-12) 800℃ 0评论
1喜欢
MapReduce按照任务大小和设置的不同，提供了两种任务模式：
老一些的版本还有一个JobTracker的实现类，即：classic。用于和MapReduce1.X兼容用的，高一些的版本已经没有这个实现类了。
一，本地模式（LocalJobRunner实现）
mapreduce...
water
8个月前 (03-07) 297℃ 0评论
0喜欢
Java中任意对数函数求法
在java中求logxN，
首先要弄明白一个初中学到的公式logxN=logeN/logex,
logeN代表以e为底的N的对数,
logex代表以e为底的x的对数. &...
water
8个月前 (03-05) 302℃ 0评论
0喜欢
、 设计规约1. 【强制】 存储方案和底层数据结构的设计获得评审一致通过，并沉淀成为文档。说明： 有缺陷的底层数据结构容易导致系统风险上升，可扩展性下降，重构成本也会因历史数据迁移和系统平滑过渡而陡然增加，所以，存储方案和数据结构需要认真地进行设计和评审，生产环境提交执行后，需要...
water
9个月前 (02-28) 312℃ 0评论
0喜欢
普通用户：
若A想免密登录到B，将A生成的公钥追加到B的/home/.ssh/authorized_keys文件中即可
//在A（192.168.X.2）服务器下执行：
//生成公钥
Portal@ubuntu:~$ ssh-keygen -t rsa -P ''...
water
9个月前 (02-27) 310℃ 0评论
0喜欢
阅读开源代码时可能经常遇到TODO、FIXME、XXX的单词，通常这些都是有其特殊含义的。
中文版的说明
TODO: + 说明：如果代码中有该标识，说明在标识处有功能代码待编写，待实现的功能在说明中会简略说明。
FIXME: + 说明：如果代码中有该标识，说明标识处代码需...
water
9个月前 (02-27) 428℃ 0评论
0喜欢
