分类 大数据 下的文章

cdh6.3 预安装准备及常见问题


cdh6.3 预安装准备及常见问题cdh6.3 安装完以后,一般有几个警告,在虚拟机上安装,一般常用的虚拟是centos 最小化版本,这个最小化的版本,好多软件没有安装 。比如:gcc 和perl 要安装perl需要进行编译安装, 要编译则需要先安装gcc 无网环境下安装gcc下载以下rpm包,下载 地址:https://wws.lanzous.com/b0200c6lc 密- 阅读剩余部分 -

cdh .agent Error, CM server guid updated, expected


Error, CM server guid updated, expected这是因为主机master重新安装了。uuid变了。 这样原来安装好的agent就和新的主机的uuid不能匹配了。 需要删除cm_guid,然后agent重新启动一次就可以了。重新以后稍等一会,然后在7180的界面上重新刷新,就可以找到新的agent了。rm -rf /var/lib/cloudera-- 阅读剩余部分 -

大数据计算之Impala的介绍与使用


​google 三驾马车gfs :对应hadoop的hdfs bigtable :对应的是hbase,性能比bigtable差 mapreduce 之后google又公布了percolator:增量查询,对增加的数据进行分析。使分布式增量索引更新成为文本检索领域的新标准Pregel:图计算,spark.graphx . 开辟了图数据计算的新方向mredel:impala,P- 阅读剩余部分 -

Scala基础知识2


Ideal中如何关联scala源代码ideal中用Attach sources生成scala注释文档.scaladoc -d ./doc hello.scala 变量常量java中的常量定义 final int a =10 ;程序执行过程中其值不可以改变。 Scala变量定义 :var a:Int=10;定义变量的时候 显示类型:setting-typeannotation- 阅读剩余部分 -