花费 144ms 找到19178条记录
MapReduce编程(六) 从HDFS导入数据到Elasticsearch 繁体
2017年04月01 - 一、Elasticsearch for Hadoop安装 Elasticsearch for Hadoop并不像logstash、kibana一样是一个独立的软件,而是Hadoop和Elasticsearch交互所需要的jar包。所以,有直接下载和maven导入2种方式。安装之前确保JDK版本不要低于1.8,Elasticsearch版本不能低于1.0。 官网对声明是对Hadoop 1.1.

Scala 2.11.8安装部署和基本语法一 繁体
2018年02月02 - 1 下载地址 2 安装部署 下载 [root@zhangyu software]# wget https://downloads.lightbend.com/scala

Cloudera Hadoop 添加主机后,报主机状态异常问题 繁体
2017年04月05 - 最近部署了一个CDH环境,突然发生了添加主机之后,提示主机状态异常,然后就无法分发CDH parcel。 这个问题困扰了将近半天的时间,一直翻查各种日志,最后在agent的日志中发现

Hadoop安装成功之后,访问不了web界面的50070端口怎么解决? 繁体
2019年06月17 - Hadoop安装成功之后,访问不了web界面的50070端口 先查看端口是否启用 [hadoop@s128 sbin]$ netstat -ano |grep 50070 然后查看防火墙的状态,是否关闭,如果没有,强制性关闭 查看防火墙状态: [hadoop@s128 sbin]$ service iptables status 关闭防火墙 chkconfig iptables

繁华的背后-参观贵阳数博会有感 繁体
2015年06月09 - 繁华的背后-参观贵阳数博会有感 5月26日,“2015年贵阳国际大数据产业博览会暨全球大数据时代贵阳峰会”在贵阳开幕。国务院总理李克强发贺信,国务院副总理马凯亲自出席并发表演讲,马云、马

搭建Hadoop2.6.0+Eclipse开发调试环境 繁体
2015年07月27 - 上一篇在win7虚拟机下搭建了hadoop2.6.0伪分布式环境。为了开发调试方便,本文介绍在eclipse下搭建开发环境,连接和提交任务到hadoop集群。 1. 环境 Eclipse版本Luna 4.4.1 安装插件hadoop-eclipse-plugin-2.6.0.jar,下载后放到eclipse/plugins目录即可。 2. 配置插件 2.1 配置hadoop主目录

Hadoop与Spark之间的比较 繁体
2017年10月17 - Hadoop与Spark之间的比较 Hadoop框架的主要模块包括如下: Hadoop Common Hadoop分布式文件系统(HDFS) Hadoop YARN Hadoop MapReduce 虽然上述四个模块构成了Hadoop的核心,不过还有其他几个模块。这些模块包括:Ambari、Avro、Cassandra、Hive、 Pig、Oozie、Flume和

缩写-IT专业术语 繁体
2014年10月03 - 今天偶然看了篇文章,发现Yahoo!要关掉自己的Directory搜索服务,偶有感触。看到它的拼写原来是这样的阿YAHOO! - Yet Another Hierarchical officious

Custom MapReduce Input Format - Can't Find Constructor 繁体
2011年08月22 - I'm writing a custom InputFormat for Hadoop 0.20.2 and am running into a NoSuchMethodException I can't get rid of. I started with: 我正在为Hadoop 0.20.2编写一个自定义的InputFormat,并且遇到NoSuchMethodException我无法摆脱。我

H02-启动hdfs时可能遇到的几个问题 繁体
2018年08月08 - 启动hdfs时,有时候可能会遇到这样几种情况: 1)在主节点上执行start-dfs.sh命令启动hdfs,无法启动datanode。 2)在主节点上行启动hdfs,启动成功了,在各个节点上使用j


 
粤ICP备14056181号  © 2014-2021 ITdaan.com