数据分析
-
TensorFlow学习笔记(七)Tonser Board详解大数据
为了更好的管理、调试和优化神经网络的训练过程,TensorFlow提供了一个可视化工具TensorBoard。TensorBoard可以有效的展示TensorFlow在运行过程…
-
win下idea远程提交WordCount任务到HA集群详解大数据
一,环境配置 1,修改win下的host文件:即C:/Windows/System32/drivers/etc/host中添加集群中机子的ip 2,win下hadoop,并为win…
-
使用MapReduce实现二度人脉搜索算法详解大数据
一,背景介绍 在新浪微博、人人网等社交网站上,为了使用户在网络上认识更多的朋友,社交网站往往提供类似“你可能感兴趣的人”、“间接关注推荐”…
-
使用MapReduce实现温度排序详解大数据
温度排序代码,具体说明可以搜索其他博客 KeyPair.java package temperaturesort; import org.apache.hadoop.io.IntW…
-
centos7+hadoop完全分布式集群搭建详解大数据
Hadoop集群部署,就是以Cluster mode方式进行部署。本文是基于JDK1.7.0_79,hadoop2.7.5。 1.Hadoop的节点构成如下: HDFS…
-
hadoop的client搭建-即集群外主机访问hadoop详解大数据
1增加主机映射(与namenode的映射一样): 增加最后一行 [[email protected] ~]# su – root1 [[email…
-
hadoop-eclipse插件编译及windows下运行wordcount项目详解大数据
参考文章:http://www.360doc.com/content/16/0227/18/10529016_537828949.shtml, 配置修改:http://blog.c…
-
windows 运行hadoop的WordCount报nativeio.NativeIO$Windows.createDirectoryWithMode0(Ljava/lang/String;I)详解大数据
window eclipse连接hadoop集群,本地运行wordcount,报以下错误,尝试网络上的方法无果,如:换64JDK,添加hadoop_home,path,以及在had…
-
hadoop集群namenode同时挂datanode详解大数据
背景:(测试环境)只有两台机器一台namenode一台namenode,但集群只有一个结点感觉不出来效果,在namenode上挂一个datanode就有两个节点,弊端见最后 操作非…
-
hadoop环境运行程序出现 Retrying connect to server 问题详解大数据
程序运行时出现如下问题: 从网上查资料,有说重启format的。。有说/etc/hosts出问题的。。。 反正都试了一遍。。还是有这个问题 后来看日志,发现问题是访问服务器9001…