数据中台
-
使用MapReduce实现二度人脉搜索算法详解大数据
一,背景介绍 在新浪微博、人人网等社交网站上,为了使用户在网络上认识更多的朋友,社交网站往往提供类似“你可能感兴趣的人”、“间接关注推荐”…
-
使用MapReduce实现温度排序详解大数据
温度排序代码,具体说明可以搜索其他博客 KeyPair.java package temperaturesort; import org.apache.hadoop.io.IntW…
-
centos7+hadoop完全分布式集群搭建详解大数据
Hadoop集群部署,就是以Cluster mode方式进行部署。本文是基于JDK1.7.0_79,hadoop2.7.5。 1.Hadoop的节点构成如下: HDFS…
-
hadoop的client搭建-即集群外主机访问hadoop详解大数据
1增加主机映射(与namenode的映射一样): 增加最后一行 [[email protected] ~]# su – root1 [[email…
-
hadoop-eclipse插件编译及windows下运行wordcount项目详解大数据
参考文章:http://www.360doc.com/content/16/0227/18/10529016_537828949.shtml, 配置修改:http://blog.c…
-
windows 运行hadoop的WordCount报nativeio.NativeIO$Windows.createDirectoryWithMode0(Ljava/lang/String;I)详解大数据
window eclipse连接hadoop集群,本地运行wordcount,报以下错误,尝试网络上的方法无果,如:换64JDK,添加hadoop_home,path,以及在had…
-
hadoop集群namenode同时挂datanode详解大数据
背景:(测试环境)只有两台机器一台namenode一台namenode,但集群只有一个结点感觉不出来效果,在namenode上挂一个datanode就有两个节点,弊端见最后 操作非…
-
hadoop环境运行程序出现 Retrying connect to server 问题详解大数据
程序运行时出现如下问题: 从网上查资料,有说重启format的。。有说/etc/hosts出问题的。。。 反正都试了一遍。。还是有这个问题 后来看日志,发现问题是访问服务器9001…
-
hadoop is running beyond virtual memory limits问题解决详解大数据
单机搭建了2.6.5的伪分布式集群,写了一个tf-idf计算程序,分词用的是结巴分词,使用standalone模式运行没有任何问题,切换到伪分布式模式运行一直报错: hadoop …
-
文档数据库 OrientDB v2.2.15 发布详解大数据
OrientD是兼具文挡数据库的灵活性和图形数据库管理链接能力的可深层次扩展的文档-图形数据库管理系统。可选无模式、全模式或混合模式下。支持许多高级特性,诸如ACID…