开源
-
Tp3.2 RESTFul 根据地区查询生成xml、html、json的Api接口的天气信息
1、在控制器页面： <?php // 本类由系统自动生成，仅供测试用途 namespace Home/Controller; use Think/Controller/RestController; class IndexController extends RestControll…
-
0035-如何使用Sentry管理Hive外部表（补充）
温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。 1.文档编写目的 本文文档主要讲述如何使用Sentry管理Hive/Impala外部表权限。 内容概述 1.创建测试库及外部表 2.创建角色并授权 3.授权测试 4.测…
-
大数据系列之HBase命令行操作
1、课程简介 本文章先会介绍HBase命令行，接着会介绍java代码对hbase中的表进行增删改查。 本文章中所有命令均在CentOS-6.4-x86_64，hadoop-2.5.2，jdk1.8.0_152，zookeeper-3.4.11，hbase-1.2.6中运行通过，为减少…
-
lvm相关命令学习
我的博客已迁移到xdoujiang.com请去那边和我交流 基础环境 1、当前版本 cat /etc/debian_version 7.8 2、安装包lvm2 apt-get install lvm2 -y 一、将sdb sdc sdd三块分区加到卷组(ha…
-
0010-Hive多分隔符支持示例
温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。 1.问题描述 如何将多个字符作为字段分割符的数据文件加载到Hive表中，事例数据如下： 字段分隔符为“@#$” test1@#$test1name@#$test2value test2@#…
-
Mybatis源码分析[03.SqlSessionFactory]
// 构造SqlSession public interface SqlSessionFactory { //8个方法可以用来创建SqlSession实例SqlSession openSession(); //自动提交SqlSession openSession(boolean autoCommit);//连接SqlSession openSession(C…
-
实现 MongoDB 外键关联
来源：http://stackoverflow.com/questions/29392169/populating-field-values-for-referred-documents-in-aggregate-call-in-mongoose 。 【摘要】 Mongodb 作为分布式文件存储的数据库，想实现多表关联 …
-
hadoop及hbase集群增加节点
一、hadoop扩容 1、配置各节点hosts文件，加入新加入的两个节点的IP和主机名 新添加的节点添加下面内容 192.168.11.131 master1 192.168.11.132 master2 192.168.11…
-
大数据生态之zookeeper（原理）
1. 集群的角色描述： 角色 描述 领导者（leader） 领导者负责进行公布决议，主要处理写请求 跟随者（follower） Follower用于接收客户端请求并向客户端返回结果（只能处理读请求，如果接收到写请求，将写请求…
-
spark下dataframe转为rdd格式
dataframe可以实现很多操作，但是存储到本地的时候，只能存 parquest格式 需要存储源格式，需要转换为rdd类型 将dataframe中的每一行都map成有逗号相连的string，就变为了一个rdd