开源
-
Sqoop简介及安装部署
简介： Apache Sqoop是专为Apache Hadoop和结构化数据存储如关系数据库之间的数据转换工具的有效工具。你可以使用Sqoop从外部结构化数据存储的数据导入到Hadoop分布式文件系统或相关系统如Hive和HBase。相反，Sqoop…
-
使用Ambari搭建Hadoop集群
Hadoop 介绍 Hadoop是一个开发和运行处理大规模数据的软件平台，是Apache的一个用java语言实现开源软件框架，实现在大量计算机组成的集群中对海量数据进行分布式计算。Hadoop框架中最核心设计就是：MapReduce和HDFS…
-
apollo笔记
官方文档：https://github.com/ctripcorp/apollo/wiki/Apollo%E9%85%8D%E7%BD%AE%E4%B8%AD%E5%BF%83%E4%BB%8B%E7%BB%8D 一、基本配置1.应用AppId：用来标识应用身份的唯一id，格式为string，需要和客户端/META-INF/…
-
【星云测试】Devops微服务架构下具有代码级穿透能力的精准测试
微服务是Devops场景下热门的开发框架，在大型项目中被广泛采用。它把一个大型的单个应用程序和服务拆分为数十个的支持微服务，独立部署、互相隔离，通过扩展组件来处理功能瓶颈问题，比传统的应用程序更能有效…
-
emma覆盖率
-Xbootclasspath/p:/home/admin/software/jdk1.7.0_79/jre/lib/ext/emma.jar 复制 /server/bin/mobileserver/runServer.sh 到 runServer_emma.sh 修改启动语句 &nb…
-
第19课：Spark高级排序彻底解密
本节课内容： 1、基础排序算法实战 2、二次排序算法实战 3、更高级别排序算法 4、排序算法内幕解密 排序在Spar…
-
学习大数据需要具备四种条件？你具备几种？
现在学习大数据的越来越多了，可是你知道学习大数据需要什么条件吗？我来说说四个必备条件。 大数据现已成为年×××展的趋势，很多人纷纷挑选学习大数据，想要进入大数据职业。大数据技术体系巨大，包含的常识较多，…
-
使用DBeaver连接hive
连接 首先新建一个连接（可以看到支持的数据库非常多），选择Apache Hive，点击下一步。 填写连接数据库的用户名、密码、地址、库等相关信息，然后点击编辑连接驱动。 选择下载或…
-
janus编译配置
编译git clone https://github.com/meetecho/janus-gateway.gitsh autogen.sh./configure --prefix=/opt/janus --enable-websockets --enable-docs –disable-plugin-lua makesudo make installmake configs//将所有…
-
flume的几种使用方式
近期，听了王家林老师的2016年大数据Spark“蘑菇云”行动，需要将flume，kafka和Spark streaming进行整合。感觉一时难以上手，先从简单着手吧： 一、netcat方式+Logger日志显示 Flume 配置文件如下： #…