开源
-
Spark Streaming笔记整理（一）：基本工作原理介绍
[TOC] 概述 大数据实时计算介绍 1、Spark Streaming，其实就是一种Spark提供的，对于大数据，进行实时计算的一种框架。它的底层，其实，也是基于我们之前讲解的Spark Core的。基本的计算模型，还是基于内存的大数据…
-
如何区分统计员工给公司的微信公众号拉多少人
微信公众号给员工推广，每个员工的二维码都是唯一，二维码记录员工拉了多少人关注公众号。这样的效果只有通过公众号带参数的二维码接口才能实现，懂代码可以直接阅读技术文档实现，不懂代码可以用微号帮平台渠道二…
-
Greenplu数据库的部署
简单介绍 Greenplum基于postgre数据库开发，是一个关系型数据库集群，它实际上是由多个postgre数据库服务组合成的逻辑数据库集群。它包含两个角色，master和segment。它将一个表的数据均…
-
spark写orc格式文件
在hive中建表格式存储格式为orc create table user(id int,name string) stored as orc; spark写文件 val jsons = "hdfs:…
-
rabbitmq ｛ssl_upgrade_error, timeout} 报错解决方法
正常工作两年的后台在端午节期间傲娇了，所有的被管理服务器状态全部变成down，之后查看后台日志，谷歌，没找到原因，之后查看rabbitmq的日志，发现报错｛ssl_upgrade_error, timeout｝，太含蓄了，又谷歌找了篇太…
-
Hadoop运维记录系列(二十三)
最近做集群机房迁移，在旧机房和新机房之间接了根专线，做集群不停机搬迁，也就是跨机房，同时要新加百多台服务器，遇到几个问题，记录一下。 旧集群的机器是centos 6, 新机房加的机器是centos 7。 一、丢包问题 在…
-
0005-Windows Kerberos客户端配置并访问CDH
温馨提示：要看高清无码套图，请使用手机打开并单击图片放大查看。 1.概述 本文档描述Windows Server2008 R2（windows的内核版本是6.1，与windows 7相同）下安装Kerberos Client及FireFox下HTTP访问HDFS、Yarn、Hiv…
-
测试架构师——能做什么
摘自《从菜鸟到测试架构师——一个测试工程师的成长日记》 测试架构师的工作 开发方面： 1、参与设计讨论与文档评审； 实际：项目组成员都会参与…
-
担心接口出问题，自动化测试-定时任务为业务保驾护航
引言 没有API监控，你将无法准确分辨API 是否能够正常运作。eoLinker AMS支持设置定时任务监控自动化测试中的用例，这样能够让项目在无人值守的情况下自动测试并将结果发送到邮箱。 关键字 接口监控、定时任务、自…
-
什么是OSI网络协议层的最高层
这期内容当中小编将会给大家带来有关什么是OSI网络协议层的最高层，文章内容丰富且以专业的角度为大家分析和叙述，阅读完这篇文章希望大家可以有所收获。 OSI网络协议层的最高层是应用层。OSI将计算机网络体系结构…