开源
-
vs2012 输出窗口报错 “无法查找或打开 PDB 文件”
一、背景 今天在使用vs2012 进行调试win32对话框程序时，在输出窗口输出了一些错误 已加载“C:/Windows/SysWOW64/ntdl…
-
关于hadoop官方手册MapReduce的示例代码问题
关于同学有问hadoop官网MapReduce示例代码，跑不起来的原因在这里简单说一下 动态参数的传递，数组角标存在bug
-
Xshell安装教程及Xshell安装程序集组件时出错的解决方法
部分小伙伴在安装Xshell的时候可能会遇到这个问题：“Xshell5安装程序集组件{0D7E67F6-1A6A-3A26-AF95-B8E83DDCCC3F}时出错。HRESULT0x80070BC9”，导致安装被强制退出，如下图所示。 尔后安装回滚，如下图所示。 这…
-
hive job sql 优化 之CPU占有过高
最近有个SQL运行时长超过两个小时，所以准备优化下 首先查看hive sql 产生job的counter数据发现 总的CPU time spent 过高估计100.4319973小时 每个map的CPU time spent 排第一的耗了2.0540889小时 建…
-
大数据是什么？
许多人对于大数据是什么、大数据有什么用比较陌生，那么小编今天给大家讲讲大数据。一、大数据的理解大数据是指无法在一定时间范围内用常规软件工具进行捕捉、管理和处理的数据集合，是需要新处理模式才能具有更强…
-
数据分析：Hive、Pig和Impala
本文主要分享Hadoop三大分析工具：Hive、Pig和Impala。 Hive和Pig是高级数据语言，基于Mapreduce，底层处理的时候会转换成Mapreduce去提交，Hive和Pig都是开源的，Hive最初由Facebook开发，Pig最初由Yahoo!开发，下…
-
spark MLlib之零 构建通用的解析矩阵程序
在使用spark MLlib时，有时候需要使用到一些基础的矩阵（向量），例如：全零矩阵，全一矩阵；以及矩阵之间的运算操作。这里整理了一些常用的矩阵操作方法： 矩阵： package utils import java.util.Random /** &nbs…
-
CDH6集群部署
大数据集群管理方式分为手工方式（Apache hadoop）和工具方式（Ambari + hdp 和Cloudera Manger + CDH） 主机： 192.168.0.32：Server+agent 192.168.0.33：agent 192.168.0.34：agent 安装之前准备环境： 网络名称…
-
LoadRunner 测试过程中 报错“[10048] 地址已被使用”
1.运行场景中，报错如下： ction.c(5): 错误 -27796: 连接服务器“192.168.100.101:8081”失败: “[10048] 地址已被使用 请尝试将注册表值HKEY_LOCAL_MACHINE/System/CurrentControlSet/Services/tcpip/Parameters/Tcp…
-
论测试用例的有效更新及杀虫剂悖论
论测试用例的有效更新及杀虫剂悖论 在2014年，我们团队试图推动一件事情——把产品后端（客户、客服、生产制造等等）出现的问题，反向增补为测试用例，扩充到测试用…