大数据
-
dubbo客户端版本选择
dubbo 2.5.x 及 2.5.x以前的版本，用zkclient操作zookeeper pom.xml配置： <dependency> <groupId>com.alibaba</groupId> <artifactId>dubbo</artifactId> <version&…
-
MyBaits基本概念和原理
什么是MyBatis? MyBatis 是一款优秀的持久层框架，它支持定制化 SQL、存储过程以及高级映射。MyBatis 避免了几乎所有的 JDBC代码和手动设置参数以及获取结果集。MyBatis 可以使用简单的 XML 或注解来配置和映射原生…
-
优化Join运算的系列方法（2）
3 半内存时的外键表 外键指针化的前提是事实表和维表都可以装入内存，但实际业务中涉及的数据量可能很大，那就不能采用这种方法了。 3.1 维表内存化 如果只是事实表很大，而维表仍然可以全部装入内存，那么仍然可以…
-
电商大数据项目-推荐系统实战（一）
电商大数据项目-推荐系统实战（一）环境搭建以及日志，人口，商品分析https://blog.51cto.com/6989066/2325073电商大数据项目-推荐系统实战之推荐算法https://blog.51cto.com/6989066/2326209电商大数据项目-推荐系…
-
app性能测试之TraceView
一、介绍 TraceView是一款性能分析工具，可以进行数据采集和分析，可以以图形化的方式让我们了解要跟踪的程序并且能得到相关method。本文只讲解在app启动时候TraceView的功能，当然，对于app运行过程中…
-
CentOS最常用命令及快捷键整理
常用命令: 文件和目录: # cd /home 进入 '/home' 目录 # cd .. &…
-
如何建立大数据风控的框架
在金融风控领域，数据有五个属性，1、人口属性性别，年龄，电话号码、姓名、家庭住址，主要是为了怎么找到这个用户2、消费特征电商用户经常买什么，在什么时候买东西，每个月消费多少，可以间接成为信用评分比如有…
-
jenkins集成jmeter-----接口自动化
首先需要确认，jmeter.properties中，jmeter.save.saveservice.output_format=xml 安装xsltproc：下载xsltproc.zip，解压到非中文目录 ----xsltproc是一个快速的XSLT引擎，通过XSL层叠样式表把XML转化为HTML、PDF等…
-
Fitnesse使用系列一
一、简介 按标准说法Fitnesse是一个验收测试框架，先不用理会这些貌似“高大上”的名词。看看它是如何介绍自己的。在手册文档的首页，定义了四种说明：1.是一个软件开发合作工具；2.是一个软件测试工具；3.是一个wiki…
-
rdd没有reduceByKey的方法
写Spark代码的时候经常发现rdd没有reduceByKey的方法，这个发生在spark1.2及其以前对版本，因为rdd本身不存在reduceByKey的方法，需要隐式转换成PairRDDFunctions才能访问，因此需要引入Import org.apache.spark.Sp…