开源
-
MapReduce的思想
项目实战案例:搜狗日志查询分析 数据: 一、电商大数据平台整体架构1、大数据(Hadoop、Spark、Hive)都是一种数据仓库的实现方式核心问题:数据存储、数据计算什么是数据仓库?传统的解决大数据的方式,就是一个…
-
Spark bind on port 0. Attempting port 1 问题解决
Linux 下运行spark local bind on port 0. Attempting port 1 问题 2016-11-01 16:04:56 [org.apache.spark.util.Utils]-[WARN] - Service 'sparkDriver'&…
-
spring cloud(五):Swagger2的集成
1、概念 Swagger2 – 服务接口文档,用来前端与后端联系,提高之间的沟通,更有效率的完成项目之间的联调。 2、集成 2.1 、通过pom文件导入swagger &…
-
支付宝17年新春红包技术体系剖析
017年支付宝五福红包红包开奖人数是167966715人(约1.68亿);除夕当天的参与人数是2.2亿;在业务峰值上,活页主页面峰值达到81W/s;扫福的峰值为22W/s;除夕当天的登录峰值为29W/s;除夕开奖峰值是90W/s。在本文中…
-
为什么要建立一套统一开发框架体系
近十年来,中国互联网发展的十分迅速,互联网科研在逐渐地颠覆传统行业,我们的衣食住行随着互联网的进步,发生了天翻地覆的变化。借助这股春风,许多互联网公司如雨后春笋般冒了出来,他们的业务发展的非常快,公…
-
通过python读取ini配置文件
ini是啥 你可以理解为就是一个配置文件的统称吧。比如test.conf,这样的你可以理解为他就是ini文件,里面一般存放一些配置信息。比如数据库的基本信息,一会我们进行讲解! 那么ta的好处是啥呢?就是把一些配置信息…
-
OpenSSl生成SSL证书(支持https)
一:环境与安装说明 WIN7_64,Nginx服务器,OpenSSL_Win64。本人使用phpStudy集成开发环境,使用Nginx+PHP,支持浏览器https请求。 nginx下载地址:http://nginx.org/en/d…
-
mongodb 分组 topN
在统计应用项目中,我们经常会遇到这样的需求:将大量的对象进行排序,然后只需要取出前 N 名作为排行榜的数据,这就是 TopN 算法。mongodb作为nosql数据库的典型代表,能够存储海量数据,在使用过程中也经常…
-
有关Cxgrid控件的用法
1.动态创建列 Gview:TcxGridDBTableView; Gview.ClearItems; Gview.DataController.CreateAllItems(true);
-
VectorCAST对vxWorks环境的支持
VectorCAST支持vxWorks各种版本,包括vxWorks 5.x, vxWorks 6.x以及vxWorks653的不同版本,在VectorCAST编译器列表中可以看到如下图所示的支持列表: 图表1 -- VectorCAST支持的vxWorks环境 VectorCAST通过VectorCA…