开源
-
Elasticsearch：RestClient+SearchSourceBuilder使用案例
1 前言 RestClient是较低层的API，这里使用基于其封装的高层API，即RestHighLevelClient。 需要添加的依赖如下： <dependency> <groupId>org.elasticsearch</groupId> <artifactId>elastic…
-
SAP 系统大数据量资产负债表的性能优化案例
有了固定报表工具之后，这类格式复杂、指标参数任意组合的需求并不难实现，只是原始数据量一大，查询就会非常慢，用户体验变的极差，当多并发请求时，甚至还会对正常业务产生影响！而集算器面对这类问题，却是一把…
-
AI Studio教育版评测：AI真的能够进入校园吗？
伴随着技术的发展和应用场景的拓宽，人工智能已经不再被视为一个全新的概念。在某种程度上，人工智能已经被视为与水或空气一般的存在。但广阔的发展前景与国内捉襟见肘的人才储备严重脱节——根据领英此前发布的报告…
-
hdfs-site.xml配置
1.hadoop的hdfs-site.xml的配置内容如下 <configuration> <property> &n…
-
ServiceComb实战
ServiceComb实战combDemo步骤一、配置POM <?xml version="1.0" encoding="UTF-8"?> <project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:sch…
-
Devops实践：全功能团队
全功能团队devops概念也盛行一段时间了，业界对其设想是比较期待的，这其实是各软件公司在老的路子上走了很多年，现已跟不上时代的发展了。原有的软件开发周期长，而产品的支撑能力不见得能满足快速变化的业务诉求…
-
Hadoop用户配置ssh免密登录
一般生产环境 Hadoop组件都是由hadoop用户来启动，首先需要配置hadoop用户ssh免密登录 1.创建Hadoop用户 [root@hadoop000 ~]# useradd hadoop [root@hadoop000 ~]# id hadoop uid=1102(hadoop) gid=1102(hadoop) gr…
-
spark-shell导入第三方依赖
对于spark下已经有的依赖，直接 import SparkContext 但是有些第三方依赖，需要从外部引入 spark-shell --jars /home/wangtuntun/下载/nscala-time_2.10-2.12.0.jar 如果有多个jar包需要导入，中间用逗号隔开
-
(版本定制)第18课：Spark Streaming中空RDD处理及流处理程序优雅的停止
本期内容： 1. Spark Streaming中RDD为空处理 2. Streaming Context程序停止方式 Spark Streaming运用程序是根据我们设定的Batch Duration来产生R…
-
JMeter分布式压测
1.分布式压测原理： 使用Master-Slave模式，用master机控制多台slave负载机，向被测服务器发送请求，从而能够支持几千几万的较大并发。 master机负责测试脚本的分发、启动、停止、从slave收集测试结果，等 2.…