开源
-
第12课：Spark Streaming源码解读之Execu
Receiver接收到的数据交由ReceiverSupervisorImpl来管理。 ReceiverSupervisorImpl接收到数据后，会数据存储并且将数据的元数据报告给ReceiverTracker 。 Executor的数据容错可以有三种方式： WAL日志 数据副本 接…
-
浅析HDFS架构和设计
作者 | 大尊 hdfs是hadoop的分布式文件系统，即Hadoop Distributed Filesystem。下面主要讲下HDFS设计中的比较重要的点，使读者能通过简短的文章一窥HDFS的全貌，适合对HDFS有一点了解，但是对HDFS又感到困惑的初学…
-
kafka深入研究之路(2) kafka简介与专业术语解释说明
目录：1、kafka简介 什么是kafka？ 设计目标是什么？2、kafka的优缺点3、kafka中专业术语解释说明 官方网站： http://kafka.apache.org/introkafka中文教程 http://orchome.com/kafka/index 1/ kafka 简介Kafka是最…
-
java连接SAP的简单例子
最近项目中需要调用sap接口，看啦很多文章，才调试成功。总结如下： 步骤一： 把sapjco3.rar加入到项目的classpath下面 步骤二：把sapjcorfc.dll和sapjco3.dll（我使用的时64位dll）放到tomcat的bin目录下，之前别…
-
如何配置fastjson自动使用最新版本？
Maven是一个Apache开源项目管理工具，基于项目对象模型POM(Project Object Model)，将配置信息定义在一个pom.xml文件中，管理项目构建以及提供其它高级管理工具。 在pom.xml中引入依赖库时，需要指定groupId, artif…
-
Spring Boot中如何注解字段和使用SQL查询加密数据
1、注解字段：@Column(name = "phone", length = 100)@ColumnTransformer(read = "AES_DECRYPT(UNHEX(phone), 'aes_phone')", write = "HEX(AES_ENCRYPT(?, 'aes_phone')…
-
如何设置github提交代码时关联并自动关闭issue？
Github是常用的代码托管平台，功能也在持续的扩展丰富，最近从JIRA管理开发任务换到了使用Github的issues，好处是轻量简单，和代码库直接关联。 一，创建和管理issue 首先应该创建一个代码库，或者拥有权限。 1，在…
-
Elasticsearch 集群自我保护配置
Elasticsearch 集群集群自我保护配置 配置调试原因主要是为了保护ES 集群能够自我保护，避免业务人员写暴力查询语句，大量的占用内存或者CPU最终将es集群直接查挂。文档所有值均为参考值，具体设置多少合适需要根据…
-
如何做好需求评审？
需求评审之殇 需求评审这件事，在软件项目管理的流程上，一直是沦为一个多余的存在，不少企业面对这个事情，从来都是得过且过。也许是由于技术人员不足，从产品到设计到开发到测试，一人包办，自然觉得需求评审没有…
-
回归测试中只有功能测试用例-Bug总结系列笔记
一、定义： 测试人员只执行了变更引起的相关功能的回归测试 二、发生时间段 Always 三、陷阱表现 1.只测试了系统或软件功能 2.回归测试未包含系统质量测试 3.未对架构、设计和实现约束的回归测试 &nb…