开源
-
大数据开发需要学什么？史上最容易听懂的教程，让你快速入门
大数据的发展已经进入发展的快车道，当前医疗行业、能源行业、通信行业、零售业、金融行业、体育行业等各行业都可以从其数据的采集、传输、存储、分析等各个环节产生巨大的经济价值，对大数据人才的需求也是越来越…
-
IDEA下载Maven速度很慢怎么解决
给命令mvn clean install添加多线程参数mvn clean install -T 10，使用-T参数可以告诉Maven使用更多的线程来同时下载组件。
-
怎么使用Fiddler抓取手机上的数据包
很多时候我们会遇到这个麻烦：1、怎么抓取手机上访问的某个页面或者某个APP的数据包；2、怎么让手机host访问某一台服务器，然后在这台服务器上测试； 使用Fiddler完全可以解决以上问题，具体实现如下：一、下载Fidd…
-
win10专业工作站版本有什么特殊功能
win10最强悍的版本既不是win10专业版，也不是win10企业版，而是win10专业工作站版本。那么这个版本主要有哪些特殊功能呢？接下来小编为大家详细介绍一下。1.硬盘跑分大幅提升“卓越性能模式”是Win10专业工作站版里新…
-
Hbase的介绍和使用
1. HBase是什么 1.1 HBase的概念 HBase基于Google的BigTable论文，是建立的HDFS之上，提供高可靠性、高性能、列存储、可伸缩、实时读写的分布式数据库系统。 在需要实时读写随机访问超大规模数据集时，可以使用HBas…
-
hadoop和spark的区别介绍
学习hadoop已经有很长一段时间了，好像是二三月份的时候朋友给了一个国产Hadoop发行版下载地址，因为还是在学习阶段就下载了一个三节点的学习版玩一下。在研究、学习hadoop的朋友可以去找一下看看（发行版 大快DKha…
-
性能测试工程师应关注的性能指标
对一个软件做性能测试时需要关注那些性能呢？ 我们想想在软件设计、部署、使用、维护中一共有哪些角色的参与，然后再考虑这些角色各自关注的性能点是什么，作为一个软件性能测试工程师，我们又该关注什么？ 1、开发…
-
Spark源码研读-散篇记录（二）：Spark内置RPC框架之TransportConf
1 Spark版本 Spark 2.1.0。 2 说明 去年在网易之初，已经开发了一个完整的RPC框架，其中使用的核心技术也是Netty，所以当看到Spark的RPC框架时，并不觉得太陌生，关于个人开发的这个RPC框架，真正完全可用是在今年…
-
在 java 项目中使用 vicrab 实现自动化异常（BUG）管理插件
一 背景介绍系统错误异常管理是非常重要的系统模块，在我们的日常开发，测试，线上运营诊断都有着非常强大的做用。然而，传统的日志系统都是发生在系统出问题的时候，工程师们去后台一段一段的翻看日志，海量的日志…
-
Hadoop优化与调整
【io.file.buffer.size】(core-site.xml) 用来设置缓存的大小，较大的缓存提供更高效的数据传输，但也意味着更大的内存消耗和延迟 默认值为4KB，一般情况下设置为64KB(65536) 【dfs.balance.bandwidthPerSec】 HDFS…