开源
-
红帽/CentOS ext4 格式化16T以上大分区
红帽/CentOSext4 格式化大分区 XX项目中，客户服务器操作系统为redhat6.4版本，有40T的磁盘空间用来存储结构化数据，但未挂载到任何目录下。对于MPP集群数据库，考虑到我方的数据库的安装目录和数据存储目录，需要…
-
jenkins+gitlab+maven+tomcat持续集成环境安装配置
jenkins+gitlab+maven+tomcat，该环境主要实现自动构建部署java web应用。 其工作流程是：提交代码到gitlab--jenkins触发构建任务--maven编译打包--jenkins将war包部署到tomcat。 安装JDK #安装jdk1.8 tar zxv…
-
Hadoop大数据开发学习路线图阶段一
Hadoop发展到今天家族产品已经非常丰富，能够满足不同场景的大数据处理需求。作为目前主流的大数据处理技术，市场上很多公司的大数据业务都是基于Hadoop开展，而且对很多场景已经具有非常成熟的解决方案。 作为开发…
-
Curator教程（三）分布式锁
共享锁 @Testpublic void sharedLock() throws Exception { // 创建共享锁 InterProcessLock lock = new Inte…
-
好程序员大数据学习路线分享AWK详解
好程序员大数据学习路线分享AWK怎详解，awk是一个强大的文本分析工具，相对于grep的查找，sed的编辑，awk在其对数据分析并生成报告时，显得尤为强大。简单来说awk就是把文件逐行的读入，以空格为默认分隔符将每…
-
git多个远程仓库
1. 前言 用 GitHub 管理自己的开源项目有几年了，最近一年更新得比较多，仓库也越来越多越来越大。有时候感觉GitHub太慢，尤其是最近感觉更为明显，于是萌生了再找个国内类似GitHub的代码托管平台的想…
-
大数据运营之数据治理
数据治理包括：隐私、安全、合规性3个方面。 大数据价值创造的前提和基础是企业自身的数据以及全社会开放的数据，当数据开放为社会带来好处的同时，也同时因此了隐私侵犯问题。隐私是社会赋予个人或者企业的权利，…
-
软件测试工作是吃青春饭的吗？
如今的“青春饭”已经远远超出了传统的范畴，IT程序员、网编、公关人员、时尚类记者、电视摄影编导、包装歌手影星的企宣以及直销电脑、×××人员等正组成新的青春饭群体——— 在人们的传统观念中，青春饭不能说不是正当的…
-
Appium环境配置
下载jdk,安装java环境 环境变量配置： JAVA_HOME CLASSPATH Path 测试验证：CMD命令输入Java 安装nodejs 环境变量配置： Path 测试验证：CMD命令输入node-v 安装ADT ANDROID_HOME Path 安装Appium for windows 配置…
-
java写hdfs程序
1、hadoop默认临时数据文件是存储于Unix的tmp目录下（cd /tmp 包含hadoop-root等文件），如果不进行修改，linux系统重启后hadoop有可能出现不正常现象；故需要修改hadoop的临时文件存放目录2、vim core-site.xml 配…