开源
-
主从复制、读写分离、分库分表
一：主从复制 原理 master将改变记录到二进制日志中（Binary log） slave将master的binary log拷贝到它的中继日志（relay log） slave开始一个工作线程---I/O线程。I/O线程在master上打开一个普通的连接，然后开始b…
-
【大数据】年薪百万架构师必备技能
搞Java开发的同学，目标都想成为Java架构师；搞大数据开发的同学，目标都想成为大数据架构师。 成为大数据架构师有什么好处呢？ 归其原因： 1.技术上能达到一定的高度，被公司认可，也被社会认可，有成就感； 2.待…
-
Hive Hue的导出XLS格式，数据不全
在使用Hive Hue查询出结果之后，点击按钮【以XLS格式下载结果】导出的数据文件不完整。 下图是按照XLS和CVS格式导出的文件大小比较的图片，明显按照cvs格式导出的文件数据比xls格式的数据多 无奈，暂时只能导出csv…
-
Lintcode11 Search Range in Binary Search Tree solution 题解
【题目描述】 Given two values k1 and k2 (where k1 < k2) and a root pointer to a Binary Search Tree. Find all the keys of tree in range k1 to k2. i.e. print all x such that k1<=x<=k2 and x is…
-
大数据IMF-L38-MapReduce内幕解密听课笔记及总结
本期内容： 1 MapReduce架构解密 2 MapReduce运行集群研究 3 通过Java编程操作MapReduce实战 Hadoop从2。0开始就已经必须运行在 Yarn上面了，1.0时根本不关心Yarn。 现在是 MR，也是讲Yarn的，而且已经是 基础入门…
-
“Head First 设计模式“ ：命令模式
命令模式 命令模式定义：将“请求”封装成对象，以便使用不同的请求、队列或者日志来参数化其他对象。命令模式也支持可撤销的操作。命令模式，封装方法调用，命令模式可将“动作的请求者”从“动作的执行者”对象中解耦。…
-
aspack的简单脱壳，望大牛勿喷。
压缩壳 下面是我的脱壳，win7x64下测试。 1.单步跟踪 2.ESP定律 3.一步到达oep 4.内存镜像法 5.脱壳软件 6.脚本脱壳 7.模拟跟踪法，查看内存。SFX,imports,relocationstc eip<地址，另外说下，这个跟踪好慢…
-
1.1什么是数据仓库
数据 仓库是一个databas旨在实现商业智能活动：旨在帮助用户了解和增强其组织的绩效。它专为查询和分析而不是事务处理而设计，通常包含从事务数据派生的历史数据，但可以包含来自其他来源的数据。数据仓库将分析工…
-
启动hadoop。start-all.sh 缺少datanode进程
1）修改每个Slave的namespaceID使其与Master的namespaceID一致。 或者 2）修改Master的namespaceID使其与Slave的namespaceID一致。 该"namespaceID"位于"/usr/hadoop/tmp/dfs/data/current/VERSION"…
-
zookeeper 实现分布式锁安全用法
背景 ConnectionLoss 链接丢失 SessionExpired 会话过期 绕开 zookeeper broker 进行状态通知 leader 选举与zkNode 断开 做好幂等 静态扩容、动态扩容 背景 分布式锁现在用的越来越多，通常用来协调多个并发任务。…