大数据
-
大数据IMF-L38-MapReduce内幕解密听课笔记及总结
本期内容： 1 MapReduce架构解密 2 MapReduce运行集群研究 3 通过Java编程操作MapReduce实战 Hadoop从2。0开始就已经必须运行在 Yarn上面了，1.0时根本不关心Yarn。 现在是 MR，也是讲Yarn的，而且已经是 基础入门…
-
“Head First 设计模式“ ：命令模式
命令模式 命令模式定义：将“请求”封装成对象，以便使用不同的请求、队列或者日志来参数化其他对象。命令模式也支持可撤销的操作。命令模式，封装方法调用，命令模式可将“动作的请求者”从“动作的执行者”对象中解耦。…
-
aspack的简单脱壳，望大牛勿喷。
压缩壳 下面是我的脱壳，win7x64下测试。 1.单步跟踪 2.ESP定律 3.一步到达oep 4.内存镜像法 5.脱壳软件 6.脚本脱壳 7.模拟跟踪法，查看内存。SFX,imports,relocationstc eip<地址，另外说下，这个跟踪好慢…
-
1.1什么是数据仓库
数据 仓库是一个databas旨在实现商业智能活动：旨在帮助用户了解和增强其组织的绩效。它专为查询和分析而不是事务处理而设计，通常包含从事务数据派生的历史数据，但可以包含来自其他来源的数据。数据仓库将分析工…
-
启动hadoop。start-all.sh 缺少datanode进程
1）修改每个Slave的namespaceID使其与Master的namespaceID一致。 或者 2）修改Master的namespaceID使其与Slave的namespaceID一致。 该"namespaceID"位于"/usr/hadoop/tmp/dfs/data/current/VERSION"…
-
zookeeper 实现分布式锁安全用法
背景 ConnectionLoss 链接丢失 SessionExpired 会话过期 绕开 zookeeper broker 进行状态通知 leader 选举与zkNode 断开 做好幂等 静态扩容、动态扩容 背景 分布式锁现在用的越来越多，通常用来协调多个并发任务。…
-
selenium webdriver之eclipse java开发环境搭建
小弟虽然用过java，但是实在在wd中感觉写法好复杂，一个wait需要new对象出来，确实没有ruby写的舒服随意。 下载jdk： 进入该网页: http://java.sun.com/javase/downloads/index.jsp 选择 Download JDK 只下载JDK，…
-
Git 中常用的 4 个命令
使用 Git 进行版本管理时，肯定不只做提交，有时候也会需要回退修改，并且在回退的基础上进行重新提交，这时候有几个常用的命令就需要用到了，下面分别做介绍。 1、查看提交日志 首先，我们查看当前提交记录的命令…
-
【沫沫金原创】软件开发工作饱和度评估标准（内部）
工作饱和度评估标准： 序号 维度 数量1 模块 1-N个2 功能 多个3 页面 多个4 新系统 独立负责一个5 功能复杂 1-N个
-
52.源代码解读-RocketMQ消息写入机制
一. 前言 RocketMQ采用内存和磁盘存储来存储消息。那现在来分析一下消息存储的流程 二. 代码流程 在Broker启动的时候会拉起相关服务流程如下： 流程图引用网址http://blog.csdn.net/akfly/article/details/53447000…