大数据

在本例中将Hive的metadata存储在mysql中； 透彻理解每个表的用途，以及每个表之间是通过什么进行关联，对于用hive用着很大的帮助； Hive的版本不同，表的个数也有可能不同；Hive 1.1是36张表，1.2是35张表； 要重点…

接下来通过一个实际的案例，介绍在MR编程中的，partition、sort、combiner。    流量统计项目案例 数据样本：1363157984040 13602846565 5C-0E-8B-8B-B6-00:CMCC 120.197.40.42052.flash3-http.qq.com 综合门户 15 …

背景:在预测型项目中是否遇到计划赶不上变化快？迟迟无法向客户交付产品或项目？交付后因与客户设想的需求不同，导致频繁改动，团队士气、客户信任度严重超支！ 身为项目负责人、产品经理、技术负责人的你我遇到上…

RemoteException(org.apache.hadoop.ipc.StandbyException): Operation category READ is not supported in state standby  两个namenode都是standby 在一台主机上执行: hdfs haadmin -transitionToActive --f…

一谈到软件测试，很多人都是多少带着一些五味杂陈的感觉，眼光高的觉得开发才有前途，不自信的学习测试也学不精通，面对各种压力，在岁月的流逝中自怨自艾。这几年从事软件测试培训工作以来，我遇到了很多学员的很…

辅助绘图工具的方案选择过程是复杂的，从去年8月底就开始了初步的调用，也经过了种种碰壁，最终得出了基本的方案。 先说一些题外话：为什么需要辅助绘图设计？加班的庞大工作量来自于哪里？ 单位目前主营业务是地铁…

   连续几天都在写用例，回头看看，除了业务以外，基本上都是增删改查、分页控件校验、必填校验、格式校验、最大长度校验、特殊字符校验、唯一性校验，既然这样，为什么不专门建立一个通用测试用例…

[TOC] 一、MapReduce编程基本组成 编写MapReduce的程序有至少三个必不可少的部分：mapper，reducer，driver。可选的有 partitioner，combiner而且mapper的输入输出、reducer的输入输出都是key value型的，所以要求…

悲剧的开始 2013年是个悲剧的开始-----毕业,验证了一句流行语,即:"毕业即是失业",大学生活结束了,如很多大学生一样,带着迷茫的眼神,沉重的身体摩拳擦掌地挤进人山人海的招聘市场,然后满身大汗的空手而归,然后得到了…

使用selenium中的webdriver模块对浏览器进行操作1）b = webdriver.Firefox() #打开浏览器2）b.get("http://www.baidu.com") #打开一个网页3）b.title,current_url 判断访问是否有效4）ele = find_element…