大数据

@Configuration注解与spring-*.xml达到的目的是一样的。@Configuration是为了完全的取消xml配置文件而改用注解。下面将对其进行对比说明： beans的加载方式 spring-.xml的加载方式：ClassPathXmlApplicationContext…

想完成一些脚本，来自动跑一些application的注册、文件上传的脚本。所以粗略学习一下JUnit 1）直接新建一个JUnit case 限时：@Test(timeout=200) timeout属性 单位是毫秒 //异常测试 excepted=异常名.class  …

        今天我们来看下排序，那么什么是排序呢？排序是计算机内部经常进行的一种操作，其目的是将一组“无序”的数据元素调整为“有序”的数据元素。那么排序的数学定义时什么呢？如下         下来我们来看一个概念：…

概要 本文将介绍使用GoldData半自动登录功能，来采集需要登录网站的数据。GoldData半自动登录功能，就是指通过脚本来执行登录，如果需要验证码或者其它内容需要人工输入时，可以通过收发邮件来执行登录流程。 下载…

        需求：由于脚本数量大，如果全部开启日志需要很长时间，因为一些日志需要开启，一些日志不需要开启，经过查询函数（lr_set_debug_message（））； 具体实现： &nb…

微信公众号 redis是日常开发中最常的非关系型数据库，可以说只要是个项目基本都会使用到。常用来做数据缓存、分布式锁等等。redis的基本安装内容就不说了（在之前的博客搭建系列里面有提到redis的安装使用，如果不…

好程序员大数据学习路线继续为大家分享Scala系列之集合操作函数4.6 集合的重要函数4.6.1sum/max/min/count在序列中查找最大或最小值是一个极常见的需求，如下：val numbers = Seq(11, 2, 5, 1, 6, 3, 9) numbers.ma…

先添加一个组，nano /etc/group,切换最后一行， 添加hive:x:5000:                          mygroup后面用户区加上hive 添加用户 nano /etc/pa…

java环境变量配置容易出现的问题: 配置但是我在path中绝对路径没有问题(如:path：D:/Java/jdk1.7.0_45/bin),但换成相对路径就没有效果(%JAVA_HOME%), 原因是JAVA_HOME变量也需要是系统变量.如图

普通情况下使用scan读取数据 x <- scan("D://test.txt") 按列读入，指定数据类型 x <- scan("test2dat.txt", what=list("",0,0))  #读取三列数据，第一列是字符，第二和…