开源
-
java验证码学习一
package com.sys.web.sesoion; import java.io.IOException; import java.io.PrintWriter; import javax.servlet.ServletException; import javax.servlet.http.HttpServlet; import javax.servlet.http.HttpServle…
-
cssci和核心期刊的区别
cssci和核心期刊的区别 cssci是核心期刊的一种，核心期刊有很多种其中包括cssci。CSSCI即中文社会科学引文索引，由南京大学主持，也叫来源期刊目录。目前国内有7大核心期刊(或来源期刊)遴选体系，即： 1、北…
-
HDFS 入门和基本操作
1、HDFS 是做什么的 Hadoop实现了一个分布式文件系统（Hadoop Distributed File System），简称HDFS，hdfs是分布式计算中数据存储管理的基础，是基于流数据模式访问和处理超大文件的需求而开发的，可以运行于廉…
-
Spark SQL常见4种数据源(详细)
通用load/write方法 手动指定选项 Spark SQL的DataFrame接口支持多种数据源的操作。一个DataFrame可以进行RDDs方式的操作，也可以被注册为临时表。把DataFrame注册为临时表之后，就可以对该DataFrame执行SQL查询。 …
-
Postgres-XL 数据库
Postgres-XL是一个大规模并行数据库，建立在PostgreSQL 9.5之上，与PostgreSQL 9.5高度兼容。它的不同之处在于它同时支持商业智能工作负载和高容量事务写入和读取工作负载。 Postgres-XL是一款开源的PG集群软件，XL…
-
hadoop&spark安装（下）
上一遍文章中其实最主要的就是JAVA环境变量以及hadoop环境变量的设置，这两个设置好了的话，运行hadoop基本上不会出问题。 在hadoop的基础上安装spark好简单。 安装Spark之前需要先安装Hadoop集群，因为之前已经安…
-
十四、MapReduce--OutputFormat和RecordWriter抽象类
一、基本原理 reduce执行完毕之后，每个reduce都会将KV输出到一个文件中。那么KV输出到文件中时是以什么格式输出的呢？这就涉及到两个抽象类：OutputFormat和RecordWriter。 1、OutputFormat public abstract cla…
-
基于.netcore的MVC应用开发经验共享
1 起个头 很多95后的程序员没有搞明白MVC，需要多练习才行。 MVC实际上不是设计模式，而是架构模式/体系结构模式，体系结构是老称呼了，现在基本上都叫架构了。 模型-视图-控制器 (MVC) 体系结构模式将应用分成 3 …
-
hadoop单节点搭建
企业大数据来源1.企业内部日志文件数据库**用户行为数据2.企业外部爬虫第三方购买（蚂蚁数据银行）--贵阳大数据=海量数据+复杂类型的数据hadoop是由谷歌的三篇论文《mapreduce》 --》mapreduce 分布式离线并行计算…
-
细品慢酌QuickTest关键视图（4）
无论是在关键字视图中添加对象、添加操作步骤，还是在关键字视图中使用循环与条件语句，编辑完成后都需要调试测试脚本，以验证测试脚本是否存在逻辑及语法错误，从而保证脚本的正确运行。QuickTest是否能够像其他大…