开源

hadoop+spark环境--单实例版1、修改主机名及关系映射2、关闭防火墙并创建文件夹mkdir /hadoop/tmpmkdir /hadoop/dfs/namemkdir /hadoop/dfs/datamkdir /hadoop/var3、配置Scala环境[root@hadoop conf]#vim /etc/pro…

安装部署: 开发环境： 后台服务器端采用 Java 、SpringMVC。 数据存储到 /demo_web/WEB-INF/FileDatabase.txt 文件中，不需要依赖DB。 采用 Eclipse Java EE IDE for Web Developers，Eclipse Version: P…

 Command－－对象行为型模式   意图 将一个请求封装为一个对象，从而使你可用不同的请求对客户进行参数化；对请求排队或记录请求日志，以及支持可撤销的操作。   别名 Action，Transaction   …

源码:https://github.com/deeplearning4j 模块分类： deeplearning4j nd4j:基于jvm的科学计算工具包，类似于python numpy。 DataVec：将数据转换成向量的工具包 dl4j-examples:示例 ScalNet：是在deeplearning4j对k…

hadoop文件上传 sudo -u hdfs hadoop fs -put 20171204 / 查看文件hadoop fs -ls / 进入hadoop配置文件，查看 vi /etc/hadoop/conf/hdfs-site.xml 找到hdfs的路径 dfs/nn进入路径cd /dfs/nn 查看name的文件信息 ls

转发+点赞=支持 引言 最近在整理python自动化测试课程的内容，发现了微软出的vs code编辑器太牛逼了，非常好用，而且轻量的不要不要的，特此记录下，有选择纠结症的朋友我强烈推荐使用ta。 PS：兼容win10且兼容高分…

一、作为大数据架构师，需要知道企业为什么要构建数据结构？ 数据结构主要有以下内容： 1）数据标准不一致 2）数据模型管理混乱 3）深入的性能的问题无法解决 4）SQL语句编写水平不高导致出现严重性能问题 5）开发…

模板方法模式 定义：模板方法模式在一个方法中定义一个算法的骨架，而将一些步骤延迟到子类中。模板方法使得子类可以在不改变算法结构的情况下，重新定义算法中的某些步骤。模板方法就是一个固定步骤的“算法”骨架方…

一、flink概述 1.1 流处理技术语义 At most once（最多一次）：每条数据记录最多被处理一次，潜台词也表明数据会有丢失（没被处理掉）的可能。 At least once（最少一次）：每条数据记录至少被处理一次。这个比上一…

所有数学课程成绩 大于 语文课程成绩的学生的学号 CREATE TABLE course (id int,sid int ,course string,score int ) ; // 插入数据// 字段解释：id, 学号， 课程， 成绩INSERT INTO course VALUES (1, 1, 'yuwen',…