开源
-
大数据：spark集群搭建
创建spark用户组，组ID1000 groupadd -g 1000 spark 在spark用户组下创建用户ID 2000的spark用户 获取视频中文档资料及完整视频的伙伴请加QQ群：947967114useradd -u 2000 -g spark spark 设置密码 passwd spark 修…
-
大数据运营-服务型企业架构新思维
《大数据运营》是一种立足于企业架构系统化的思维方式，从战略到执行，从业务到技术，全方位、多维度地剖析，将大数据服务应用于企业运营实践。下面是几张典型的思维框图： 图书已经在各大网上商城预售，8月25日即…
-
Hadoop+Hbase+Zookeeper集群配置
系统版本： CentOS 7.3 最小化安装 软件版本： Hadoop 2.8.0 Hbase 1.3.1 Zookeeper 3.4.9 集群规划： 主机名 IP hadoop01 192.168.1.61 hadoop02 192.168.1.62 had…
-
好程序员大数据学习路线分享HDFS读流程
1.客户端或者用户通过调用FileSystem对象的Open()方法打开需要读取的文件，这时就是HDSF分布式系统所获取的一个对象 2.FileSystem通过远程协议调用NameNode确定文件的前几个Block的位置，对于每一个block,Na…
-
Apache Calcite官方文档中文版- 概览-2. 教程
第一部分 概览 2. 教程 本章针对Calcite的连接建立提供了循序渐进的教程，使用一个简单的适配器来将一个CSV文件目录以包含Schema信息的tables形式呈现，并提供了一个完全SQL接口。 Calcite-example-CSV是一个Cal…
-
单元测试退出标准
1) 单元测试用例设计已经通过评审 2) 核心代码100％ 经过Code Review 3) 单元测试功能覆盖率达到100％ 4) 单元测试代码行覆盖率不低于80％ 5) 所有发现缺陷至少60％都纳入缺陷追踪系统且各级缺陷修复率达…
-
IgH设置EtherCAT数据流程
IgH设置EtherCAT数据流程在启动IgH协议栈后，协议栈会自动的把EtherCAT从站初始化到PREOP模式，从PREOP状态迁移到SAFEOP状态，需要设置PDO、DC等数据。以山洋电机为例数据设置流程如图 1.1所示：图 1.1 PREOP状态迁…
-
程序员笔记|详解Eureka 缓存机制
引言 Eureka是Netflix开源的、用于实现服务注册和发现的服务。Spring Cloud Eureka基于Eureka进行二次封装，增加了更人性化的UI，使用更为方便。但是由于Eureka本身存在较多缓存，服务状态更新滞后，最常见的状况是…
-
苹果换手机怎么转移数据？苹果、安卓都可以一键转移数据
要更换手机的话，旧手机上的数据怎么办还真的是一个难题啊，毕竟手机用久了，上面的有各种重要的数据不是。 那苹果手机换机的话，将数据进行转移，可以分成两种情况，一种吧，就是苹果转苹果，一种就是苹果转安卓了…
-
大数据迁移之DRBD扩容
扩容主/备物理数据盘： [root@MySQL02 ~]# drbdadm down data [root@MySQL02 ~]# mount /dev/sdb1 /mnt/ [root@MySQL02 ~]# df -h Filesystem Size Used Avail Use% Mounted on /dev/sda…