大数据
-
离线部署 CDH 5.12.1 及使用 CDH 部署 Ha
Cloudera Manager Cloudera Manager 分为两个部分:CDH和CM。 CDH是Cloudera Distribution Hadoop的简称,顾名思义,就是cloudera公司发布的Hadoop版本,封装了Apache Hadoop,提供Hadoop所有的服务,包括HDFS,YARN…
-
Selenium使用Chrome Driver
Download Chrome Driver from https://sites.google.com/a/chromium.org/chromedriver/ if you cannot visit google.com, then going to Baidu netdisk download: v78.0.3904.105 Link:https://pan.baidu.com/s/1Z…
-
实现一个迷你版的RPC
前言 在实际后台服务开发中,比如订单服务(开发者A负责)需要调用商品服务(开发者B负责),那么开发者B会和A约定调用API,以接口的形式提供给A。通常都是B把API上传到Maven私服,然后B开始写API的实现,A只需要引…
-
大数据入门
从技术实施层次上,大数据产业链分为四个层面,1.大数据应用(政府、金融、运营商、互联网等)、大数据交易、大数据运营2.大数据分析工具(数据处理、数据挖掘、可视化、模型预测)3.基础软件平台(数据采集、内容…
-
SparkStreaming基础理论
一、Spark Streaming的介绍 (1)为什么要有Spark Streaming? Hadoop 的 MapReduce 及 Spark SQL 等只能进行离线计算,无法满足实时性要求较高的业务 需求,例如实时推荐、实时网站性能分析等,流式…
-
折腾Java设计模式之备忘录模式
原文地址:折腾Java设计模式之备忘录模式 备忘录模式 Without violating encapsulation, capture and externalize an object's internal state allowing the object to be restored to this state later. 在不破坏…
-
零基础可以转行做软件测试吗?
首先答案是肯定的(当然不是像做搬运工那样的零基础,而是说没有计算机相关的专业学习或工作经验)。有很多转行做软件测试例子,Erin曾经带过的测试人员中,也有非计算机专业、行业转行过来的。 作为一个入门门槛相…
-
spark的持久化和共享变量
1. 持久化算子cache 介绍:正常情况下,一个RDD是不包含真实数据的,只包含描述这个RDD元数据信息,如果对这个RDD调用cache方法,那么这个RDD的数据,依然没有真实数据,直到第一次调用一个action的算…
-
大快搜索获评“2018中国大数据基础软件领域领军企业”
大快搜索自荣获“2018中国大数据企业50强”殊荣,12月20日在由工信部指导,中国电子信息产业化发展研究院主办的2018中国软件大会上,大快搜索获评“2018中国大数据基础软件领域领军企业”称号,入选中国数字化转型TOP10…
-
端到端呼叫流过程回顾
End to End call flow Overview 1、在开机之后,NAS层向RRC发起服务请求,RRC初始化一个频率扫描和系统信息获取过程。 2、一旦完成频率扫描、SIB获取和小区驻留,RRC对底层进行配置并通知NAS层可以获得服务。…