数据采集
-
pip升级命令详解大数据
pip升级命令 $ python -m pip install –upgrade pip
-
pip安装时使用国内源,加快下载速度详解大数据
国内源: 新版ubuntu要求使用https源,要注意。 清华:https://pypi.tuna.tsinghua.edu.cn/simple 阿里云:http://mirror…
-
pip安装第三方库详解大数据
不是所有的第三方Python包都能通过pip来安装,只能是发布在pypi.org上面的才能通过pip安装。 pypi是什么? pypi是一个仓库,上面存放了大量的Python第三方…
-
Kafka项目实战-用户日志上报实时统计之应用概述详解大数据
1.概述 本课程的视频教程地址:《Kafka实战项目之应用概述》 本课程是通过一个用户实时上报日志来展开的,通过介绍 Kafka 的业务和应用场景,并带着大家搭建本 Kaf…
-
Kafka项目实战-用户日志上报实时统计之分析与设计详解大数据
1.概述 本课程的视频教程地址:《Kafka实战项目之分析与设计》 本课程我通过一个用户实时上报日志案例作为基础,带着大家去分析Kafka这样一个项目的各个环节…
-
Kafka项目实战-用户日志上报实时统计之编码实践详解大数据
1.概述 本课程的视频教程地址:《Kafka实战项目之编码实践》 该课程我以用户实时上报日志案例为基础,带着大家去完成各个KPI的编码工作,实现生产模块、消费模…
-
Kafka – 消费接口分析详解大数据
1.概述 在 Kafka 中,官方对外提供了两种消费 API,一种是高等级消费 API,另一种是低等级的消费 API。在 《高级消费 API》一文中,介绍了其高级消费的 API…
-
Kafka 分区备份实战详解大数据
1.概述 在 Kafka 集群中,我们可以对每个 Topic 进行一个或是多个分区,并为该 Topic 指定备份数。这部分元数据信息都是存放在 Zookeeper 上,我们可以…
-
Kafka SCRAM和PLAIN实战详解大数据
1.概述 目前Kafka ACL支持多种权限认证,今天笔者给大家介绍一下SCRAM和PLAIN的权限认证。验证环境如下: JDK:1.8 Kafka:2.3.0 Kafka Eag…
-
Kafka幂等性原理及实现剖析详解大数据
1.概述 最近和一些同学交流的时候反馈说,在面试Kafka时,被问到Kafka组件组成部分、API使用、Consumer和Producer原理及作用等问题都能详细作答。但是,问到一…