大数据

  • flume抽取mysql数据到kafka

    kafka+zookeeper搭建见文章教程url flume安装:1、下载地址2、安装-下图 新建数据库和表3、配置新增conf/mysql-flume.conf [root@node191 apache-flume-1.8.0-bin]# cat conf/mysql-flume.conf a1.channels = ch-1 …

    大数据 2021年11月15日
  • 注解位置辨析

    随着对消息队列的应用日益推广,在分布式系统中的使用可以极大的降低对各个组件间的耦合度,从而提高组件的处理效率。因为消息队列的存在,可以使我们对任务进行异步处理,这样可以减少请求响应时间和解耦。同时由…

    大数据 2021年11月15日
  • cdh系列大纲(目录 先看)

    需要搭建一个庞大的cdh系统 //写一个博客系列 从无到有 自己思想的升华!根据此系统进行相应的优化构思:1、搭建cdh 前硬件资源的选型 //这里就要针对hadoop生态圈 去选择什么样的硬件 cpu 硬盘厂家等2、搭建cdh 版…

    大数据 2021年11月15日
  • 如何应对大数据时代

    近些年来,大数据逐步***到现实生活,从医疗到信贷,可谓是各个行业。单从“大数据”这个词语来看,说明数据量很大。如果这些数据结果,不做处理,以单纯数字呈现,相信你看的超不过10秒中,你会头皮发麻。你都头皮发…

    大数据 2021年11月15日
  • selenium对video视频进行识别和操作

    selenium对video视频进行识别和操作 场景:        打开网址,对视频进行播放和停止的操作 思路:        打开网址,用tagname定位到视频,赋值给vp,调用js,(JavascriptE…

    大数据 2021年11月15日
  • Se(4)---自定义profile

    package test; import org.openqa.selenium.WebDriver; import org.openqa.selenium.chrome.ChromeDriver; import org.openqa.selenium.chrome.ChromeOptions; import org.openqa.selenium.firefox.FirefoxDriver; …

    大数据 2021年11月15日
  • LibRec: 基于机器学习的大数据推荐系统

    简介: LibRec 是领先的推荐系统Java开源算法工具库,覆盖了70余个各类型推荐算法,有效解决评分预测和物品推荐两大关键的推荐问题。推荐系统是机器学习和大数据技术的经典实际应用,旨在提供高效准确的个性化…

    大数据 2021年11月15日
  • 1.初识scala

    简介   Scala(Scala Language的简称)语言是一种能够运行于JVM和.Net平台之上的通用编程语言,既可用于大规模应用程序开发,也可用于脚本编程。   Scala由Martin Odersk于2001开发,2004年开始…

    大数据 2021年11月15日
  • hadoop hive 安装

    雷顿学院大数据:http://www.leidun.site/ https://segmentfault.com/a/1190000009103629 hadoop 安装 datanode无法启动 https://blog.csdn.net/baidu_16757561/article/details/53698746 hadoop namenode无法启动…

    大数据 2021年11月15日
  • 57. Netty源代码分析-服务器端启动ServerBootstrap初始化

    一. 开始 1.1 上一篇 接上一篇NioEventLoopGroup的实例化分析继续https://blog.51cto.com/483181/2118817 这篇博客要分析的是 “2. ServerBootstrap初始化”,如下: EventLoopGroup bossGroup = new NioEventLoopGro…

    大数据 2021年11月15日