开源

  • Kafka partitions 迁移

    echo '{"topics":[{"topic": "test1"},{"topic":"test2"}], "version":1}' >ready-move-topics.json /usr/hdp/current/kafka-broker/bin/kafka-reassign-partitions.sh --zookeeper agent01.ambari.com:2181,age…

    大数据 2021年11月4日
  • 体系结构方案 -ETL 中间件

    ETL 常常做成 ELT 甚至 LET! 这样做带来的恶果是:1)数据库臃肿、负担重,数据管理混乱;2)性能低下,时间成本高( 数据库写入很慢),影响 ETL 窗口时间。解决方案: 引入库外计算引擎 - 集算器,直接计算多样数…

    大数据 2021年11月4日
  • python3.x操作csv文件的实战

    说明 python3.x集成了对csv文件的操作,直接引入包即可,但python2.x则需要单独安装。 实战 1、读取csv文件 #引入包 import csv #打开文件 csvfile = open('xiaoqiang.csv',newline='&#…

    大数据 2021年11月4日
  • 四、flink--window、eventTime和wate

    一、flink的window机制 1.1 window概述 ​ streaming流式计算是一种被设计用于处理无限数据集的数据处理引擎,而无限数据集是指一种不断增长的本质上无限的数据集,而window是一种切割无限数据为有限块进行处理的手…

    大数据 2021年11月4日
  • 美容院管理软件预约功能的三个优势

    如今,美容院已经逐步成为一个让客户休闲、体验的休闲场所。现在是享受的时代,消费的消费意识与观念也越来越浓,美发行业应该利用其策划、管理、经营来发展事业。不注重经营管理、技术、服务质量的经营者将会经营…

    大数据 2021年11月4日
  • find命令格式与用法

    find:      实时查找工具,通过遍历指定路径下的文件系统完成文件查找;      工作特点:            查找速度略慢;         &…

    大数据 2021年11月4日
  • 基于spark排序的一种更廉价的实现方案-附基于spark的性能测试

    排序可以说是很多日志系统的硬指标(如按照时间逆序排序),如果一个大数据系统不能进行排序,基本上是这个系统属于不可用状态,排序算得上是大数据系统的一个“刚需”,无论大数据采用的是hadoop,还是spark,还是impa…

    大数据 2021年11月4日
  • 亲测---yum安装出现This system is not registered with RHN

    [root@localhost ~]# yum install libtool Loaded plugins: rhnplugin, security This system is not registered with RHN. RHN support will be disabled. Setting up Install Process Nothing to do   解决…

    大数据 2021年11月4日
  • Delphi响应Html

    procedure TForm1.WebBrowser1BeforeNavigate2(ASender: TObject; const pDisp: IDispatch; var URL, Flags, TargetFrameName, PostData, Headers: OleVariant; var Cancel: WordBool); var myurl,tstr:string; Stp…

    大数据 2021年11月4日
  • activemq spring客户端

    一、dependency <properties>     <activemq.version>5.15.4</activemq.version>     <xbean-spring.version>4.8</xbean-spring.version> …

    大数据 2021年11月4日