开源

  • 【HBase-1】HBase安装配置,使用独立zookeeper

    1.HBase安装配置,使用独立zookeeper 2.修改环境变量:第一台机器规划为master, 第二台机器为RegionServer,再在第一台机器上启动RegionServer制作一个集群1 master2 RegionServer 在机器上执行:vi /etc/profile…

    大数据 2021年11月15日
  • Hadoop 部署之环境准备(一)

    一、软硬件规划 ID 主机类型 主机名 IP 应用软件 操作系统 硬件配置 1 物理机 namenode01 192.168.1.200 jdk1.8.0_171、hadoop-2.7.3、hive-2.3.3、hbase-1.2.6、zookeeper-3.4.10、spark-2.3.1 CentOS7.4 6核CPU、…

    大数据 2021年11月15日
  • ubuntu下使用docker安装grafana

    Grafana 是一个开箱即用的可视化工具,具有功能齐全的度量仪表盘和图形编辑器,有灵活丰富的图形化选项,可以混合多种风格,支持多个数据源特点。 本文通过使用docker快速安装使用grafana 1.查询镜像 sudo docker…

    大数据 2021年11月15日
  • 播放器技术分享(5):延时优化

    搞音视频开发好些年,分享过许多博客文章,比如:前几年发布的《FFmpeg Tips》系列,《Android 音频开发》系列,《直播疑难杂症排查》系列等等。最近想把多年来开发和优化播放器的经验也分享出来,希望能帮助到音视…

    大数据 2021年11月15日
  • linux下redmine3.3迁移、升级、插件备忘录

    服务现状 地址:http://ip:3000 主要用到了redmine(rails)服务、mysql服务,还有些其他服务! 基础环境 yum install -y gcc-c++ patch readline readline-devel zlib zlib-devel libyaml-devel libffi-devel open…

    大数据 2021年11月15日
  • 记录一次生产环境hadoop集群优化以及pid文件缺失处理

    一、优化准备 优化需要根据实际情况综合分析 1、关闭系统swap分区(如果未关闭的话) 在Hadoop中,如果使用系统默认设置,会导致swap分区被频繁使用,集群会不断发出警告。 对于每个作业处理的数据量和每个Task中用…

    大数据 2021年11月15日
  • jmeter中html报告生成方式

    1、使用命名: >jmeter -g loginWithPassword100c180s.jtl -o ./report 解释:jmeter -g 为固定写法;loginWithPassword100c180s.jtl:为.jtl文件-o :指定文件./report:为当路径: 中间出问题记录:An error o…

    大数据 2021年11月15日
  • SparkStreaming的实战案例

    废话不多说,直接上干货!!!相关依赖: <properties> <project.build.sourceEncoding>UTF8</project.build.sourceEncoding> <maven.compiler.source>1.8</maven.compiler.source> …

    大数据 2021年11月15日
  • pandas层级索引

    层级索引(hierarchical indexing) 下面创建一个Series, 在输入索引Index时,输入了由两个子list组成的list, 第一个子list是外层索引,第二个list是内层索引。 示例代码: import pandas as pd import numpy as …

    大数据 2021年11月15日
  • 软件设计是怎样炼成的(2)——优秀设计从分析需求开始

    摘要: 设计应该针对需求来做,这个大道理似乎人人都懂,但实际操作时往往就不是这样。所以我们也不说大道理,直接通过一个“很简单”的案例来体验一下优秀设计应该如何从分析需求开始,体验架构设计是如何全面考虑各…

    大数据 2021年11月15日