大数据

  • 企业级大数据平台

    部署:分为测试环境、生产环境。Hadoop发行版本:Apache、CDH(tar包、rpm包、parcel包,必须由cloudera manager进行管理)、HDP注意:大数据框架内禁用IPV6;同时要修改用户的最大进程数、单个进程打开的最大文件…

    大数据 2021年11月15日
  • ubuntu18.04 tensorflow 机器学习环境搭建

    1. 主机配置说明 在前几天,得知公司新采购了几台主机,所以我们组领导就向公司申请了一台回来,做数据分析。 服务器买的是惠普的主机,型号是:HP EliteDesk 800 G3。不算强劲,但用来做GPU的数据分析测试,也可以…

    大数据 2021年11月15日
  • jmeter常用Beanshell脚本

    整理了一批jmeter常用的beanshell脚本供大家参考! 时间戳 import java.text.SimpleDateFormat; import java.util.Calendar; import java.util.Date; try{ Date date =new Date(); //获取当前时间 SimpleDateFormat…

    大数据 2021年11月15日
  • 软件设计原则和方法通俗理解

    网上有很多关于软件设计原则的说法,很精确,很官方,但是对于有些初学者来说可能是不知所云,到最后把自己给郁闷到了,学习软件应该是一件愉快的事情。 那么软件设计原则有哪些呢? (1)可靠性 做出一个可靠的软件…

    大数据 2021年11月15日
  • 轻量级可嵌入多维分析后台

    问题的提出 多维分析(BI)系统后台数据源通常有三种选择。一、普通数据库;二、专业数据仓库;三、BI 系统自带的数据源。 但是,这三种选择都有各自的问题。普通数据库一般都是行式存储,很难获得多维分析希望的高…

    大数据 2021年11月15日
  • python spark windows pycharm pyspark环境配置

    1、下载如下 放在D盘添加 SPARK_HOME = D:/spark-2.3.0-bin-hadoop2.7。 并将 %SPARK_HOME%/bin 添加至环境变量PATH。 然后进入命令行,输入pyspark命令。若成功执行。则成功设置环境变量 找到pycharm sitepackage…

    大数据 2021年11月15日
  • Tp3.2 RESTFul 根据地区查询生成xml、html、json的Api接口的天气信息

    1、在控制器页面: <?php // 本类由系统自动生成,仅供测试用途 namespace Home/Controller; use Think/Controller/RestController; class IndexController extends RestControll…

    大数据 2021年11月15日
  • 0035-如何使用Sentry管理Hive外部表(补充)

    温馨提示:要看高清无码套图,请使用手机打开并单击图片放大查看。 1.文档编写目的 本文文档主要讲述如何使用Sentry管理Hive/Impala外部表权限。 内容概述 1.创建测试库及外部表 2.创建角色并授权 3.授权测试 4.测…

    大数据 2021年11月15日
  • 大数据系列之HBase命令行操作

    1、课程简介 本文章先会介绍HBase命令行,接着会介绍java代码对hbase中的表进行增删改查。 本文章中所有命令均在CentOS-6.4-x86_64,hadoop-2.5.2,jdk1.8.0_152,zookeeper-3.4.11,hbase-1.2.6中运行通过,为减少…

    大数据 2021年11月15日
  • lvm相关命令学习

    我的博客已迁移到xdoujiang.com请去那边和我交流 基础环境 1、当前版本 cat /etc/debian_version 7.8 2、安装包lvm2 apt-get install lvm2 -y 一、将sdb sdc sdd三块分区加到卷组(ha…

    大数据 2021年11月15日