开源

  • CDH设置邮件警报功能

    在CDH的7180页面找到Cloudera Managerment Service 如图所示: 在Configuration中,搜索alert 设置接收信息的邮箱。 设置内容都在图片上:

    大数据 2021年11月16日
  • 一文掌握airtest自动化测试工具

    之前写过一篇airtest的文章,链接在这里https://blog.51cto.com/xqtesting/2420165 这次是学员的原创文章也是关于airtest的,献给大家,本文最终版权归学员斌宇所有 一、Airtest的简介 对于测试人员而言。小程序测…

    大数据 2021年11月16日
  • Jmeter接口测试实战-数据传递

    Jmeter接口测试实战-数据传递 接口与接口之间没有关联的测试是缺乏意义和没有灵魂的,只有数据在不同接口之间传递才能勾画出业务场景重要的链路. 我们用较为通用的http/https协议,接口普遍返回json方式为例. 举例场…

    大数据 2021年11月16日
  • IDEA从Github中Clone Maven项目,解决树形目录及Jar包依赖的问题

    很多人在开发中都会碰到的一个问题,当我们用IDEA从Github中检出Maven工程后(Java),发现既不能运行,也不能编译,左侧的树形目录还怪怪的,现在就来说说如何解决这个问题。 IDEA从github或者gitlab上pull 工程前要…

    大数据 2021年11月16日
  • Hadoop中HDFS小文件产生场景及其处理方案

    影响: 1、文件的元数据存储在namenode中,每个文件的元数据都差不多大,小文件过多会极大的占用namonode 的内存,制约集群的扩展。(主要影响) 2、在对小文件进行处理的时候,一个小文件对应一个maptask,一个map…

    大数据 2021年11月16日
  • Hive调优技巧

    1.Fetch抓取 set hive.fetch.task.conversion=more(默认) 1 Fetch 抓取是指,Hive 中对某些情况的查询可以不必使用 MapReduce 计算。该属性设置为 more 以后,在全局查找、字段查找、limit 查找等都不走 MapReduc…

    大数据 2021年11月16日
  • 支付宝之所以牛逼的原因:来看内部架构剖析

    支付宝系统架构概况大数据 典型处理默认大数据 资金处理平台大数据 财务会计大数据 支付清算大数据 核算中心大数据 交易大数据 柔性事务 支付宝的开源分布式消息中间件--Metamorphosis(MetaQ) Metamorphosis (MetaQ…

    大数据 2021年11月16日
  • 安装单机模式Hadoop-2.6.3(1)

      jdk下载地址 http://www.oracle.com/technetwork/java/javase/downloads/jdk8-downloads-2133151.html   添加hadoop用户 [root@centos67 ~]# useradd hadoop [root@centos67 ~]#&n…

    大数据 2021年11月16日
  • sqlserver实现树形结构递归查询(无限极分类)

    SQL Server 2005开始,我们可以直接通过CTE来支持递归查询,CTE即公用表表达式 百度百科 公用表表达式(CTE),是一个在查询中定义的临时命名结果集将在from子句中使用它。每个CTE仅被定义一次(但在其作用域内可以…

    大数据 2021年11月16日
  • flink 优秀文章集合

    说明:为了避免博客被封,*代表c,s,d和n,请自行替换. 水印 https://blog.****.net/lmalds/article/details/52704170 2 python 操作 https://blog.****.net/qq_41577045/article/details/86694395

    大数据 2021年11月16日