大数据

  • fabric 1.4 环境搭建准备工作

    一:安装cURL 下载地址: https://curl.haxx.se/download.html 大部分系统已经自带了curl 命令 curl --version 查看是否已经安装,查看版本信息 二:安装docker Docker version Docker 17.06.2-ce or greater is re…

    大数据 2021年11月15日
  • spark-submit简单操作

    ./spark-submit --master <master地址加端口号> jar包地址 unzip sparkpi.jar rm -rf *.class bin./spark-submit --master spark://master:7077 --class SparkPi /root/IdeaProjects/sparkpi/out/artifacts/s…

    大数据 2021年11月15日
  • TestNG(一)——起步

    你可以从 http://testng.org/doc/documentation-main.html 获取信息。 一、简介    TestNG是test next generation的缩写,即下一代测试技术,如果接触过junit或者nunit,可能比较好理解,但是相信有很多…

    大数据 2021年11月15日
  • 大数据分析学习必须用到的工具,一定要收藏

    简单来说,我们可以把大数据分析工具简单分成两个维度: 第一维度:数据存储层——数据报表层——数据分析层——数据展现层 第二维度:用户级——部门级——企业级——BI级 1、数据存储层 数据存储涉及到数据库的概念和数据库语…

    大数据 2021年11月15日
  • idea运行的时候出现的问题Exception in thread “main” java.lang

    idea运行的时候出现的问题Exception in thread “main” java.lang.NoSuchMethodError: scala.collection.immutable.HashSet$ 这类错误主要是环境中运行scala与idea中scala的版本不一致导致的。将他们更换为相同的版…

    大数据 2021年11月15日
  • 性能优化技巧 - 内存关联计算

    关联动作会严重影响性能,SPL支持内存预关联,可以加快关联动作,从而提升性能。 为了理解关联动作对性能的影响,下面设计一套Oracle关联表,以及无关联的宽表,并执行同样的计算。 关联表的结构和关系如下: &nbsp…

    大数据 2021年11月15日
  • Qt学习总结(C鱼)之QList和QMap容器类

    QList<T> QList<T>容器是一个数组列表,特点如下: 1.大多数情况下可以用QList。像prepend()、append()和insert()这种操作,通常QList比QVector快的多。这是因为QList是基于index标签存储它的元素项在…

    大数据 2021年11月15日
  • jmeter接口测试

    接口测试(interface testing)的目的是测试与系统相关联的外部接口,测试的重点是检查数据的交互,传递和控制管理过程,提供测试质量和测试覆盖,更好地重新软件缺陷和定位错误。   jmeter的接口测试一般需要…

    大数据 2021年11月15日
  • Java 嵌入 SPL 轻松实现数据分组

    要在 Java 代码中实现类似 SQL 中的 GroupBy 分组聚合运算,是比较繁琐的,通常先要声明数据结构(Java 实体类),然后用 Java 集合进行循环遍历,最后根据分组条件添加到某个子集合中。Java 8 有了 Lambda(stream…

    大数据 2021年11月15日