大数据

学习spark任何技术之前，请先正确理解spark，可以参考：正确理解spark 以下对RDD的三种创建方式、单类型RDD基本的transformation api、采样Api以及pipe操作进行了python api方面的阐述 一、RDD的三种创建方式 从稳…

2018，要说最火的话题是什么？世界杯吗！No它是无人超市及新零售这个热门风口，它不仅在业内成为热点，也是投资创业的热点。有不少朋友都留言咨询无人超市×××的相关详情。在查询无人超市的朋友，都是对无人超市这块…

<?php /** * Created by PhpStorm. * User: zrj * Date: 18-6-22 * Time: 上午10:49 */ declare(strict_types=1);//开启强类型模式 class DB { private static $instance = null; private static $sth = null; p…

一、定义： 测试方法单一，不分测试点关键级别，严格水平相同 。 二、发生时间段 可能发生在任何时间。 三、陷阱表现 测试计划文档只包含通用、模板测试指南，而非适当的、针对系统的具体信息。 所有测试都采用相同…

 小编因为是从事的设计建筑类行业，最近需要找几款软件入手。可是从网上一搜，全部都是些什么乱七八糟的东西，真是有够头疼的。不过还好，终于要我用一下午的时间对比出了几款软件。简直堪比逛淘宝都累哟~所以…

hadoop是一堆开源软件的集合，下面把这些开源软件做个简单介绍 Apache Hadoop: 是Apache开源组织的一个分布式计算开源框架，是提供了一个分布式文件系统(HDFS)和支持MapReduce分布式计算的软件架构。 Apache Hive: …

1.内存要求大于2G 低于2G在分析数据是会卡屏。 2.修改主机名：master、slave 3.配置hostname 所有的机器都要配置hosts 192.168.0.2 master 192.168.0.3 slave ..... 4.关闭selinux [root@master ~]# vim /etc/selin…

在mac上已经安装django，依赖于python3.6.0，在pycharm上的file-->default setting中也已经调整project interpreter为3.6.0，import django相关模块时依然提示无法找到第三方模块 调整以下两个配置，重启pycharm…

2019/2/22 星期五 在kafka中为什么高吞吐量是他的优点 见下4点优点 1、创建一个topic时，同时可以指定分区数目，分区数越多，其吞吐量也越大，但是需要的资源也越多，同时也会导致更高的不可用性，kafka在接收到生…

Action {    char * name;    char * passwrod;    name = "ABCDEFGH";    passwrod = name + 3;   //从name的第3个字符后开始取值    lr_ouput_mess…