开源

  • 分布式系统关注点——「无状态」详解

    如果这是第二次看到我的文章,欢迎文末扫码订阅我个人的公众号(跨界架构师)哟~   本文长度为2728字,建议阅读8分钟。 坚持原创,每一篇都是用心之作~     前面聊完的2个章节「数据一致性」…

    大数据 2021年11月15日
  • 通过hadoop自带的demo运行单词统计

    1)mkdir input 2)cd  intput 3)echo “hello word” > file1.txt 4)echo “hello Hadoop” > file2.txt 5)echo “hello mapreduce” >> file2.txt 6) more file2.txt 7…

    大数据 2021年11月15日
  • robot+selenium编写web UI自动化用例

    通常我们可以用robot framework写接口自动化用例,但是有些站点如果未做前后端分离,迭代过程中又有大量的重复测试工作量,没有接口可调用验证,也有自动化测试需求,怎么办?这时候,那个深坑频现的web UI自动化就…

    大数据 2021年11月15日
  • elasticSearch服务安装

        搜索引擎其实并不陌生,上线的项目基本是基于lucence自己开发封装的,但是实时性比较差,单机版,对大数据支持有点吃紧。最近朋友推荐elasticSearch这款搜索引擎,于是就拿来玩玩,体验一…

    大数据 2021年11月15日
  • 开启MYSQL慢查询日志,监控有效率问题的SQL

    操作步骤 首先使用用户登录linux客户端,执行命令 mysql -u mjb -p, mjb是数据库用户名,系统会提示输入密码,输入密码回车,登录成功 输入命令show variables like 'slow_query_log', 页面会显示是否开启了慢查…

    大数据 2021年11月15日
  • hadoop的三大核心组件功能

    hadoop的三大组件功能: Common :     工具,基础,为服务 MapReduce:     对海量数据的处理     分布式     思想      &…

    大数据 2021年11月15日
  • Cassandra CLI 命令详解

    Cassandra Shell命令详解 Login cqlsh 172.20.101.252 -u cassandra -p cassandra Connected to cn-engage-dev at 172.20.101.252:9042. [cqlsh 5.0.1 | Cassandra 3.11.4 | CQL spec 3.4.4 | Native protocol v4] …

    大数据 2021年11月15日
  • PHP设计模式:单例模式

    应用场景: 在一次http请求中,多个地方使用到了数据库连接,使用单例可以只需要创建一个连接。 一个庞大的类被多次实例化的时候,会浪费巨大的内存空间。使用单例模式可以使多个对象共享内存中存在类的静态空间。 …

    大数据 2021年11月15日
  • 【MATLAB】画图使用调色板实现自动线条颜色的方法

    n=10; %n types of colors in hsv; cc=hsv(n); figure; hold on; for i=1:12 plot(result(1,:), 'color', cc(mod(i,n)+1, :)); %mod(i,n) is to prevent color from exceeding hsv dimensions, +1 because hsv(0) h…

    大数据 2021年11月15日
  • 生产中Hive静态和动态分区表,该怎样抉择呢?

    一.需求 按照不同部门作为分区,导数据到目标表 二.使用静态分区表来完成 1.创建静态分区表: create table emp_static_partition( empno int, ename string, job string, mgr int, hiredate string, sal double, c…

    大数据 2021年11月15日