开源
-
8500WN智能网卡曝光 强悍配置加上完美外形
据台湾媒体最新报道，台湾无线网卡厂商最新推出一款大功率80DBI无线网卡-横空出世8500WN集成机。售价约1180新台币(折合人民币约298元) 台湾卡王是全球著名的大功率无线网卡生产厂商，2007年曾最早推出大功率无…
-
Spark笔记整理（一）：spark单机安装部署、分布式集群与HA安装部署+spark源码编译
[TOC] spark单机安装部署 1.安装scala 解压：tar -zxvf soft/scala-2.10.5.tgz -C app/ 重命名：mv scala-2.10.5/ scala 配置到环境变量： export SCALA_HOME=/home/uplooking/app/scala export PATH=$PATH:$SCALA_…
-
RobotFramework安装与简单使用
RIDE（ Robot Framework Test Data Editor）适合用于web的自动化测试。 一、 相关环境的安装 首先搭建python环境，到http://www.python.org下载python.2.7.10版本。 安装的时候，把python加入到path的环境变量。目…
-
HQL操作日常使用命令总结
建表 create table mydb.userinfo(name string,addressi string) ROW FORMAT DELIMITED FIELDS TERMINATED BY '/t' LINES TERMINATED BY '/n' STORED AS TEXTFILE; 创建分区表 CREATE TABLE mydb.userinfo --创建表…
-
利用Python调用HBASE
利用Python调用HBASE的 需要安装thrift hbase-thrift 启动hbase的thrift服务：bin/hbase-daemon.sh start thrift 默认端口是9090 mysql 到hbase的数据同步： 1、put 2、Importtsv 3、编写MapReduce Job…
-
小编带您Volatile的详解
volatile关键字修饰的共享变量主要有两个特点：1.保证了不同线程访问的内存可见性 2.禁止重排序在说内存可见性和有序性之前，我们有必要看一下Java的内存模型(注意和JVM内存模型的区分)为什么要有java内存模型？首…
-
spring自定义泛型类中AutoWired注入为null
我在实际开发中遇到有一段公共的代码，几个方法都需要掉，但如果单独拉出来写一个方法的话，入参又不同，所以想到了用泛型。 比如这是一段公共代码： //保存订单信息,需要多个方法调用 OrderFilterRequest ord…
-
(版本定制)第15课：Spark Streaming源码解读之No Receivers彻底思考
hu本期内容： 1、Kafka解密 背景： 目前No Receivers在企业中使用的越来越多，No Receivers具有更强的控制度，语义一致性。No Receivers是我们操作数据来源自然方式，操作数据来源使用一个封装…
-
对缓存击穿的一点思考
前言 缓存（内存 or Memcached or Redis.....）在互联网项目中广泛应用，本篇博客将讨论下缓存击穿这一个话题，涵盖缓存击穿的现象、解决的思路、以及通过代码抽象方式来处理缓存击穿。 什么是缓存击穿？ 上面的代…
-
1.分布式与集中式(ZooKeeper手记)
1. 集中式 特点由一台或多台主计算机组成的中心节点，数据集中存储在这个中间节点上，并且整个系统的所有业务单元都集中部署在这个中心节点上，系统所有功能均有其集中处理。简言之：终端或客户端只负责数据的输入…