大数据
-
互联网数据化运营基础应用之信息质量模型
信息质量模型在互联网行业和互联网数据化运营中也是有着广泛基础性应用的。具体来说，电商行业和电商平台连接买卖双方最直接、最关键的纽带就是海量的商品目录、商品Offer、商品展示等，无论是B2C（如当当网、凡客…
-
chunked lod pros and cons
优点： 网格是最佳细分的，在平坦区域不需要创建顶点 适用于传统硬件，甚至是移动设备。许多其他算法在顶点着色器中使用位移高度图，且相应的GLSL函数（texture或textureLod）在低端设备的顶点着色器中不可用缺点：…
-
有一个长度是101的数组，存在1~100的数字，有一个是重复的，找出重复出来
两种方式：第一种方式： a = range(100) random_num = random.randint(0,99) print random_num a.insert(random_num,random_num) number = [i for i in a if a.count(i) == 2] print number[0] 第二种方式普通遍历 …
-
配置Hadoop环境变量bash_profile
1.配置hadoop的环境变量bash_profile,配置内容如下 PATH=$PATH:$HOME/bin export PATH export JAVA_HOME=/usr/java/jdk1.7.0_79 export PATH=$PATH:$JAVA_HOME/bin export HADOOP_HOME=/home/h…
-
java 判断字符串是否为空
方法一: 最多人使用的一个方法, 直观, 方便, 但效率很低: if(s ==null ||"".equals(s)); 方法二: 比较字符串长度, 效率高,是我知道的最好一个方法: if(s== null || s.leng…
-
微服务测试之静态代码扫描
静态代码扫描为整个发展组织增加价值。无论您在开发组织中发挥的作用如何，静态代码扫描解决方案都具有附加价值，拥有软件开发中所需要的尖端功能，最大限度地提高质量并管理软件产品中的风险。 背景 微服务架构模…
-
Oracle、MySQL、Hive 等数据库如何统计连续相同
在数据库里统计某个字段中相同数据直接用Group by就可以了，但如果附加个顺序条件后就有点麻烦了，例如，统计每一个玩家的连胜或者连败情况。 Oracle有窗口分析函数，需要多层嵌套加上高级分析函数才能实现，Mysql…
-
从零开始构建 Hadoop 集群
一、简介 当今只要谈到大数据，自然想到Hadoop，以前Hadoop还只是个软件、系统，而如今更多代表的是一个大数据生态圈。 本文谈的 Hadoop 特指一个软件，它是 Apache 基金会的顶级项目之一，它…
-
优化Join运算的系列方法（1）
JOIN是关系数据库中常用运算，用于把多个表进行关联，关联条件一般是判断某个关联字段的值是否相等。随着关联表的增多或者关联条件越来越复杂，无论理解查询含义、实现查询语句，还是在查询的性能方面，可以说JOIN…
-
IPFS可以拓展的商业价值
“大数据”无疑是当下的热门术语，它被认为将会给生活、工作与思维带来重大的变革。随着区块链的不断发展，星际魔方认为人们对数据存储的需求也会越来越高，受制于传统互联网的性能和成本，现有的区块链项目大部分都…