大数据

1、问题产生情况在开发IM时有些有用的头像用了emoji表情或者聊天的时候用了emoji表情，然而mysql数据库用的编码是utf8_general_ci,就是utf-8编码，结果也就报错误了。emoji表情存不了在数据库。 java.sql.SQLExcept…

今天spy一棵树对象（TVirtualStringTree），发现spy出来的都是一些基本的属性和方法，树本身的属性和方法都没有（原因可能是这个树控件被自定义封装或属于非标准的第三方控件），面对这样的一个对象要展开和遍历，…

本文就架构，功能，产品线，概念等方面就ElasticSearch和Splunk做了一下全方位的对比，希望能够大家在制定大数据搜索方案的时候有所帮助。 简介 ElasticSearch （1）（2）是一个基于Lucene的开源搜索服务。它提供了…

突然的降温和强冷空气告诉我，是时候为保暖秋裤来一波购物血拼了。第十一个双十一马上到达战场，你准备贡献多少战绩呢！ 是不是每年都很期待阿里巴巴汇报双十一最后的成交额，我们可以搬个小板凳一起观看一下那块弥…

./bin/hdfs dfsadmin -report http://192.168.209.162:50070/dfshealth.html#tab-overview 可以操作目录 http://192.168.209.162:50070/explorer.html#/ 方式一：命令行方式 Hadoop文件操作命令形式为 hadoop fs -c…

ICON/艾肯MicU声卡是一种usb外置声卡，分为新版vst和旧版两种，属于一进两出的声卡类型，主要有麦克风输入接口，耳机和音响输出接口，并配备48v电源，常见于个人使用，直播，主播，娱乐等。在没有安装调试之前，先…

网上有《What Test Engineers do at Google》的原文翻译，以及相关中文书籍《google软件测试之道》。今天不会在这里搬内容，写一些读书笔记和感悟。 测试组织架构 测试团队成败，组织架构也是影响因素之一。Google…

第一次看到Spark崩溃 Spark Shell内存OOM的现象 要搞Spark图计算，所以用了Google的web-Google.txt，大小71.8MB。 以命令： val graph = GraphLoader.edgeListFile(sc,"hdfs://192.168.0.10:9000/input/graph/web-G…

需要sun的jdk，所以先要卸载openjdk [root@hadoop-1 ~]# rpm -qa | grep openjdk | xargs rpm -e --nodeps 好了 release notes http://hadoop.apache.org/releases.html 4月8日有一个3.1的新版本，下下来 wget http…

flink1.8 对hive 的支持不够好，造成300W的数据，居然读了2个小时，打算将程序迁移至spark。 先把代码贴上。 后发现sql不应该有where条件，去掉后速度还行。 maven <dependency> <groupId>org.apache.h…