开源
-
创建HDFS的FileSystem对象的小心得
FileSystem fs = FiileSystem.get(new URI("hdfs://hadoop1:9000"),new Configuration() ); 以这种方式可以创建fs对象,但缺点时,使用了空白的Configuration对象,实际上只授予了fs.default.name这个属性,当访问…
-
从Hive导入数据到ES
大数据方兴未艾,Hive在业界,是大数据的标配了。因此hive数据添加到ES的应用场景还是比较常见的。学习ES官方的es-hadoop, 有从hive导数据到ES. 实验可行。hive的版本: hive-1.1.0-cdh6.9.0 具体的步骤如下:step1…
-
Elasticsearch集群
1、两台机分别安装好Elasticsearch 其中为192.168.1.110,设为master节点,elasticsearch.yml配置如下 cluster.name: my-application node.name: node-111 network.host: 192.168.1.110 http.port:&n…
-
记一次Grpc接口压力测试&性能调优
〇、经验总结: 如果在压测过程中,压力始终上不去,可以考虑是施压机器并发上不去,或者被压机器请求处理不过来。 施压上不去或者被压机器请求处理不过来,是因为机器CPU瓶颈?内存瓶颈?端口数量瓶颈?逐步排查定…
-
python学习list笔记
python学习list笔记 List(列表) 是 Python 中使用最频繁的数据类型; 支持字符,数字,字符串甚至可以包含列表(所谓嵌套) 1、定义: list = [1,3,4,5,'goog','well',777] 2、从最后一列增加: list.appen…
-
M9连接器照片图画集合
本文展示M9连接器照片图画集合: 本图集免费使用,使用请说明出处,谢谢。
-
ES集群修改index副本数报错 :index read-only / allow delete
ES集群修改index副本数,报错 :index read-only / allow delete (api) 原因: es集群数据量增速过快,导致个别es node节点磁盘使用率在%80以上,接近%90 ,由于ES新节点的数据目录data存储空间不足,导致从master…
-
在sqlplus的command窗口执行sql语句
SQL> @F:/数据库创建/create.sql 回车即可
-
scala
模式匹配 在jdk1.7之前,Java的 switch 关键字只可以处理原生类型(int 、short 、byte 、char)和枚举类型。在jdk1.7以后,switch新增了对String类型的处理。scala的模式匹配则可以处理各种复杂的类型以及场景。 常…
-
DKH大数据整体解决方案的优势介绍
大数据技术的发展与应用已经在深刻地改变和影响我们的日常生活与工作,可以预见的是在大数据提升为国家战略层面后,未来的几年里大数据技术将会被更多的行业应用。相信很多人对于大数据技术的应用还是处于一个非常…