开源
-
Spring Boot 配置上传文件配置
@Beanpublic MultipartConfigElement multipartConfigElement(){MultipartConfigFactory factory = new MultipartConfigFactory();// 单个数据大小 10Mfactory.setMaxFileSize("10240KB");/// 总上传数据…
-
LoadRunner性能测试添加事物
事务（Transaction）用于模拟用户的一个相对完整的、有意义的业务操作过程，例如登录、查询、交易、转账，这些都可以作为事务，而一般不会把每次HTTP请求作为一个事务。 拿笔者所测试的邮箱系统为例，对于邮箱…
-
zookeeper curator 基本使用
下面，我们将通过一个简单的示例演示curator最基本的crud功能： maven依赖： <dependencies> <dependency> <groupId>org.apache.zookeeper</groupId> <artifactId>zookeeper</art…
-
Hadoop 之 MapReduce
1 MapReduce 概述 MapReduce 是一个分布式运算程序的编程框架，是用户开发基于 Hadoop 的数据分析应用的核心框架。 MapReduce 核心功能是将用户编写的业务逻辑代码和自带默认组件整合成一个完整的分布式运算程序，…
-
python爬取微博图片数据存到Mysql中遇到的各种坑/python Mysql存储图片
本人长期出售超大量微博数据、旅游网站评论数据，并提供各种指定数据爬取服务，Message to YuboonaZhang@Yahoo.com。同时欢迎加入社交媒体数据交流群：99918768 前言 由于硬件等各种原因需要把大概170多万2t左右…
-
RedHat使用yum命令时提示not registered错误的解决方法
在redhat系统，使用yum命令时，提示： This system is not registered to Red Hat Subscription Management. You can use&n…
-
python读写csv文件的实战
csv介绍 csv是什么？大家估计都听过，不过我猜很少能有人比较全面的解释下的，那么小弟就献丑一下。csv我理解的是一个存储数据的文件，里面以逗号作为分割进行存储（当然也可以用制表符进行分割）。 csv的规则 1 开…
-
大数据：Map终结和Spill文件合并
当Mapper没有数据输入，mapper.run中的while循环会调用context.nextKeyValue就返回false，于是便返回到runNewMapper中，在这里程序会关闭输入通道和输出通道，这里关闭输出通道并没有关闭collector，必须要先flush…
-
找测试工作的策略
无论是刚刚毕业的大学生，还是已经有工作经验的同行，都不可避免地面临找工作或者换工作的问题。怎样做才能找到一份适合自己的，有广阔发展前景的，自己各方面都满意的工作呢？笔者将自己多年的面试经验和应聘经验…
-
从零开始学大数据-Java基础-switch语句（6）
我们从零开始学习大数据技术，从java基础，到Linux技术涉猎，再深入到大数据技术的Hadoop、Spark、Storm技术，最后到大数据企业平台的搭建,层层递进，由点到面！希望技术大牛能过来指导学习。 上一节学习了流程控制…