大数据
-
SPARK standlone安装配置
集群一共有3台机器,集群使用hadoop用户运行,3台机器如下: 1 DEV-HADOOP-01 192.168.9.110 2 DEV-HADOOP-02 192.168.9.111 3 DEV-HADOOP-03 192.168.9.112 配置集群间hadoop用户的无密码登录 配置每台机器的/etc/hos…
-
jenkins集成jmeter-----性能自动化
首先需要确认，jmeter.properties中，jmeter.save.saveservice.output_format=csv new 自由风格 定时构建 构建 执行windows批处理命令 if exist "output" (rd /s/q output) if exist "%JOB_BASE_NAME%.csv" (del "%…
-
centos6.5下一个tomcat下部署多个程序方法
今天遇到这样一个项目，要在同一台服务器上部署两个多个项目，需要一个tomcat，也就是一个tomcat下部署多个程序，根据不同的端口去区分。以此为例 方法如下： 把tomcat解压后，进入到tomcat路径，编辑conf/server.x…
-
流浪猫的故事看质量人员需求
前段时间笔者×××群发生了一个关于流浪猫的故事。有一只流浪猫经常在小区出没，好心业主喂食引起其他业主不满，认为其携带病菌，影响健康，要求驱逐出小区。没几天有邻居家里闹鼠又要求保安把流浪猫抓…
-
Amabari搭建Hadoop集群(二)
一、进入登陆页面 1.在浏览器中输入ambari-server端地址，初始账户和密码都是admin 2.登陆后进入向导界面，点击Launch Install Wizard 3.设置集群名称 二、安装相关组件 1.选择HDP版本，注意选择使用本地源 2.输入…
-
零基础如何学好大数据？必备需要学习知识
大数据是对海量数据进行存储、计算、统计、分析处理的一系列处理手段，处理的数据量通常是TB级，甚至是PB或EB级的数据，这是传统数据处理手段所无法完成的，其涉及的技术有分布式计算、高并发处理、高可用处理、集…
-
漫谈大型网站架构
大型网站架构从来都不是一个预先定义的架构，而是一个演进式的架构。很少有一个网站从建站开始，就能够因具备大型网站的所有属性而一成不变的，从最简单的LAMP架构，再到基于IOE的大型集中式应用架构，再演变成时下…
-
微信小程序地图定位GPS转腾讯地图的坐标系
参考：http://www.qchcloud.cn/tn/article/23参考 //svar GPS = {PI: 3.14159265358979324,x_pi: 3.14159265358979324 3000.0 / 180.0,delta: function (lat, lon) {// Krasovsky 1940//// a = 6378245.0, 1/f = 29…
-
大数据入门——搭建Hadoop处理环境
由于Hadoop需要运行在Linux环境中，而且是分布式的，因此个人学习只能装虚拟机，本文都以VMware Workstation为准，安装CentOS7，具体的安装此处不作过多介绍，只作需要用到的知识介绍。 VMware的安装，装好一个虚拟…
-
git 在windows下的应用（二） - 远程仓库代码管理
克隆远程git 目录 https://github.com/pcdogyu/git4windows.git 克隆下来了 生成1.txt scan stage signoff commit 2次提交记录 推送到远程地址 完成了 还没来得及去网页呢，就收到系统提示邮件 网页查看1.txt已经提…