技术专区
-
2018 年长沙天气情况气象数据分析与可视化
import org.apache.hadoop.io.IntWritable; import org.apache.hadoop.io.LongWritable; import org.apache.hadoop.io.Text; import org.apache.hadoop.mapreduce.Mapper; import java.io.IOException; public clas…
-
Calcite
Calcite 是什么?如果用一句话形容 Calcite,Calcite 是一个用于优化异构数据源的查询处理的基础框架。 最近十几年来,出现了很多专门的数据处理引擎。例如列式存储 (HBase)、流处理引擎 (Flink)、文档搜索引擎 (El…
-
故事公式
Pixar 故事公式 每个故事都依次分成六个部分。 (1)很久以前:描述一下世界以前的样子。 (2)每天的生活:大家怎么过日子。 (3)直到有一天:一个突发事件引发了巨变。 (4)由于这件事:主人公遭受到了磨难。 …
-
正则表达式 去标签 多余 富文本
需求场景: 富文本内容会伴随有大量的 html 标签 需要将这些标签去除掉,同时保留 <img> 标签 当然使用正则表达式了 正则表达式去多余标签步骤: 一、<img -> whatthefuck 二、<[^>]+> -> …
-
kafka如何手动异步提交offset
转:https://blog.csdn.net/CREATE_17/article/details/108722808 kafka手动异步提交 offset 的步骤大概分为以下几步,如下图所示: 1、配置手动提交 enable.auto.commit 修改为 false 。 2、订阅 topic consum…
-
Python函数中的*args, **kwargs是什么意思?如何使用?
https://zhuanlan.zhihu.com/p/144773033 当我们在写程序时,不确定将来要往函数中传入多少个参数,即可使用可变参数(即不定长参数),用*args,**kwargs表示。 *args称之为Non-keyword Variable Arguments,无关…
-
Python_路径处理
python 文件目录常用的目录操作主要有判断目录是否存在、创建目录、删除目录和遍历目录Python 中,内置了os模块及其子模块os.path 是与否 os.path.exists() os.path.isfile 增删改查 os.makedirs 查看 遍历 (dirpat…
-
python allure将生成报告和打开报告写到命令文件,并默认使用谷歌打开
背景: 使用python + pytest +allure,执行测试用例,并生成测试报告; allure报告要从收集的xml、json等文件,生成报告,不能直接点击报告的index.html,打开的报告为NaN; 所以,创建了一个bat文件,用于执行allu…
-
盘点一个Python网络爬虫过程中中文乱码的问题
大家好,我是皮皮。 一、前言 前几天在Python白银交流群【空翼】问了一个Python网络爬虫中文乱码的问题,提问截图如下: 原始代码如下: import requests import parsel url='https://news.p2peye.com/article-5147…
-
python控制键盘鼠标库pynput基本操作
pynput库 对于每一种输入设备,它包含一个子包来控制该种设备 包含控制和监控鼠标或触摸板的类 pynput.mouse 包含控制和监控键盘的类 pynput.keyboard: 鼠标模块鼠标基本操作导入pynput控制鼠标的模块 from pynput …