大数据
-
重写Odoo(三)odoo 数据库结构
简介： 数据库设置这个就没什么可说的，你没数据库，准备玩什么？ 一：数据模型定义文件 根据上一篇笔记，数据库模型的配置是在新模块的models/models.py文件。 二：示例文件的解读 # -*- coding: utf-8 -*- from o…
-
MySQL数据库封锁机制和事务隔离级别
参考：数据库技术:MySql学习笔记之事务隔离级别详解详解MySQL 数据库隔离级别与MVCCMySQL 事务&&锁机制&&MVCC数据库系统原理 - MySQL封锁数据库常见面试题：乐观、悲观锁，行锁、表锁、读、写锁，…
-
MySQL使用bin-log将数据恢复到某个时间点
binlog的三种模式 statement：记录每一条修改数据的sql row：保存哪条记录被修改 mixed：兼顾前两者的优点。 # 查看binlog有没有开启 SHOW VARIABLES LIKE 'log_bin%'; # 查看当前binlog的模式 SHOW VARIABLES LIKE…
-
mysql问题
Specified key was too long; max key length is 767 bytes dbever导入脚本报错 更改/etc/my.cnf max_allowed_packet = 200M#default-storage-engine=INNODBinnodb_large_prefix=oninnodb_file_format = BARRACUD…
-
mysql之show processlist详解
参考：show processlist 详解MySQL数据库show processlist指令使用解析show processlist详解（转载）showprocesslist（查询线程状态）命令详解mysql优化——show processlist命令详解showprocesslist查看非sleep的sql…
-
每周总结第二周
这一周将数据库剩余的学生老师的功能页都写完了，还完成了数据结构的第一阶段 下面是数据库小学期实验的内容 首先我划分了三个用户角色，他们的功能分别如下， 并且创建了四张表，表结构如下，其中studentwork和t…
-
sparksql结果快速到mysql（scala代码、airflow调度）
经常会有这样的需求：在现有数仓表的基础上，写一些sql，然后生成hive表并同步到mysql。 次数多了，就像写一个工具完成这个工作 一：背景、功能、流程介绍 1.背景： 1.数仓使用hive存储，datax导数据、airflo…
-
一键同步mysql到数仓（airflow调度）
经常会接到产品的需求：同步***表到hive，做分析。（做多了感觉很烦，就写一个工具） 一：背景、功能、流程介绍 1.背景： 1.数仓使用hive存储，datax导数据、airflow调度 2.虽然数据产品同学对datax进行了封…
-
Redis Windows版
目前的Redis官方版本，支持mac、支持inux，但是不支持windows。 下面是非官方根据Redis源码，移植的windows版。 1. 微软的Redis版 目前最高支持3.2.100，但是是非稳定版，目前稳定版3.0.504 https://github.com/mic…
-
docker-compose配置redis集群
创建文件夹 在 /usr/local/docker/下创建，方便管理 cd /usr/local/dockermkdir reids-cluster # 创建redis-1~redis-6文件夹 mkdir redis-cluster/redis-1 / redis-cluster/redis-2 / redis-cluster/redis-3 / redi…