关闭防火墙和selinux 宿主机安装mysql,创建archery数据库,并给所有权限,允许远程连接到该数据库 grant all privileges on *.* to 'root'@'%' identified by 'jason_zhang' with grant option;flush privileges; 安装依赖环境 yum install ncurses-libs libncurses5-dev ncurses-devel wget git cmake openssl gc

企业级MYSQL web端 SQL审核平台. Website 官网 www.yearning.io Feature 功能 数据库字典自动生成 SQL查询 查询工单 导出 自动补全,智能提示 查询语句审计 SQL可视化自动生成 索引语句自动生成 DDL语句自动生成 SQL审核 流程化工单 SQL语句检测与执行 SQL回滚 历史审核记录 推送 E-mail工单推送 钉钉webhook机器人工单推送 其他 todoList LDAP登陆 动态配置 用户权限及管理 拼图式权限划分(共12项独立权限,可随

基于Inception搭建MySQL SQL审核平台Yearing Inception 1. Inceptionj简介 2. Inception安装 2.1 下载和编译 2.2 启动配置 Yearning 1. Yearning简介 2. Yearning安装 2.1 Yearning v1.3.0及以上版本安装 2.2 Yearning v1.2.0版本安装 Inception 1. Inceptionj简介 Inception是一款针对MySQL的SQL语句审核自动化运维工具.使用Incep

SQL审核与执行,作为DBA日常工作中相当重要的一环,一直以来我们都是通过人工的方式来处理,效率低且质量没办法保证.为了规范操作,提高效率,我们决定引入目前市面上非常流行的SQL自动审核工具Inception.花了一周看了inception官方文档并搭建了测试环境简单测试,又花了3天写了webui(内部起名叫overmind,以下也简称overmind),目前正在进行各种测试以及手册的编写,还未正式跟我们的流程结合起来投入使用,后续正式使用后再更新使用经验. Inception github:h

SQL审核平台Yearning部署  Yearning优势: Yearning SQL 审计平台 基于Vue.js与Django的整套mysql-sql审核平台解决方案.提供基于Inception的SQL检测及执行.不依赖于任何第三方 SQL 审核工具作为审核引擎,内部已自己实现审核/回滚相关逻辑. Yearning主要功能: SQL查询.查询导出.查询自动补全.SQL审核.流程化工单.SQL语句检测.SQL语句执行.SQL回滚.SQL自动审核执行.历史审核记录.查询审计.推送.E-mail工单

前言 应公司dba的需求,做了一个sql审核并可以执行.记录的系统,整个系统有三种角色: DBA(需要管理员手动登记) 运维人员(需要管理员手动登记) 开发人员(默认注册后用户) 权限分配如下: 一些功能展示 先要感谢前任武大神留下的前端模板,在后续的开发节省了大量的时间,我也就拿过来直接用了. 由于是在公司使用的代码,源码不能开源,下边是一些展示截图,后续会把这个系统涉及到的一些自认为关键的知识点整理出来,分享一部分代码. 登录界面 注册界面 忘记密码 注册.忘记密码这块可以通过邮箱拿到一个验

[Spark][Hive][Python][SQL]Spark 读取Hive表的小例子$ cat customers.txt 1 Ali us 2 Bsb ca 3 Carls mx $ hive hive> > CREATE TABLE IF NOT EXISTS customers( > cust_id string, > name string, > country string > ) > ROW FORMAT DELIMITED FIELDS TERMI

sql审核工具调研  基于soar的sql审核查询平台: https://github.com/beiketianzhuang/data-platform-soar 1.美团工具sqlAdvisor工具 采用docker去跑centos镜像   1.获取centos镜像   docker pull centos   2.运行docker镜像   docker run <IMAGE ID >   3.进入docker容器   docker attach <容器id> 进入容器后就可以

Inception SQL审核注解 1.建表语句 建表语句检查项 表属性的检查项 这个表不存在 对于create table like,会检查like的老表是不是存在. 对于create table db.table,会检查db这个数据库是不是存在 表名.列名.索引名的长度不大于64个字节 如果建立的是临时表,则必须要以tmp为前缀 必须要指定建立innodb的存储引擎(可配置) 必须要指定utf8的字符集(字符串可配置,指定支持哪些字符集) 表必须要有注释(可配置) 表不能建立为分区表(可配置

关键词: sql审核.sql审批.sql检查.sql检测.sql执行 离线sql可能会导致的问题 首先,什么是离线sql呢?就是说手动触发执行的这种sql:相对的还有在线sql,位于我们的程序代码中,由程序触发执行的sql是在线sql.举个例子,我们想要建库.建表.改表的时候,通常会编写sql语句,选一个合适的时间执行:这就是离线SQL.当然,操作数据的离线sql也是有的,比方说线上程序bug,我们想要手动修复个别数据,这时候也会提交离线的修改数据的SQL. 那么,离线的sql可能会导致哪些问题

介绍 Yearning SQL 审计平台 基于Vue.js与Django的整套mysql-sql审核平台解决方案.提供基于Inception的SQL检测及执行. GitHub:https://github.com/cookieY/Yearning 文档:https://cookiey.github.io/Yearning-document/ 安装部署(centos6.8) 1.Nginx安装 yum install nginx -y 2.MySQL Server安装 https://dev.my

docker run -d --privileged -v `pwd`/archer_data:/data -p 9306:3306 --name archer --hostname archer --net staticnet --ip 192.168.0.200 eiki/mysql:5.7.24 /usr/sbin/init docker run -d --privileged -v `pwd`/archer_data:/data -p 9307:3306 -p 9123:9123 --n

系统环境: Centos7 + python2.7 + python3 .... 下载 源码地址:https://github.com/mysql-inception/inception Inception安装 1.安装相关依赖包 yum install bison ncurses-libs libncurses5-dev ncurses-devel wget git cmake openssl gcc-c++ -y 注意:centos7 系统自带的bison的版本过高,在后面测试的时候会报错!

##概念: Inception是一款自动化运维的利器,有别与现在各个公司使用的方式,使用Inception,将会给DBA带来最大的便利性,将DBA从繁冗的工作中解放出来,做一些更多的自动化工作,或者从架构方面研究如何更大程度的保证数据库的高可用等等. inception支持语句审核.语句执行.备份回滚.及对OSC支持——在线执行DDL语句. Inception是集审核.执行.回滚于一体的一个自动化运维系统,它是根据MySQL代码修改过来的,用它可以很明确的,详细的,准确的审核MySQL的SQL语

Yearning 安装: 安装Nginxyum install nginx -y 按照顺序安装MySQLmysql-community-common-5.7.22-1.el6.x86_64.rpmmysql-community-libs-5.7.22-1.el6.x86_64.rpmmysql-community-client-5.7.22-1.el6.x86_64.rpmmysql-community-server-5.7.22-1.el6.x86_64.rpm Python 3.6安装 解压

相关文档: https://guide.yearning.io/ yearning简介 http://python.yearning.io/install/  yearning安装 Yearning SQL 审计平台 基于Vue.js与Django的整套mysql-sql审核平台解决方案.提供基于Inception的SQL检测及执行. GitHub:https://github.com/cookieY/Yearning 文档:https://cookiey.github.io/Yearning-

终于学到数据库操作了,这意味着什么?以后再也不用从文件里读写数据了,过程实在太复杂了~~~为了纪念这个激动人心的时刻,一定要写一篇博客! 使用mysql数据库——增 插入一条数据 首先,还是先解释一下如何使用数据库,按照上面的方法就可以连接数据库了.这里要解释两件事情. 1.执行sql语句返回的reCount是什么? 这个recount不是我们执行sql的时候查出的内容,而是,明白了吧,就是这样,喵~~~ 2.cur是什么? 这里的cur指的是游标.游标是映射在结果集中一行数据上的位置实体,有了

环境 Anaconda3 Python 3.6, Window 64bit 目的 从MySQL数据库读取数据,进行数据查询.关联 代码 # -*- coding: utf-8 -*- """ Author: kimbo zhang Mail: kimbo_zhang@163.com """ import pymysql import pandas as pd import numpy as np db_conn = pymysql.connect

进行了代码优化,欢迎评审 #!/usr/bin/python # -*- coding:utf-8 -*- import logging logging.basicConfig(level=logging.INFO)   class baselib(json.JSONEncoder): def __init__(self): self.conn = mysql.connector.connect(host='192.1.1.1',port=3306,user='root',passwd='123

SQL Server 多行注释 : ctrl + k + c SQL Server 单行注释:  -- Python 单行注释:# Python多行注释:''' '''