FAQ v2.0终于上线了,断断续续忙了有2个多月.这个项目是我实践的第一个全栈的项目,从需求(后期有产品经理介入)到架构,再到设计(有征询设计师的意见).构建(前端.后台.数据库.服务器部署),也是第一次独立负责一个项目,所以意义很不一般,后面还会写一篇总结的文章.闲言少叙,进入正题: 其中有一个自动定时发访问记录列表和反馈问题列表的邮件的功能,本来打算自己写的,不过后来了解到团队有现成的平台可以做这个事,所以就用现成的喽.但有一个问题,该平台配置的数据源必须是MySQL数据库,而FAQ平台用…

一 简介:今天来聊聊mongo的数据迁移二 迁移   1 具体迁移命令   nohup mongodump --port --db dbname --collection tablename --query '{"sentTime": { $gt: "2018-07-13 00:00:00" } }' -o /home/data   2 具体导入命令   db导入   mongorestore --port 40000 --db dbname /home/data/…

一 简介:本文介绍创建自动删除数据的TTL索引 二 目的 定时删除数据三 创建方法   db.collection.createIndex(keys, options)   options:   expireAfterSeconds 指定多少秒或者包含日期值的数组 创建示例   db.eventlog.createIndex( { "lastModifiedDate": 1 }, { expireAfterSeconds: 3600 },{backgroup: true}) 四 何时失…

mongodb 集群维护1 简介    谈谈mongodb的集群架构2 常用的维护命令   1 查看状态 sh.status()         1 version        2 shards: 分片集群shard成员        3 balancer: 平衡器的相关状态:运行状态 尝试次数          平衡器 sh.setBalancerState(true) 开启           sh.stopBalancer() 关闭          sh.getBalancerStat…

一 简介: mongodb副本集 二 复制方式: 1 全量复制 2 增量复制三 同步检测过程:    一 正常情况下:       1 master执行语句,并将所有的修改数据库的操作以日志Oplog的方式记录在本地       2 second节点按照一定的频率主动异步的从主节点同步oplog日志并作用于自己本机的数据库上,从而保证副本节点和主节点的数据一致性       3 每个节点会向其他节点2s发送一个心跳检测,如果超过10s没有收到回复,则认为目标节点不可用   二 主节点挂掉后   …

简介: 关于mongodb慢日志是如何收集 一 mongodb慢日志的开启 1 直接设置参数,不重启服务:db.setProfilingLevel(1) 2 添加启动参数,重启服务:添加profile=1 二 mongodb慢日志参数说明 查看 profiing当前级别 :db.getProfilingLevel() 0 默认不开启记录 1 开启记录慢日志(默认>=100ms) 2 记录所有命令 三 如何调整慢日志记录参数 1 直接设置参数  db.setProfilingLevel( leve…

一简介:今天遇到一个慢日志的排查和解决过程 二 版本:3.0.6 三 架构:分片集群 四 具体过程 1 程序响应很慢,具体日志寻找定点sql(mongodb慢日志记录在log日志里) awk '$NF~/ms$/{print $1,$NF}' shard2.log|sed 's/ms//g'|awk '$2 > 12000 {print $1,$2}' 这里我统计的是大于12S的, 2 通过分析定位具体sql为查询语句,条件是等值查询 3 获取collection的所有索引 db.chenfen…

1 简介:讲讲mongo的慢日志2 慢日志类型    query insert update delete 3 查看慢日志  1 db.system.profile.find() 慢日志总揽  2 db.system.profile.find().sort({$natural:-1}) 查看最新的慢日志  3 db.system.profile.find( { op: { $ne : 'command' } }).pretty() 返回所有除去command的操作类型  4 db.system.…

目录 一.背景介绍 二.常见方案 1. 停机迁移 2. 业务双写 3. 增量迁移 三.Change Stream 介绍 监听的目标 变更事件 四.实现增量迁移 五.后续优化 小结 附参考文档 一.背景介绍 最近微服务架构火的不行,但本质上也只是风口上的一个热点词汇. 作为笔者的经验来说,想要应用一个新的架构需要带来的变革成本是非常高的. 尽管如此,目前还是有许多企业踏上了服务化改造的道路,这其中则免不了"旧改"的各种繁杂事. 所谓的"旧改",就是把现有的系统架构来一…

关键字:SQL Server NEWID():BSON:MongoDB UUID 1.遇到的问题和困惑 SQL Server中的NEWID数据存储到MongoDB中会是什么样子呢?发现不能简单的通过此数据查询了. 例如我们将SQL Server 数据库中的QQStatements2019表迁移至MongoDB 中,集合命名也为QQStatements2019. 在SQL Server中选择4个OrderId,数据作为演示实例,查看如下: 经过程序转换后,在mongodb的客户端工具nosqlbo…