using System; using System.Collections.Generic; using System.IO; using System.Linq; using System.Text; namespace Share { public class LogHelp { private static object Block = new object(); #region 记录日志 /// <summary> /// 记录日志 /// </summary> ///…
  在使用mysql时,有时需要查询出某个字段不重复的记录,虽然mysql提供 有distinct这个关键字来过滤掉多余的重复记录只保留一条,但往往只用它来返回不重复记录的条数,而不是用它来返回不重记录的所有值.其原因是 distinct只能返回它的目标字段,而无法返回其它字段,这个问题让我困扰了很久,用distinct不能解决的话,我只有用二重循环查询来解决,而 这样对于一个数据量非常大的站来说,无疑是会直接影响到效率的.所以我花了很多时间来研究这个问题,网上也查不到解决方案,期间把容容拉来帮…
转载自:https://blog.csdn.net/wo_shi_ma_nong/article/details/88110111 在“为网站开发远程直播教室的折腾过程及最终实现”中,介绍了如何使用face2face为自己的网站开发一对多网络教室.使用face2face能极大的节省开发的时间. 其实使用face2face不仅能在网页上实现一对多的网络教室,还能非常容易地为自己的网站实现1对1的远程直播功能. 使用face2face,无论是开发一对多的网络教室,还是开发一对一的网络教室,都是一样简…
SQL:删除重复数据,只保留一条用SQL语句,删除掉重复项只保留一条在几千条记录里,存在着些相同的记录,如何能用SQL语句,删除掉重复的呢 1.查找表中多余的重复记录,重复记录是根据单个字段(peopleId)来判断 ) 2.删除表中多余的重复记录,重复记录是根据单个字段(peopleId)来判断,只留有rowid最小的记录 ) ) 3.查找表中多余的重复记录(多个字段) ) 4.删除表中多余的重复记录(多个字段),只留有rowid最小的记录 ) ) 5.查找表中多余的重复记录(多个字段),不包…
删除表中重复记录,只保留一条: delete from 表名 where 字段ID in (select * from (select max(字段ID) from 表名 group by 重复的字段 having count(重复的字段) > 1) as b); 实例: 2.当想要为某一个表建立一个唯一索引,由于表中有重复记录而无法进行时,需要删除重复记录. 例表 dept id_no id_name 100 'AAA' 101 'BBB' 102 'CCC' 103 'DDD' 100 'E…
最近开发中遇到的一个MySQL主从延迟的坑,记录并总结,避免再次犯同样的错误. 情景 一个活动信息需要审批,审批之后才能生效.因为之后活动要编辑,编辑后也可能触发审批,审批中展示的是编辑前的活动内容,考虑到字段比较多,也要保存审批活动的内容,因此设计采用了一张临时表,审批中的活动写进审批表(activity_tmp),审批通过之后才把真正的活动内容写进活动表(activity).表的简要设计如下,这里将活动内容字段合并为content展示: activity_tmp() id status //…
上次发表过的一遍删除重复记录的文章,其中最优的方案三删除1w条也花了0.07秒而2w条就已经花掉了4秒.今天进行了进一步优化,测试删除10w条只花了1.06秒.速度提升了很多. 建表语句 CREATE TABLE `test_user` ( `id` INT(10) NOT NULL DEFAULT '0', `namea` VARCHAR(40) NOT NULL, `nameb` VARCHAR(40) NOT NULL, `user_id` VARCHAR(40) NOT NULL, PR…
首先新建表: --创建示例表 CREATE TABLE t ( id ,) PRIMARY KEY, a ), b ) ) --插入数据 INSERT INTO t SELECT 'aa','bb' UNION ALL SELECT 'a1','bgb' UNION ALL SELECT 'aa','bb' UNION ALL SELECT 'a2','bb' UNION ALL SELECT 'aa3','beeb' UNION ALL SELECT 'aa','bb' UNION ALL S…
场景:表TEST中有C1,C2,C3...字段,其中C1为主键,先需要复制表TEST中一条(C1='1'的)记录,修改主键列C1和需要变更的列后,再插入到表TEST中. procedure P_TEST 执行过程: create or replace procedure P_TEST(P_EXT_COLS IN VARCHAR2 --需要变更的列 ) IS VSQL VARCHAR2(200); --动态SQL V_COLS VARCHAR2(200); --自动SELECT出来的列 begin…
转自:http://www.maomao365.com/?p=4942 下文主要讲述:重复数据只获取一条的方法 row_number函数在数据库中的功能是为每一行 按照一定的规则生成一个编号,我们常常利用这一属性,对表进行分页操作,下文我们将讲述采用 row_number函数删除表中重复数据行 /*建表*/ )) go /*生成数据*/ insert into A(keyId,info)values (,,,,,'e'), (,,,,,'e'), (,,,,,'e') go /*删除 keyId…
这两天做了一个调用第三方接口的小程序,因为是实时更新数据,所以请求接口的频率就很高,这样有时会出现往数据库插入重复的数据,对数据库造成压力也不方便管理,因为要通过原生sql语句,解决数据库的去重问题.在过程中遇到了麻烦,最终解决了分享出来. 要删除重复的记录,就要先查出重复的记录,这个很容易做到 select * from cqssc group by expect having count(expect) > 1 注意:这是查出所有重复记录的第一条记录,需要保留,因此需要添加查询条件,查出这三…
1. 问题描述 BBSCOMMENT表为BBSDETAIL的从表,记录商户评价信息.因为数据倒腾来倒腾去的,有很多重复数据.表结构如下: COMMENT_ID NOT NULL NUMBER --主键DETAIL_ID NOT NULL NUMBER --外键,引用BBSDETAIL表COMMENT_BODY NOT NULL VARCHAR2(500) --评价内容 --其它字段忽略 其中主键是没有重复的,重复的是DETAIL_ID+COMMENT_BODY+......等信息,就是某些商家的…
通过数:1 明天就要暑假编程集训啦~莫名开心 今天做出了一道 二分答案题(好艰辛鸭) 1049: B13-二分-跳石头游戏(二分答案) 时间限制: 5 Sec  内存限制: 256 MB提交: 30  解决: 12[提交] [状态] [讨论版] [命题人:外部导入] 题目描述 样例输入 25 5 2 2 14 11 21 17 样例输出 4 提示 参考check函数: bool check(int x) {      int tot=0;     if(tot>m)return 0;     i…
今天遇到一个历史导入数据重复的问题,于是要删除重复的记录,一开始想用子查询的方式找到要删除记录的id删除,后来发现DELETE语句可以直接用外连接,这样更加简单,效率也更高. delete sys_project from sys_project as aa left join ( select min(id) as id from sys_project group by sysCode ) as bb on aa.id = bb.id where bb.id is null 这里就是通过左外…
MongoDB闪亮登场 自我介绍 MongoDB 是一个基于分布式文件存储的数据库.由 C++ 语言编写.旨在为 WEB 应用提供可扩展的高性能数据存储解决方案. MongoDB 是一个介于关系数据库和非关系数据库之间的产品,是非关系数据库当中功能最丰富,最像关系数据库的. MongoDB最大的特点就是无Schema限制,灵活度很高.数据格式是BSON,BSON是一种类似JSON的二进制形式的存储格式,简称Binary JSON 它和JSON一样,支持内嵌的文档对象和数组对象. 跟关系型数据库概…
最近做性能测试时,发现连接第三方系统时会有约1%的交易提示如下错误 nested exception is org.apache.commons.httpclient.ConnectTimeoutException: The host did not accept the connection within timeout of 10000 ms 起先抱着能google就google的思路去找,结果没找到相应的解决方案,只能自己一步一步去排查了,下面记录下排查过程. 抓拍问题现场 涉及到网络的问…
大家都知道π=3.1415926……无穷多位, 历史上很多人都在计算这个数, 一直认为是一个非常复杂的问题.现在有了电脑, 这个问题就简单了.电脑可以利用级数计算出很多高精度的值, 有关级数的问题请参考<高等数学>,以下是比较有名的有关π的级数: 其中有些计算起来很复杂, 我们可以选用第三个, 比较简单, 并且收敛的非常快.因为计算π值, 而这个公式是计算π/2的, 我们把它变形:π = 2 + 2/3 + 2/3*2/5 + 2/3*2/5*3/7 + ... 对于级数, 我们先做个简单测试…
less + 文件名 1.Enter键 :向下翻一行 2.空格键 :向下翻一屏 3.j键 :想下翻一行 4.k键 :向上翻一行 5.f键 :向下翻一屏 6.b键 : 向上翻一屏 7.d键 :向下翻半屏 8.u键 :向上翻半屏 9.g键 :移动到行首 10.G :移动到尾行 11.q :退出 12.Q :退出 13.ZZ   :退出…
U3D的MOBA项目,测试过程中,10分钟以后,游戏帧率开始缓慢下降,约3-5分钟后,由60帧下降到小于10帧,编辑器模式. 打开profiler,看到CPU占用非常高,每帧都有24K的GC, 时间占用曲线上看是script大量占用CPU时间. 第一印象,应该是泄漏造成的.定位办法,profiler先打开deep模式,但不激活,重新开游戏,挂着,直到越来越卡,然后激活profiler的record, 查看时间占用,发现是一个update里反复的往一个list里添加却从未移除.…
vi ~/.bashrc,增加一个function svnlog(){ svn log "$@" | awk -f <(cat <<EOF #!/usr/bin/awk -f # Convert the "svn log" output into a one liner format, which is easier to grep # or use in scripts. Pipe "svn log" into this sc…
Redis的安装 下载地址http://redis.io/download 安装步骤: 首先需要安装gcc,把下载好的redis-3.0.0-rc2.tar.gz 放到 /usr/local 文件夹下 进行解压 tar -zxvf redis-3.0.0-rc.tar.gz 进入到redis-3.0.0目录下,进行编译 make 进入到src下继续安装 make install ,验证(查看src下的目录,有redis-server.redis-cil) 建立两个问价夹存放redis命令和配置文…
最终代码 update T_Fee set gzl_dfg_op = 'delete' where MetReadRecordID in ( select MetReadRecordID from T_Fee and MetReadRecordID is not null group by MetReadRecordID ) and ID not in ( select min(ID) from T_Fee and MetReadRecordID is not null group by Met…
INSERT INTO 表1   SELECT  *  FROM  视图1 CREATE TABLE  ##TMP01                                    ---创建全局临时表(    [AGUID]            [nvarchar](50)        NULL,    [BGUID]            [nvarchar](50)        NULL,    [DeviceID]         [nvarchar](50)       …
delete from fa_order_account ) as a) ) as b)…
通过数:1 ┭┮﹏┭┮ qdoj.xyz 1053 分治-循环比赛日程表 其实今天晚上留给编程的时间并不多,做出一道... 不过收获还是非常大的 毕竟本人从来没有学习过分治算法,今天竟然攻克了我人生中的第一道 分治算法题 !! 题目如下: 那么这一道题怎么做呢 提示 以表格的中心为拆分点,将表格分成A.B.C.D四个部分,就很容易看出有A=D,B=C,并且,这一规律同样适用于各个更小的部分. 那么这就是分治啦 来一段知识讲解 注意看一下上面的“分治法的适用条件” /* 1053: B05-分治-…
目录 问题的发现 zk的情况以及分析 总结 问题的发现 最早问题的发现在于用户提的,用户提出他支付时支付失败,过了一会儿再试就好了,于是翻日志,查询到当时duboo调用出现了下类错误: [TraceID:20200527145701489] DEBUG c.y.c.s.w.s.m.m.a.HandlerMethodAspect - Throw: {} com.alibaba.dubbo.rpc.RpcException: Forbid consumer 172.17.40.16 access s…
.Net 基金会中包含有很多优秀的项目,今天就和笔者一起了解一下其中的一些优秀作品吧. 中文介绍 中文介绍内容翻译自英文介绍,主要采用意译.如与原文存在出入,请以原文为准. System.Drawing (Mono) System.Drawing 是一个跨平台的开源图形实现库,作为微软的 System.Drawing 名称空间下的绘图内容的可选方案. 项目详情 官方网站 项目源码 项目许可证: MIT 相关链接 参与贡献 开发文档 参与讨论 笔者简评 其属于 Mono 的一部分,笔者虽然无法理解…
昨天在简书上写了用Scrapy抓取简书30日热门文章,对scrapy是刚接触,跨页面抓取以及在pipelines里调用settings,连接mysql等还不是很熟悉,今天依旧以单独的py文件区去抓取数据.同时简书上排版不是很熟悉,markdown今天刚下载还没来得及调试,以后会同步更新 简书文章:http://www.jianshu.com/p/eadfdb4b5a9d 一.下面是将爬取到的数据写到Mysql数据库代码: 插入数据库titletime字段需要将字符型转化为datetime型 用t…
情景: 我们的数据库中可能会存在很多因各种原因而重复的记录,我们需要对这些重复的记录进行删除,每组组重复的记录只保留一条就行 例如我们有这么个表:两个框框都是有重复记录的,红框和绿框都只需要留下一条,其他的都干掉. 前提: 1:每天记录都要有一个唯一id 2:每组重复的记录要有字段能进行分组,例如上面我们按name.class.age.score相同的就是一组. 数据宝贵,请先备份!!! 数据宝贵,请先备份!!! 数据宝贵,请先备份!!! 放上整条SQL: DELETE FROM "t_hw_t…