处理MySQL大量数据去重的简单方法
admin
2023-05-16 16:02:06
0次
下面讲讲关于处理MySQL大量数据去重的简单方法，文字的奥妙在于贴近主题相关。所以，闲话就不谈了，我们直接看下文吧，相信看完处理MySQL大量数据去重的简单方法这篇文章你一定会有所受益。
因为有大量的重复数据，所以选择的去重方法是通过聚合函数建立一个新的表，然后重命名。sql代码如下：
create table tmp select * from table_name group by column1,column2;
然后呢，因为删除过大量数据，所以id都快到600000了。。。看着太碍眼了，所以把id变成从1 开始了。方法是先把id字段删除了，然后再增加id字段并设为自增长，好了，终于看着舒心了。。。三十多万的数据去重后大概十八条数据，用时70s，估计几千万数据的时候我就该哭了，anyway，到时再说，继续想想有什么好办法。
注意：如果之前是按id排序的，改为从1开始后，不会和之前的顺序一样。会按照第二个字段重新排序的。
对于以上处理MySQL大量数据去重的简单方法相关内容，大家还有什么不明白的地方吗？或者想要了解更多相关，可以继续关注我们的行业资讯板块。
相关内容
热门资讯
飞沃科技获得实用新型专利授权：...
证券之星消息，根据天眼查APP数据显示飞沃科技（301232）新获得一项实用新型专利授权，专利名为“...
段永平的“本分”哲学，被OPP...
短短几十字的母亲节宣传文案，把OPPO推上了风口浪尖。 5月8日，手机品牌OPPO的官方微博、小红书...
百余家科创企业齐聚新疆 探索人...
乌鲁木齐5月15日电 (胡嘉琛)与机器人踢足球、遛机器狗……刚果(金)在华留学生基韦尼15日在乌鲁木...
山西一辆载有学生车辆侧翻，已致...
记者16日从山西省晋中市委宣传部获悉，16日上午，山西省晋中市左权县一载有学生的车辆发生侧翻，目前已...
研究生骗了医院1400万！根本...
通过虚开发票、冒名签名等方式，90后医学生套取医院科研经费达1426.828998万元。撰文丨凌骏一...
世佳博科技取得焊接板双面夹紧装...
国家知识产权局信息显示，北京世佳博科技集团有限公司取得一项名为“一种焊接板双面夹紧装置”的专利，授权...
别再被“无限流量”忽悠了！20...
你是不是也遇到过——租房搬家没宽带，出差开会网卡成PPT，或者买了个“随身WiFi”结果三天两头断流...
贵州正式迈入3000M超千兆智...
快科技5月16日消息，贵州移动昨日在贵阳召开发布会，联合华为、多彩新媒等企业，正式推出超千兆智能网服...
燃气热水器排烟管可以向下排吗
要知道排烟管向下排放是绝对不允许的，因为这样会增加阻力，然后会减少换热和产品的使用寿命，所以切记，排...