今天处理接收到的数据,发现数据量有几百万条,
用navicat工具操作,查询语句会超时,每一页加载过多也会崩溃,代码直接超时报错,
然后想着把不需要的数据都删了,发现select语句和delete语句都跑不动,只能用count查几十秒
然后发现条件查询,包括给表的某字段排序查询显示都卡,
所以想到把数据导出来处理了,再重新建表导进去,
然后导出这几百万条数据居然又导了几个小时,
终于进度条拉满了发现我这根本就没有文本编辑器能打开这个文件,
仔细一看属性,好家伙,将近7个G......
只好去网上搜了解决办法,下载并想方设法通过了密匙认证,
然后发现需要把目标字段放在最前面,只好回去改了表机构,卡了好久,重新导出来