说干就干,我们用 C# 写一个搜索程序用来生成 json(其实当时是用 Java 写的,这两天用 C# 重写了遍)
然后再用这些 json 生成 sql
生成 sql 后直接在 MySQL 里用 source 执行就行了,时间还挺快的,用了一两个小时左右
本来信心满满,在本地用数据量十万条的测试数据库进行了测试,但是用时让我傻眼了

这样就实现了批量的更新,试着生成用这个语法的 sql
用这样生成的 sql 去测试
只用了十多秒就完事了,挺不错,这就把脚本搬到服务器上开导,顺带写个博客。
mysql导入sql文件过大(mysql 导入大量数据)要是 B 站专栏支持 markdown 语法就好了 这两天一个以前的项目有了新需求 需要给项目的数据库进行一下改造 其中主要涉及到超大数据量的一次性更新 之前这个项目也涉及了超大量数据的插入 正好统一记录一下需求是需要将服务器一个目录下的大约八千万个文件的路径导入到数据库里 文件名就是这个文件在数据库里的一个唯一标识字段 数据库里已经有了这些文件的信息 但是没有路径 怎么搞呢
说干就干,我们用 C# 写一个搜索程序用来生成 json(其实当时是用 Java 写的,这两天用 C# 重写了遍)
然后再用这些 json 生成 sql
生成 sql 后直接在 MySQL 里用 source 执行就行了,时间还挺快的,用了一两个小时左右
本来信心满满,在本地用数据量十万条的测试数据库进行了测试,但是用时让我傻眼了

这样就实现了批量的更新,试着生成用这个语法的 sql
用这样生成的 sql 去测试
只用了十多秒就完事了,挺不错,这就把脚本搬到服务器上开导,顺带写个博客。
版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容,请联系我们,一经查实,本站将立刻删除。
如需转载请保留出处:https://51itzy.com/kjqy/147406.html