我用C编写了一个程序来解析大型XML文件,然后使用insert语句创建文件.其他一些进程会将文件摄取到MySQL数据库中.此数据将用作索引服务,以便用户可以轻松找到文档.
我选择了InnoDB来实现行级锁定.C程序将在给定的调用中生成500到500万个插入语句.
将所有这些数据尽快送入数据库的最佳方法是什么?另一件需要注意的是,DB位于单独的服务器上.是否值得将文件移动到该服务器以加快插入?
编辑:此表不会真正更新,但行将被删除.
使用mysqlimport工具或LOAD DATA INFILE命令.
暂时禁用数据完整性不需要的索引