我正在编写一个应用程序,它必须经常记录信息,比如说,一秒钟两次.我希望将信息保存到sqlite数据库,但我不介意每十分钟提交一次磁盘更改.
使用文件数据库时执行查询需要很长时间,并使计算机滞后.
一个可选的解决方案是使用内存数据库(它适合,不用担心),并不时将其同步到磁盘,
可能吗?有没有更好的方法来实现它(你能告诉sqlite只在X
查询后提交到磁盘吗?).
我可以解决这个用Qt
的SQL
包装器?
假设您有一个名为"disk_logs"的磁盘数据库,其中包含一个名为"events"的表.您可以将内存数据库附加到现有数据库:
ATTACH DATABASE ':memory:' AS mem_logs;
在该数据库中创建一个表(完全在内存中)以接收传入的日志事件:
CREATE TABLE mem_logs.events(a, b, c);
然后在应用程序停机期间将数据从内存表传输到磁盘表:
INSERT INTO disk_logs.events SELECT * FROM mem_logs.events;
然后删除现有内存表的内容.重复.
这很复杂但是......如果你的记录跨越多个表并且与外键链接在一起,那么当你从内存表复制到磁盘表时保持这些表同步可能会很麻烦.
在尝试这样的事情(令人不舒服的过度设计)之前,我还建议尝试让SQLite尽可能快地完成.SQLite应该能够轻松地每秒处理> 50K记录插入.每秒两次的几个日志条目不应导致显着的减速.
如果你在自己的交易中执行每个插入 - 这可能是你所看到的减速的重要因素.也许你可以:
计算到目前为止插入的记录数
开始交易
插入您的记录
增量计数
插入N条记录时的提交/结束事务
重复
不利的一面是,如果系统在此期间崩溃,您可能会失去未提交的记录(但如果您愿意使用内存数据库,那么听起来您的风险就好了).