当前位置: 首页 > news >正文

SQLite 全文检索:快速高效的文本查询方案

文章目录

  • 什么是全文检索?
  • 如何启用 FTS?
  • 插入数据
  • 执行全文检索
  • 关联原始表与 FTS 表
  • 数据更新
  • 结论

说明: 本文以博客内容全文检索为例。

什么是全文检索?

全文检索是指对文本数据进行索引和查询的一种技术。与常规的 LIKE 查询不同,全文检索通过对文本建立倒排索引,可以更快地处理文本搜索,尤其在涉及大量数据时,性能优势尤为明显。

SQLite 中,使用 FTS5 模块可以轻松实现全文检索功能。该模块是一个虚拟表模块,允许你创建一个可以进行全文索引的表。

如何启用 FTS?

SQLite 中启用全文检索的前提是 SQLite 已经支持 FTS5(通常默认支持)。我们可以使用以下命令创建一个支持全文检索的表:

CREATE VIRTUAL TABLE blog_posts_fts USING fts5(id, title, content);

上述命令创建了一个名为 blog_posts_fts 的虚拟表,其中包含 idtitlecontent 三个字段,并为 titlecontent 字段建立了全文索引。

插入数据

由于 FTS 表是虚拟表,因此无法直接与普通表同步数据,需要手动将数据插入到 FTS 表中。示例代码如下:

INSERT INTO blog_posts_fts (id, title, content)
SELECT id, title, content FROM blog_posts;

这会将 blog_posts 表中的所有数据同步到 blog_posts_fts 表中,以供全文检索使用。

执行全文检索

执行全文检索时,可以使用 MATCH 语法来查询文本内容。以下示例展示了如何搜索包含关键字 SQLite 的文章:

SELECT id, title, content
FROM blog_posts_fts
WHERE blog_posts_fts MATCH 'SQLite';

这种方式可以在大量数据中快速找到与关键字匹配的结果。

关联原始表与 FTS 表

为了方便获取更多的元数据(如日期、作者等),我们可以通过 id 关联 FTS 表与原始的 blog_posts 表。例如:

SELECT bp.id, bp.title, bp.date, fts.content
FROM blog_posts bp
JOIN blog_posts_fts fts ON bp.id = fts.id
WHERE fts MATCH 'SQLite'
ORDER BY bp.date DESC;

这样,你就可以在检索的同时获取完整的博客信息,并按日期进行排序。

数据更新

blog_posts 表的数据发生变化时,需要同步更新到 blog_posts_fts 表。你可以手动更新,也可以使用触发器自动同步:

CREATE TRIGGER after_blog_posts_insert
AFTER INSERT ON blog_posts
BEGININSERT INTO blog_posts_fts (id, title, content)VALUES (NEW.id, NEW.title, NEW.content);
END;CREATE TRIGGER after_blog_posts_update
AFTER UPDATE ON blog_posts
BEGINUPDATE blog_posts_ftsSET title = NEW.title, content = NEW.contentWHERE id = NEW.id;
END;CREATE TRIGGER after_blog_posts_delete
AFTER DELETE ON blog_posts
BEGINDELETE FROM blog_posts_fts WHERE id = OLD.id;
END;

触发器会确保 FTS 表自动更新,不需要手动同步。

结论

SQLite 提供了功能强大的 FTS 模块,能够显著提高文本数据查询的效率。通过建立全文检索索引,可以轻松地在大量文本数据中找到相关的记录。在实际项目中,如果有大量的文本数据需要搜索,SQLiteFTS 功能不失为一种简便而有效的解决方案。


http://www.mrgr.cn/news/70124.html

相关文章:

  • Rust学习(二):rust基础语法Ⅰ
  • TypeScript 中的三斜杠指令语法
  • WorkFlow源码剖析——Communicator之TCPServer(下)
  • MySQL Shell教程
  • 基于Python的药房管理系统
  • 自闭症机构推荐:让孩子找回快乐与自信
  • PGMP-串串040506 效益管理相关方争取治理
  • ESP32-S3模组上跑通esp32-camera(11)
  • 腾讯首个3D生成大模型Hunyuan3D-1.0分享
  • 算法求解 -- (炼码 3853 题)检查是否有路径经过相同数量的0和1
  • WIndows搭建NGINX环境
  • Python学习从0到1 day26 第三阶段 Spark ⑤ 搜索引擎日志分析
  • [C++] 函数详解
  • 嵌入式面试八股文(六)·ROM和RAM的区别、GPIO的八种工作模式、串行通讯和并行通讯的区别、同步串行和异步串行的区别
  • 声学中频率概念
  • 云计算在智能交通系统中的应用
  • 【LLM Agents体验 2】利用Dify本地部署Qwen2.5:7B大模型的安装指南
  • Python 第三方库 PyQt5 的安装
  • 科研绘图系列:R语言多个图形组合(scatterplot heatmap)
  • 【题解】—— LeetCode一周小结45
  • Maven 项目模板
  • Python学习从0到1 day27 第三阶段 Spark ⑤ 搜索引擎日志分析
  • iOS问题记录 - 503 Service Temporarily Unavailable
  • TypeScript 中的三斜杠指令语法
  • zookeeper常用命令
  • 系统启动时将自动加载环境变量,并后台启动 MinIO、Nacos 和 Redis 服务