Django中使用haystack+whoosh实现搜索功能
作者：YifChan 发布时间：2021-10-12 23:54:14
为了实现项目中的搜索功能，我们使用的是全文检索框架haystack+搜索引擎whoosh+中文分词包jieba
安装和配置
安装所需包
pip install django-haystack
pip install whoosh
pip install jieba
去settings文件注册haystack应用
INSTALLED_APPS = [
'haystack', # 注册全文检索框架
]
在settings文件中配置全文检索框架
# 全文检索框架的配置
HAYSTACK_CONNECTIONS = {
'default': {
# 使用whoosh引擎
'ENGINE': 'haystack.backends.whoosh_backend.WhooshEngine',
# 索引文件路径
'PATH': os.path.join(BASE_DIR, 'whoosh_index'),
}
}
# 当添加、修改、删除数据时，自动生成索引
HAYSTACK_SIGNAL_PROCESSOR = 'haystack.signals.RealtimeSignalProcessor'
索引文件的生成
要生成索引文件，首先你要配置，对哪些内容进行索引，比如商品名称，简介和详情；为了配置对数据库指定内容进行索引，我们要做如下步骤：
配置search_indexes.py文件
因为在django中数据库一般都是通过ORM生成的，首先我们在要在数据表对应的应用中创建一个 search_indexes.py 文件，例如，我现在要检索商品对应的表就是GoodsSKU表，而表是在goods应用下的，所以我在goods应用下新建 search_indexes.py 文件，截图如下：
在 search_indexes.py 文件中加入以下内容
# 定义索引类
from haystack import indexes
# 导入你的模型类
from goods.models import GoodsSKU
# 指定对于某个类的某些数据建立索引
# 索引类名格式:模型类名+Index
class GoodsSKUIndex(indexes.SearchIndex, indexes.Indexable):
# 索引字段 use_template=True指定根据表中的哪些字段建立索引文件的说明放在一个文件中
text = indexes.CharField(document=True, use_template=True)
def get_model(self):
# 返回你的模型类
return GoodsSKU
# 建立索引的数据
def index_queryset(self, using=None):
return self.get_model().objects.all()
指定要检索的内容
在templates文件夹下面新建search文件夹，在search文件夹下面新建indexes文件夹，在indexes文件夹下面新建要检索应用名的文件夹比如goods文件夹，在goods文件夹下面新建 表名_text.txt，表名小写，所以目前的目录结构是这样的 templates/search/indexes/goods/goodssku_text.txt ，截图如下：
在goodssku_text.txt 文件中指定你要根据表中的哪些字段建立索引数据，现在我们要根据商品的名称，简介，详情来建立索引，如下配置
# 指定根据表中的哪些字段建立索引数据
{{ object.name }} # 根据商品的名称建立索引
{{ object.desc }} # 根据商品的简介建立索引
{{ object.goods.detail }} # 根据商品的详情建立索引
其中的objects可以理解为数据表对应的商品对象。
生成索引文件
使用pycharm自带的命令行terminal运行以下命令生成索引文件：
python manage.py rebuild_index
运行成功后，你可以在项目下看到类似如下索引文件
使用全文检索
通过如上的配置，我们的数据索引已经建立了，现在我们要在项目中使用全文检索。
在需要使用检索的地方进行 form 表单改造
<form action="/search" method="get">
<input type="text" class="input_text fl" name="q" placeholder="搜索商品">
<input type="submit" class="input_btn fr" name="" value="搜索">
</form>
如上所示，其中要注意的是：
发送方式必须使用get；
搜索的input框 name 必须是 q；
配置检索对应的url
在项目下的urls.py文件中添加如下url配置
urlpatterns = [
url(r'^search/', include('haystack.urls')), # 全文检索框架
]
检索成功后生成的参数
当haystack自动检索成功后，会给我们返回三个参数；
query参数，表示你查询的参数；
page参数，当前页的Page对象，是查询到的对象的集合，可以通过for循环类获取单个商品，通过 商品.objects.xxx 获取商品对应的字段；
paginator参数，分页paginator对象。
可以通过如下代码测试参数
<!DOCTYPE html>
<html lang="en">
<head>
<meta charset="UTF-8">
<title>Title</title>
</head>
<body>
搜索的关键字:{{ query }}<br/>
当前页的Page对象:{{ page }}<br/>
<ul>
{％ for item in page ％}
<li>{{ item.object }}</li>
{％ endfor ％}
</ul>
分页paginator对象:{{ paginator }}<br/>
</body>
</html>
templates/indexes/search.html
注意，位置和文件名都是固定的，并且这只是测试文件，后面使用全文检索时记得不能使用search.html，改成其他名字。
数据+search.html返回渲染后页面
当haystack全文检索后会返回数据，现在我们需要一个页面来接收这些数据，并且在页面渲染后返回这个页面给用户观看，渲染并返回页面的工作haystack已经帮我们做了，那么我们现在只需要准备一个页面容纳数据即可。
在templates文件夹下的indexes文件夹下新建一个search.html，注意路径和文件名是固定的，如下图
利用检索返回的参数在search.html中定义要渲染出的模板和样式，我的页面如下
<div class="breadcrumb">
<a href="#">{{ query }}</a>
<span>></span>
<a href="#">搜索结果如下:</a>
</div>
<div class="main_wrap clearfix">
<ul class="goods_type_list clearfix">
{％ for item in page ％}
<li>
<a href="{％ url 'goods:detail' item.object.id ％}"><img src="{{ item.object.image.url }}"></a>
<h4><a href="{％ url 'goods:detail' item.object.id ％}">{{ item.object.name }}</a></h4>
<div class="operate">
<span class="prize">￥{{ item.object.price }}</span>
<span class="unit">{{ item.object.price}}/{{ item.object.unite }}</span>
<a href="#" class="add_goods" title="加入购物车"></a>
</div>
</li>
{％ endfor ％}
</ul>
<div class="pagenation">
{％ if page.has_previous ％}
<a href="/search?q={{ query }}&page={{ page.previous_page_number }}"><上一页</a>
{％ endif ％}
{％ for pindex in paginator.page_range ％}
{％ if pindex == page.number ％}
<a href="/search?q={{ query }}&page={{ pindex }}" class="active">{{ pindex }}</a>
{％ else ％}
<a href="/search?q={{ query }}&page={{ pindex }}">{{ pindex }}</a>
{％ endif ％}
{％ endfor ％}
{％ if page.has_next ％}
<a href="/search?q={{ query }}&page={{ page.next_page_number }}">下一页></a>
{％ endif ％}
</div>
</div>
search.html
至此，我们可以在页面上搜索一下内容，应该是能成功的，但也有可能不会返回任何数据就算name就是你搜索的内容，这是因为我们现在使用的主要还是为英语服务的分词包，接下来我们要配置使用中文分词包了。
使用中文分词包jieba
在前面的配置中我们已经安装了jieba；
创建 ChineseAnalyzer.py 文件
进入虚拟环境下的 Lib\site-packages\haystack\backends 目录下新建 ChineseAnalyzer.py 文件
目录如下图
在文件中添加如下内容
import jieba
from whoosh.analysis import Tokenizer, Token
class ChineseTokenizer(Tokenizer):
def __call__(self, value, positions=False, chars=False,
keeporiginal=False, removestops=True,
start_pos=0, start_char=0, mode='', **kwargs):
t = Token(positions, chars, removestops=removestops, mode=mode,
**kwargs)
seglist = jieba.cut(value, cut_all=True)
for w in seglist:
t.original = t.text = w
t.boost = 1.0
if positions:
t.pos = start_pos + value.find(w)
if chars:
t.startchar = start_char + value.find(w)
t.endchar = start_char + value.find(w) + len(w)
yield t
def ChineseAnalyzer():
return ChineseTokenizer()
ChineseAnalyzer.py
编写haystack可使用的 whoosh_cn_backend.py 文件
直接在 虚拟环境下的 Lib\site-packages\haystack\backends 目录下复制一份 whoosh_backend.py 文件 并且重命名复制文件为 whoosh_cn_backend.py；
在 whoosh_cn_backend.py 中导入我们编写的 ChineseAnalyzer 类
from .ChineseAnalyzer import ChineseAnalyzer
更改haystack使用的分词包为 jieba 编写的中文分词类，大概在第160行左右
# schema_fields[field_class.index_fieldname] = TEXT(stored=True, analyzer=StemmingAnalyzer(), field_boost=field_class.boost, sortable=True)
schema_fields[field_class.index_fieldname] = TEXT(stored=True, analyzer=ChineseAnalyzer(), field_boost=field_class.boost, sortable=True)
配置whoosh引擎使用 whoosh_cn_backend.py
在settings文件中更改原来的配置如下
# 全文检索框架的配置
HAYSTACK_CONNECTIONS = {
'default': {
# 使用whoosh引擎
# 'ENGINE': 'haystack.backends.whoosh_backend.WhooshEngine',
'ENGINE': 'haystack.backends.whoosh_cn_backend.WhooshEngine',
# 索引文件路径
'PATH': os.path.join(BASE_DIR, 'whoosh_index'),
}
}
# 当添加、修改、删除数据时，自动生成索引
HAYSTACK_SIGNAL_PROCESSOR = 'haystack.signals.RealtimeSignalProcessor'
重新生成索引文件
python manage.py rebuild_index
至此，就可以放心的使用搜索功能了，如图，搜索成功的显示页面
可以通过如下配置控制每个分页显示的搜索出来对象的数目
# 指定搜索结果每页显示的条数
HAYSTACK_SEARCH_RESULTS_PER_PAGE = 1
总结
以上所述是小编给大家介绍的Django之使用haystack+whoosh实现搜索功能,网站的支持！
如果你觉得本文对你有帮助，欢迎转载，烦请注明出处，谢谢！
来源：https://www.cnblogs.com/yifchan/p/python-1-36.html
0
投稿猜你喜欢
前言今天是正月初九，也是活动的倒数第二天，复工都三天了，而我三篇春节文章还没写完，实在是太混了！这次带来的是一个春节抽福卡页面，采用卡牌翻转- 效果基于Python3。在自己写小工具的时候因为这个功能纠结了一会儿，这里写个小例子，供有需要的参考。小例子，就是点击按钮打开路径选择窗口，
- 下载源码git clone https://github.com/mysql/mysql-server.gitcd mysql-server
- 通过《SQL Server 数据库备份和还原认识和总结（一）》，相信您对数据备份和还原有了一个更深入的认识，在上文中我没有对事务日志做剖析，
- 业务场景：1、在数据库表中的数据，要求记录每一条新增数据的创建时间，时间格式要求明确至：年月日：时分秒。2、在数据库表中的数据，要求记录每一
- 脚本之家下载地址：https://www.jb51.net/softs/79861.html官网下载地址：http://www.micros
- 1:为什么我得不到变量 我在一网页向另一网页POST数据name，为什么输出$name时却得不到任何值? 在PHP4.2以后的版本中regi
- 前面简单介绍了Python元组基本操作，这里再来简单讲述一下Python字典相关操作>>> dir(dict) #查看字段
- 一、正则表达式–元字符re 模块使 Python 语言拥有全部的正则表达式功能1. 数量词# 提取大小写字母混合的单词import rea
- 今天，在在使用 pycharm 的使用，进行创建 python的时候，发现使用默认的创建的选项使用的python 3环境 。而我系统默认的p
- 做沙盒的时候遇到一个小问题——在IE9里面竟然抓不到事件的keyCode：element.addEventListener('key
- 限制访问可以基于某种权限，某些检查或者为login视图提供不同的位置，这些实现方式大致相同。一般的方法是直接在视图的 request.use
- 本文python代码实现的是最小二乘法线性拟合，并且包含自己造的轮子与别人造的轮子的结果比较。问题：对直线附近的带有噪声的数据进行线性拟合，
- 环境搭建1.首先需要自行安装node环境2.然后全局安装 expressnpm install -g express3.创建express项
- 本文主要探索的是python的Crypto模块实现AES加密，分享了具体实现代码，下面看看具体内容。学了使用Crypto模块的AES来加密文
- XML Web Service 是在 Internet 上进行分布式计算的基本构造块。开放的标准以及对用户和应用程序之间的通信和协作的关注产
- 本文实例讲述了Python wxPython库Core组件BoxSizer用法。分享给大家供大家参考，具体如下：wx.BoxSizer：bo
- 10个杀手级应用的Python自动化脚本重复的任务总是耗费时间和枯燥的。想象一下，逐一裁剪100张照片，或者做诸如Fetching APIs
- 一、三种数据文件的读取二、csv、tsv、txt 文件读取1）CSV文件读取：语法格式：pandas.read_csv(文件路径)CSV文件
- 1.Go连接LDAP服务通过go操作的ldap,这里使用到的是go-ldap包，该包基本上实现了ldap v3的基本功能. 比如连接ldap
