ICode9

精准搜索请尝试: 精确搜索
首页 > 其他分享> 文章详细

课程全文解锁接口(实验楼)

2020-10-20 10:00:32  阅读:211  来源: 互联网

标签:course 解锁 object 接口 page 索引 result haystack 实验楼


1.基本介绍

前后端不分离:https://www.cnblogs.com/xiaonq/p/12363589.html

1.1 安装

pip install drf-haystack # django的开源搜索框架
pip install whoosh # 搜索引擎
pip install jieba # 中文分词Jieba,由于Whoosh自带的是英文分词,对中文的分词支持
不是太好

1.2 什么是haystack?  

  • haystack是django的开源搜索框架,该框架支持 Solr,Elasticsearch,Whoosh, Xapian 搜索引 擎,不用更改代码,直接切换引擎,减少代码量。
  • 搜索引擎使用Whoosh,这是一个由纯Python实现的全文搜索引擎,没有二进制文件等,比较小 巧,配置比较简单,当然性能自然略低。
  • 中文分词Jieba,由于Whoosh自带的是英文分词,对中文的分词支持不是太好,故用jieba替换 whoosh的分词组件。

2.配置使用

2.1 syl/settings.py 全文检索配置

'''1.注册app '''
INSTALLED_APPS = [
    'haystack', # haystack要放在应用的上面
]

'''2.模板路径 '''
TEMPLATES = [
    {
        'DIRS': [os.path.join(BASE_DIR,'templates')],
    },
]
HAYSTACK_SEARCH_RESULTS_PER_PAGE = 15 # 搜索出多条数据时需要分页
HAYSTACK_CONNECTIONS = {
    'default': {
        # 'ENGINE': 'haystack.backends.whoosh_backend.WhooshEngine',
        'ENGINE': 'course.whoosh_cn_backend.MyWhooshEngine',
        'PATH': os.path.join(BASE_DIR, 'whoosh_index'), # 指定倒排索引
存放位置
    },
}
# # ES引擎
# HAYSTACK_CONNECTIONS = {
  # 'default': {
    # 'ENGINE':
'haystack.backends.elasticsearch_backend.ElasticsearchSearchEngine',
    # 'URL': 'http://10.211.55.15:9200/', # Elasticsearch服务器ip地址,端口号固
定为9200
    # 'INDEX_NAME': 'syl', # Elasticsearch建立的反向索引库的名称
    # },
# }
# 添加此项,当数据库改变时,会自动更新索引,非常方便
HAYSTACK_SIGNAL_PROCESSOR = 'haystack.signals.RealtimeSignalProcessor'
    

2.2 在子应用下创建索引文件  

  • apps/course/search_indexes.py
# apps/course/search_indexes.py
# 文件名必须是 search_indexes.py
from haystack import indexes
from .models import Course
# 修改此处,类名为模型类的名称+Index,比如模型类为GoodsInfo,则这里类名为GoodsInfoIndex(其
实可以随便写)
	class CourseIndex(indexes.SearchIndex, indexes.Indexable):
	"""
	Course索引类
	"""
	# text为索引字段
	# document = True,这代表haystack和搜索引擎将使用此字段的内容作为索引进行检索
	# use_template=True 指定根据表中的那些字段建立索引文件的说明放在一个文件中
	text = indexes.CharField(document=True, use_template=True)
	# 对那张表进行查询
	def get_model(self): # 重载get_model方法,必须要有
		"""返回建立索引的模型类"""
		return Course # 返回这个model
	# 建立索引的数据
	def index_queryset(self, using=None):
	"""返回要建立索引的数据查询集"""
	# 这个方法返回什么内容,最终就会对那些方法建立索引,这里是对所有字段建立索引
		return self.get_model().objects.all()

2.3 指定索引模板文件  

  • templates/search/indexes/course/course_text.txt
  • # 创建文件路径命名必须这个规范:templates/search/indexes/应用名称/模型类名称 _text.txt
  • {{object.id}}
    {{object.title}}
    {{object.desc}}
     

2.4 修改为jieba分词中的中文分析器

  • apps/course/whoosh_cn_backend.py

  

from haystack.backends.whoosh_backend import WhooshEngine, WhooshSearchBackend
from whoosh.fields import TEXT
from jieba.analyse import ChineseAnalyzer
class MyWhooshSearchBackend(WhooshSearchBackend):
	def build_schema(self, fields):
		(content_field_name, schema) = super().build_schema(fields)
		# 指定whoosh使用jieba进行分词
		schema._fields['text'] = TEXT(stored=True,
							analyzer=ChineseAnalyzer(),
							field_boost=fields.get('text').boost,
							sortable=True)
		return (content_field_name, schema)
class MyWhooshEngine(WhooshEngine):
	backend = MyWhooshSearchBackend

2.5 syl/urls.py 添加路由

urlpatterns = [
path('search/', course_index_search),
]

2.6 命令构建倒排索引  

python manage.py rebuild_index

2.5 课程全文检索接口视图函数

 1 from syl import settings
 2 from django.core.paginator import InvalidPage, Paginator
 3 from haystack.forms import ModelSearchForm
 4 from django.http import JsonResponse
 5 # 如果settings.py中配置就是用settings中配置的,否则就每页15条
 6 RESULTS_PER_PAGE = getattr(settings, 'HAYSTACK_SEARCH_RESULTS_PER_PAGE', 15)
 7 def course_index_search(request):
 8     query = request.GET.get('q', None)
 9     page = int(request.GET.get('page', 1)) # 第几页
10     page_size = int(request.GET.get('page_size', RESULTS_PER_PAGE)) #每页多少条
11     if query:
12         form = ModelSearchForm(request.GET, load_all=True) # 将查询条件传递给查询对
13 
14         if form.is_valid():
15             results = form.search() # 查询出来的最终数据
16         else:
17             results = []
18     else:
19         return JsonResponse({"code": 404, "msg": 'No file found!', "data": []})
20     # 对结果集进行分页
21     paginator = Paginator(results, page_size)
22     try:
23         page = paginator.page(page) # 从分好的页中拿第几页
24     except InvalidPage: # 如果分页出错
25         return JsonResponse({"code": 404, "msg": 'No file found!', "data": []})
26     jsondata = []
27     for result in page.object_list: # 分页后的课程查询结果
28     data = {
29         'id': result.object.id,
30         'title': result.object.title,
31         'desc': result.object.desc,
32         'img':
33         request.scheme+'://'+request.META['HTTP_HOST']+result.object.img.url,
34         #'follower': result.object.follower,
35         'learner': result.object.learner,
36         'status': result.object.status,
37         'course_type': result.object.course_type.id
38         }
39     jsondata.append(data)
40     result = {
41         "code": 200,
42         "msg": 'Search successfully!',
43         "data": {"count": page.paginator.count, "results": jsondata}
44     }
45     return JsonResponse(result)
View Code

 

3.测试课程全文检索  

http://192.168.56.100:8888/search/?q=入门&page=1&page_size=1

测试结果

 

 

标签:course,解锁,object,接口,page,索引,result,haystack,实验楼
来源: https://www.cnblogs.com/zhangshijiezsj/p/13844830.html

本站声明: 1. iCode9 技术分享网(下文简称本站)提供的所有内容,仅供技术学习、探讨和分享;
2. 关于本站的所有留言、评论、转载及引用,纯属内容发起人的个人观点,与本站观点和立场无关;
3. 关于本站的所有言论和文字,纯属内容发起人的个人观点,与本站观点和立场无关;
4. 本站文章均是网友提供,不完全保证技术分享内容的完整性、准确性、时效性、风险性和版权归属;如您发现该文章侵犯了您的权益,可联系我们第一时间进行删除;
5. 本站为非盈利性的个人网站,所有内容不会用来进行牟利,也不会利用任何形式的广告来间接获益,纯粹是为了广大技术爱好者提供技术内容和技术思想的分享性交流网站。

专注分享技术,共同学习,共同进步。侵权联系[81616952@qq.com]

Copyright (C)ICode9.com, All Rights Reserved.

ICode9版权所有