佳木斯湛栽影视文化发展公司

主頁 > 知識庫 > 基于python + django + whoosh + jieba 分詞器實現(xiàn)站內(nèi)檢索功能

基于python + django + whoosh + jieba 分詞器實現(xiàn)站內(nèi)檢索功能

熱門標(biāo)簽:銀行業(yè)務(wù) 服務(wù)器配置 美圖手機 鐵路電話系統(tǒng) 網(wǎng)站文章發(fā)布 呼叫中心市場需求 檢查注冊表項 智能手機

基于 python django

源碼

前期準(zhǔn)備

安裝庫:

pip install django-haystack
pip install whoosh
pip install jieba

如果pip 安裝超時,可配置pip國內(nèi)源下載,如下:

pip install -i http://mirrors.aliyun.com/pypi/simple/ --trusted-host mirrors.aliyun.com   安裝的庫>
pip install -i http://mirrors.aliyun.com/pypi/simple/ --trusted-host mirrors.aliyun.com  django

如果安裝 django-haystack 失敗,先安裝 setuptools_scm .在安裝 django-haystack.

pip install setuptools_scm

項目

 創(chuàng)建項目demo:

# django-admin startproject 項目名>
	django-admin startproject find

切入demo 終端操作,創(chuàng)建app:

# python manage.py startapp APP名>
	python manage.py startapp searchshop

在 settings.py 文件 中的 INSTALLED_APPS 配置 注入 剛才創(chuàng)建APP( 路徑: find/find/settings.py):

INSTALLED_APPS = [
	...
	'searchshop',
	...
]

在創(chuàng)建的APP中添加模型

models.py 文件添加如下(路徑: find/searchshop/models.py):

class Shopp(models.Model):
    shop_name = models.TextField(max_length=200)
    shop_price = models.IntegerField(default=0)
    shop_dsc = models.CharField(max_length=200)

在app 中admin.py文件注冊模型:

admin.py 文件添加如下(路徑: find/searchshop/admin.py):

from .models import Shopp
admin.site.register(Shopp)

執(zhí)行命令,讓模型生效(修改模型時,都要執(zhí)行一次,這樣模型才同步!!!):

python manage.py makemigrations 
python manage.py migrate

創(chuàng)建后臺管理帳號

訪問后臺可操作模型數(shù)據(jù):

 python manage.py createsuperuser

運行:

python manage.py runserver

訪問: http:127.0.0.1:8080/admin 登錄剛才設(shè)置帳號,密碼即可進入:

搭建站內(nèi)搜索

配置 haystack

在 settings.py 文件 中的 INSTALLED_APPS 配置最底部 注入 haystack( 路徑: find/find/settings.py):

INSTALLED_APPS = [
	...
	'haystack'
]

在app內(nèi),添加 search_indexes.py (目錄:find/searchshop/search_indexes.py):

from haystack import indexes
from .models import Shopp # 之前創(chuàng)建的模型

# 修改此處,類名為模型類的名稱+Index,比如模型類為GoodsInfo,則這里類名為GoodsInfoIndex(其實可以隨便寫)
class ArticlePostIndex(indexes.SearchIndex, indexes.Indexable):
    # text為索引字段
    # document = True,這代表haystack和搜索引擎將使用此字段的內(nèi)容作為索引進行檢索
    # use_template=True 指定根據(jù)表中的那些字段建立索引文件的說明放在一個文件中
    text = indexes.CharField(document=True, use_template=True)

    # 對那張表進行查詢
    def get_model(self):  # 重載get_model方法,必須要有!
        # 返回這個model
        return Shopp

    # 建立索引的數(shù)據(jù)
    def index_queryset(self, using=None):
        # 這個方法返回什么內(nèi)容,最終就會對那些方法建立索引,這里是對所有字段建立索引
        return self.get_model().objects.all()

生成檢索索引

python manage.py rebuild_index

項目目錄多出whoosh_index文件夾.

修改分詞器

從 pyrhon 安裝路徑 ( \Lib\site-packages\haystack\backends\whoosh_backend.py) 復(fù)制一份到app中改名為 whoosh_cn_backend (find/searchshop/whoosh_cn_backend.py)
在頂部引用:

from jieba.analyse import ChineseAnalyzer

找到 (查找 StemmingAnalyzer ) 位置:

 schema_fields[field_class.index_fieldname] = TEXT(
                    stored=True,
                    analyzer=StemmingAnalyzer(),
                    field_boost=field_class.boost,
                    sortable=True,
                )

替換:

schema_fields[field_class.index_fieldname] = TEXT(stored=True, analyzer=ChineseAnalyzer(),
                    field_boost=field_class.boost)

在 INSTALLED_APPS(路徑: find/find/settings.py) 配置后面 后面添加:

HAYSTACK_CONNECTIONS = {
    'default': {
        # 指定whoosh引擎 (之前創(chuàng)建的whoosh_cn_backend)
        'ENGINE': 'searchshop.whoosh_cn_backend.WhooshEngine',
        # 'ENGINE': 'jsapp.whoosh_cn_backend.WhooshEngine',      # whoosh_cn_backend是haystack的whoosh_backend.py改名的文件為了使用jieba分詞
        # 索引文件路徑
        'PATH': os.path.join(BASE_DIR, 'whoosh_index'),
    }
}
 # 添加此項,當(dāng)數(shù)據(jù)庫改變時,會自動更新索引,非常方便
HAYSTACK_SIGNAL_PROCESSOR = 'haystack.signals.RealtimeSignalProcessor'

添加 templates

在APP中創(chuàng)建 templates文件夾.

添加內(nèi)容檢索內(nèi)容

在templates文件夾下創(chuàng)建文件夾 search -> indexes -> searchshop( search + APP名);
路徑( 目錄: find/searchshop\templates\search\indexes\searchshop) 添加Shopp_text.txt(APP名_text.txt): (需要檢索的字段名)

{{object.shop_name}}
{{object.shop_dsc}}
{{object.shop_price}}

添加頁面模板

在templates文件夾下創(chuàng)建文件夾(searchshop) 下創(chuàng)建index.html:

{% load highlight %}
!DOCTYPE html>
html lang="en">
head>
    meta charset="UTF-8">
    title>商品列表/title>
    style>
        span.highlighted {
            color: red;
        }
    /style>
/head>
body>
    div class="search">
        form method="get" action="{% url 'shop:search' %}">
            input type="text" name="q" placeholder="a搜索商品">
            input type="submit" value="搜索">
        /form>
    /div>
    {% if shop_list and query %}
    ul>
        {% for question in shop_list %}
        li>
            {% highlight question.object.shop_name with query %}
            價格: {% highlight question.object.shop_price with query %}
            span class="post-author"> a> {% highlight question.object.shop_dsc with query %} /a>/span>
        /li>
        {% endfor %}
    /ul>
    {% else %}
    p>No polls are available./p>
    {% endif %}
/body>
/html>

load highlight : 加載高亮.
query : 檢索詞
shop_list : 檢索結(jié)果

視圖層

目錄: find/searchshop/views.py

from django.shortcuts import render
from django.http import HttpResponse
#Create your views here.
from .models import Shopp
from haystack.forms import  ModelSearchForm
from haystack.query import EmptySearchQuerySet
def index(request):
   shop_list = Shopp.objects.all()
   context = {
       'query': '',
       'shop_list': shop_list
   }
   return render(request, 'searchshop/index.html', context)

def search(request,  load_all=True, form_class=ModelSearchForm, searchqueryset=None):
   if request.GET.get('q'):
       form = form_class(request.GET, searchqueryset=searchqueryset, load_all=load_all)

       if form.is_valid():
           query = form.cleaned_data['q']
           results = form.search()
           context = {
               'query': query,
               'shop_list': results
           }
           return render(request, 'searchshop/index.html', context)
           # results = form.search()
       return HttpResponse(request.GET.get('q'))
   return HttpResponse('查詢')

配置路由

在 find/searchshop 創(chuàng)建 urls.py

from . import views
app_name = 'shop'   # 重點是這一行
urlpatterns = [
   path('', views.index, name='index'),
   path('search', views.search, name='search'),
   #  path(r'search/$', views.search, name='search')
]

修改 urls.py(目錄: find/find/urls.py)

from django.urls import path, include

urlpatterns = [
   path('shop', include('searchshop.urls')),
   path('admin/', admin.site.urls),
]

運行:

python manage.py runserver

測試

http://127.0.0.1:8000/shop


分詞器

所以'紅米'查詢不到…

到此這篇關(guān)于基于python + django + whoosh + jieba 分詞器實現(xiàn)站內(nèi)檢索的文章就介紹到這了,更多相關(guān)python django 分詞器實現(xiàn)站內(nèi)檢索內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!

您可能感興趣的文章:
  • python django使用haystack:全文檢索的框架(實例講解)
  • Python中使用haystack實現(xiàn)django全文檢索搜索引擎功能
  • python實現(xiàn)圖像檢索的三種(直方圖/OpenCV/哈希法)
  • python檢索特定內(nèi)容的文本文件實例
  • Python基于正則表達(dá)式實現(xiàn)檢查文件內(nèi)容的方法【文件檢索】

標(biāo)簽:長治 紅河 新疆 樂山 河南 沈陽 滄州 上海

巨人網(wǎng)絡(luò)通訊聲明:本文標(biāo)題《基于python + django + whoosh + jieba 分詞器實現(xiàn)站內(nèi)檢索功能》,本文關(guān)鍵詞  ;如發(fā)現(xiàn)本文內(nèi)容存在版權(quán)問題,煩請?zhí)峁┫嚓P(guān)信息告之我們,我們將及時溝通與處理。本站內(nèi)容系統(tǒng)采集于網(wǎng)絡(luò),涉及言論、版權(quán)與本站無關(guān)。
  • 相關(guān)文章
  • 收縮
    • 微信客服
    • 微信二維碼
    • 電話咨詢

    • 400-1100-266
    即墨市| 陇川县| 辉南县| 济阳县| 龙井市| 陇南市| 金堂县| 邹平县| 霍城县| 扶绥县| 汶上县| 梨树县| 泸溪县| 广河县| 鸡东县| 屏山县| 舟曲县| 上虞市| 鱼台县| 广饶县| 惠安县| 扶绥县| 三门县| 抚松县| 南皮县| 黔南| 赤峰市| 荆门市| 依安县| 治多县| 南平市| 阿图什市| 闻喜县| 晋中市| 荔浦县| 浪卡子县| 虞城县| 永顺县| 龙南县| 福安市| 桓台县|