Django笔记（五）搜索 django-haystack + solr中文分词配置

haystack

haystack 2.5 暂时支持到solr 4.10 （记笔记当时情况）

solr 4.10 安装

环境为ubuntu14.04（和centos安装软件命令以及配置文件路径稍微有点差异）

1. 依赖安装

pip install pysolr
# 7,8都可以，oracle java 也可以
sudo apt-get install openjdk-8-jre 
sudo apt-get install tomcat7 tomcat7-admin

2. 去官方下载历史包 http://archive.apache.org/dist/lucene/solr/4.10.4/solr-4.10.4.tgz
3. 安装solr

路径随意 ，一般opt或者usr/share
sudo mkdir /opt/solr-tomcat
#拷贝根目录 也可以copy multicore文件夹作为根目录
sudo cp solr-4.10.4/example/solr /opt/solr-tomcat/solr
# 把solr.war文件复制到tomcat安装路径的webapps下,运行tomcat会自动解压这个war文件，没有的话，改成zip，手动解压
sudo cp solr-4.10.4/example/webapps/solr.war /usr/share/tomcat7/webapps

4. 绑定tomcat webapps
   在tomcat的默认配置文件夹下建立Catalina/localhost文件夹，并创建solr.xml,ubuntu14.4默认配置在/etc/tomcat
   solr.xml

5. 修改webapps/solr/WEB-INF/web.xml,取消注释，并且设置home目录

    
       solr/home
       /opt/solr-tomacat/multicore
       java.lang.String
    

6. 将example/lib/ext下所有的jar拷贝到/usr/share/tomcat7/solr/WEB-INF/lib/

7. 修改文件夹权限
   sudo chown -R tomcat7 /opt/solr-tomcat/multicore

8. 启动solr sudo service tomcat7 restart ,http://ip:8080/solr 访问

9. 增加core

1. 直接拷贝example/solr/collection1到multicore目录，并修改权限
2. 编辑solr.xml 添加一个core的选项
   
   3.重启tomcat

10. 优化

提高jvm内存限制 编辑/etc/default/tomcat7 -Xmx128m to -Xms512m -Xmx1024m

solr管理后台增加密码验证(密码设置成功后居然haystack就获取不到数据了，改用通过ip限制)

http://blog.csdn.net/ye_qing/article/details/40457237 （solr教程）

1. 配置tomcat,修改TOMCAT_HOME\conf\tomcat-users.xml文件，添加用户和角色

  
  


 
 
 
  
配置solr, 修改TOMCAT_HOME\webapps\ROOT\WEB-INF\web.xml(不一定有)和TOMCAT_HOME\webapps\solr\WEB-INF\web.xml
 
 
 
 
    
      
        Solr Lockdown  
        /                 
           
           
            solr     
           
    
    
        BASIC              
        Solr  
   
 
 
solr指定ip访问 /etc/tomcat7/server.xml
 
 


# 添加以上任意一行，注释掉以下一行

 
 
中文分词
 
 
IK
 
 
 
  
下载分发包：https://code.google.com/archive/p/ik-analyzer/downloads (PS：u1分发包可能有问题 未测试最后的版本，使用链接：http://pan.baidu.com/s/1i4qs1Yt 密码：ix1r 正常，)
 
  
拷贝 IKAnalyzer2012FF_u1.jar 到webapps/solr/WEB-INF/lib目录，IKAnalyzer.cfg.xml和stopword.dic到webapps/solr/WEB-INF/classes（无则新建)目录。
 修改core的schema.xml,添加分词方法
 
 
 
 


    
        
        
        
        
           
    
    
        
        
        
        
           
    



    
        
    



    
        
    

 
 
参考和来源
 
 
安装参考
 
 
 
  
http://m.blog.csdn.net/article/details?id=51424873
 
  
http://gagannaidu.blogspot.com/2014/02/apache-solr-461-tomcat7-setup-on-ubuntu.html
 
  
solr 6安装 http://blog.topspeedsnail.com/archives/5686 
 
 
 
 
分词参考
 
 
IK
 
 
 
  
http://m.blog.csdn.net/article/details?id=44594845
 
  
http://blog.csdn.net/gufengshanyin/article/details/21533409
 
 
 
 
mmseg4j
 
 
 
  
http://blog.csdn.net/zhu_tianwei/article/details/46711511
 
 
 
 
Haystack more like this
 
 
solr
 需要添加到solrconfig.xml文件，路径在core下
 
 
slor 配置
 
 
fl: 文档结果中应返回的FIeld集，默认为“*”
 df: 默认的查询字段，一般默认指定。
 qf: query fields,指定solr从哪些field搜索
 fq: filter query,过滤
 mm: minimal should match。Solr支持三种查询clause，即“必须出现”， “不能出现”和“可以出现”，分别对应于AND, -, OR。
 mlt.fl mlt使用的字段
 
 
haystack要索引和mlt的字段好像都只能通过txt模板定义，其他字段好像是用来筛选的（未确定）
 
 
要索引的字段数据库存储必须是各种text格式
 mlt必须加上termVectors="true"