solr集群

一、所需环境

1、linux系统（内存分大点）

2、JDK

3、zookeeper

4、solr

二、安装zookeeper

1、此次安装3个zookeeper

2、tar -zxf zookeeper-3.4.6.tar.gz

3、在/usr/local/目录下创建一个solrcloud目录。把zookeeper解压后的文件夹复制到此目录下三份。分别命名为zookeeper1、2、zookeeper3

4、

[root@bogon ~]# mkdir /usr/local/solrcloud

[root@bogon ~]# mv zookeeper-3.4.6 /usr/local/solrcloud/zookeeper1

[root@bogon ~]# cd /usr/local/solrcloud

[root@bogon solrcloud]# ll

[root@bogon solrcloud]# cp -r zookeeper1 zookeeper2

[root@bogon solrcloud]# cp -r zookeeper1  zookeeper3

5、在每个zookeeper文件夹下创建一个data目录，并在data文件夹下创建一个文件名称为myid，文件的内容就是此zookeeper的编号1、2、3。

[root@bogon data]# echo 1 >> myid

[root@bogon data]# cat myid

1

6、在zookeeper2、3文件夹下分别创建data目录和myid文件

[root@bogon solrcloud]# mkdir zookeeper2/data

[root@bogon solrcloud]# echo 2 >> zookeeper2/data/myid

[root@bogon solrcloud]# cat zookeeper2/data/myid

2

[root@bogon solrcloud]# mkdir zookeeper3/data         

[root@bogon solrcloud]# echo 3 >> zookeeper3/data/myid 

7、把zookeeper1下conf目录下的zoo_sample.cfg文件复制一份改名为zoo.cfg

8、修改zoo.cfg的配置，其他的zookeeper的clientport递增1，反正不同就可以。

 

9、启动zookeeper：./zkServer.sh start

关闭：./zkServer.sh stop

查看状态：./zkServer.sh status，其中的follower表示从节点，leader是主节点

[root@bogon solrcloud]# zookeeper1/bin/zkServer.sh status

JMX enabled by default

Using config: /usr/local/solrcloud/zookeeper1/bin/../conf/zoo.cfg

Mode: follower

[root@bogon solrcloud]# zookeeper2/bin/zkServer.sh status

JMX enabled by default

Using config: /usr/local/solrcloud/zookeeper2/bin/../conf/zoo.cfg

Mode: leader

[root@bogon solrcloud]# zookeeper3/bin/zkServer.sh status

JMX enabled by default

Using config: /usr/local/solrcloud/zookeeper3/bin/../conf/zoo.cfg

Mode: follower

10、建立四个tomcat，端口改为8080~8083，每个tomcat都配置好solr，也就是四个solr，solr的配置请参考http://www.cnblogs.com/honger/p/5876289.html，最后目录的结构是这样的

11、把solrhome中的配置文件上传到zookeeper集群。使用solr里的zookeeper的客户端上传。这个客户端的位置在solr解压后的solr-6.2.0/server/scripts/cloud-scripts/里的一个叫zkcli.sh的sell脚本

12、在solr-6.2.0/server/scripts/cloud-scripts/目录下执行（注意，此时的zookeeper应当已经启动）./zkcli.sh -zkhost 192.168.243.128:2181,192.168.243.128:2182,192.168.243.128:2183 -cmd upconfig -confdir /usr/local/solrcloud/solrhome1/collection1/conf -confname myconf

 13、查看配置文件是否上传成功，先进入zookeeper1的bin文件夹使用以下命令：

[root@bogon bin]# ./zkCli.sh

Connecting to localhost:2181

[zk: localhost:2181(CONNECTED) 0] ls /

[configs, zookeeper]

[zk: localhost:2181(CONNECTED) 1] ls /configs

[myconf]

[zk: localhost:2181(CONNECTED) 2] ls /configs/myconf

[admin-extra.menu-top.html, currency.xml, protwords.txt, mapping-FoldToASCII.txt, _schema_analysis_synonyms_english.json, _rest_managed.json, solrconfig.xml, _schema_analysis_stopwords_english.json, stopwords.txt, lang, spellings.txt, mapping-ISOLatin1Accent.txt, admin-extra.html, xslt, synonyms.txt, scripts.conf, update-script.js, velocity, elevate.xml, admin-extra.menu-bottom.html, clustering, schema.xml]

[zk: localhost:2181(CONNECTED) 3]

如果可以看到solr的配置文件在，那就说明上传成功了。

14、修改每个solrhome下的solr.xml文件，指定当前实例运行的ip地址及端口号8080~8083。

 15、修改每一台solr的tomcat 的 bin目录下catalina.sh文件中加入DzkHost指定zookeeper服务器地址： 

JAVA_OPTS="-DzkHost=192.168.243.128:2181,192.168.243.128:2182,192.168.243.128:2183"

 JAVA_OPTS使用vim编辑器的查找功能找到修改。

16、启动所有的tomcat，访问其中一台tomcat，只有一片集群

17、变成多片集群，在你的浏览器中访问

http://192.168.243.128:8080/solr/admin/collections?action=CREATE&name=collection2&numShards=2&replicationFactor=2

 

18、删除collection1，在浏览器中输入

http://192.168.243.128:8080/solr/admin/collections?action=DELETE&name=collection1，出现success表示成功。

 

三、使用java代码访问solr集群。

import org.apache.solr.client.solrj.SolrQuery;
import org.apache.solr.client.solrj.impl.CloudSolrClient;
import org.apache.solr.client.solrj.response.QueryResponse;
import org.apache.solr.common.SolrDocument;
import org.apache.solr.common.SolrDocumentList;
import org.apache.solr.common.SolrInputDocument;
import org.junit.Test;

public class SolrCloudTest {

    @Test
    public void test1() throws Exception {
        // 使用zookeeper的地址访问
        String zkHost = "192.168.243.128:2181,192.168.243.128:2182,192.168.243.128:2183";
        // 创建集群客户端
        CloudSolrClient cloudSolrClient = new CloudSolrClient.Builder().withZkHost(zkHost).build();
        // 设置默认的索引库
        cloudSolrClient.setDefaultCollection("collection2");
        // 设置document
        SolrInputDocument document = new SolrInputDocument();
        // 创建这个document的结构
        document.addField("id", "test001");
        document.addField("name", "test");
        // 添加内容
        cloudSolrClient.add(document);
        // 提交
        cloudSolrClient.commit();
    }

    @Test
    public void delDocument() throws Exception {
        // 使用zookeeper的地址访问
        String zkHost = "192.168.243.128:2181,192.168.243.128:2182,192.168.243.128:2183";
        
        CloudSolrClient cloudSolrClient = new CloudSolrClient.Builder().withZkHost(zkHost).build();
    
        cloudSolrClient.setDefaultCollection("collection2");
        
        cloudSolrClient.deleteByQuery("*:*");
        
        cloudSolrClient.commit();
        
    }
    
    @Test
    public void query() throws Exception {
        // 使用zookeeper的地址访问
        String zkHost = "192.168.243.128:2181,192.168.243.128:2182,192.168.243.128:2183";
        
        CloudSolrClient cloudSolrClient = new CloudSolrClient.Builder().withZkHost(zkHost).build();
    
        cloudSolrClient.setDefaultCollection("collection2");
        
        SolrQuery query = new SolrQuery();
        
        query.setQuery("*:*");
        
        QueryResponse queryResponse = cloudSolrClient.query(query);
        
        SolrDocumentList list = queryResponse.getResults();
        
        for (SolrDocument solrDocument : list) {
            String name = (String) solrDocument.get("name");
            System.out.println(name);
        }
        
        
        cloudSolrClient.commit();
        
    }

}

运行test1（）后看查看到