反爬虫准备

用import project的方式导入项目

保证idea的maven配置正常：

　　File-->>setting-->>Build,Execution,Deployment-->>Build Tools -->>Maven，

　　Maven home directory: C:/apache-maven-3.25

配置tomcat

　　在plugins中安装tomcat，再把项目部署到tomcat中

 将项目的.war包部署到tomcat中

 然后在tomcat下，就可以看到此目录

redis:

　　是一个开源、高效的Key-value非关系型数据库。

　　开启redis集群./start-all.sh   查看进程是否启动ps -ef|grep red

　　每次开启集群时，要把

　　 这两个文件删除，不然集群开启不成功，

　　然后修改redis-cluster/redis01(02,03....)/redis.conf中的

　　

　　在项目中的src/main/resources下，修改

　　

 openResty

　　yum install -y readline-devel pcre-devel openssl-devel perl gcc

　　第一步：解压

　　第二步：./configure --prefix=/opt/apps/openresty --with-http_stub_status_module

　　第三步：make && make install　　

 　　启动：cd  openresty/nginx/sbin
　　　　　　./nginx

lua

　　idea中下载

　　

 　　如果遇到这种问题，说明没有配置

　　

 　　然后要进行配置 

　　

　　

 　　里面的lua53.exe是lua执行脚本，在自己电脑中找，

　　

hdfs：分布式文件系统

　　master:9000

　　hdfs dfs -mkdir -p /csair/data/rule-black-list/

　　[hadoop@master ~]$  hdfs dfs -mkdir -p /csair/data/rule-computed/         递归创建文件

　　hdfs dfs -ls /      查看hdfs中的文件目录

[hadoop@master conf]$ hdfs dfs -chown -R hadoop /