大数据之五:ELK安装-创新互联
大数据开发卷五
---Elasticsearch 分布式安装步骤
创新互联建站长期为1000多家客户提供的网站建设服务,团队从业经验10年,关注不同地域、不同群体,并针对不同对象提供差异化的产品和服务;打造开放共赢平台,与合作伙伴共同营造健康的互联网生态环境。为监利企业提供专业的成都做网站、网站建设,监利网站改版等技术服务。拥有十载丰富建站经验和众多成功案例,为您定制开发。考虑需要安装elasticsearch-head作为web展示 所以首先安装nodejs 主要是利用npm
wget https://npm.taobao.org/mirrors/node/v11.0.0/node-v11.0.0.tar.gz
tar –zxvf node-v11.0.0.tar.gz
cd node-v11.0.0
yum install gcc gcc-c++
./configure
Make
Make install
- Node –v
开始安装elasticsearch
1. 安装3台虚拟机
2. 安装jdk
解压 tar –zxvf elasticsearch7.2.2
切换用户 su cm(elasticsearch 不能在root用户下启动)
- 启动后宿主机不能访问处理方案(启动命令:在bin目录下 sh elasticsearch)
a) 修改config/elasticsearch.yml
cluster.name: es-app #集群名称,可以自行修改
node.name: es-1 #节点名称,自行修改
network.host: 192.168.235.133 #主机地址,这里写本机IP
http.port: 9200 #端口
http.cors.enabled: true #设置跨域
http.cors.allow-origin: "*" #设置访问
b) 再启动查看不能启动原因
[1]: max file descriptors [4096] for elasticsearch process is too low, increase to at least [65536]
[2]: max virtual memory areas vm.max_map_count [65530] is too low, increase to at least [262144]
i. 问题 1 系统大文件数太低
修改 vi /etc/security/limits.conf 文件末尾追加
cm soft nofile 65536
cm hard nofile 131072
cm soft nproc 4096
cm hard nproc 4096
ii. 问题 2 虚拟内存太低
修改vi /etc/sysctl.conf文件末尾追加
vm.max_map_count=655360
切换到root权限
sysctl -p
iii. java.nio.file.AccessDeniedException: …/elasticsearch-6.2.2/config/jvm.options
chown 用户名 elasticsearch-6.2.2安装目录路径 -R
- 可以先安装elasticsearch-head监控elasticsearch集群环境
a) tar –zxvf elasticsearch-head-master
b) npm install
c) npm run start
- 配置从节点服务器
cluster.name: es-app #集群名称,可以自行修改
node.name: es-2 #节点名称,自行修改
network.host: 192.168.235.132 #主机地址,这里写本机IP
http.port: 9200 #端口
discovery.zen.ping.unicast.hosts: ["192.168.235.133"]#设置集群的指挥
- 同理配置第3节点
开始安装LogStash
nodejs文件是c编写的,需要先yum install gcc gcc-c++
然后直接make进行编译nodejs文件
另外有需要云服务器可以了解下创新互联scvps.cn,海内外云服务器15元起步,三天无理由+7*72小时售后在线,公司持有idc许可证,提供“云服务器、裸金属服务器、高防服务器、香港服务器、美国服务器、虚拟主机、免备案服务器”等云主机租用服务以及企业上云的综合解决方案,具有“安全稳定、简单易用、服务可用性高、性价比高”等特点与优势,专为企业上云打造定制,能够满足用户丰富、多元化的应用场景需求。
本文名称:大数据之五:ELK安装-创新互联
网站网址:http://pwwzsj.com/article/cedoce.html