Linux各项目环境部署记录(换服务器部署脚本整理)

目录

• 一. 前言
• 二. 环境篇
• 2.1 yum 安装
• 2.2 Java 环境准备
• 2.3 docker 安装
• 2.4 docker compose 安装
• 2.5 防火墙配置
• 2.6 其他小组件
• 三. 组件安装
• 3.1 安装 RocketMQ (docker compose)
• 3.2 安装 Redis
• 3.3 安装 mysql
• 3.4 安装 ES
• 3.5 安装 Nacos
• 补充
• docker compose 命令
• docker 常用命令
• 总结

一. 前言

github :  github.com/black-ant

CASE 备份 :  gitee.com/antblack/ca…

每次换便宜的服务器都要导致环境重新部署一遍，十分麻烦。

于是把每次部署的脚本整理了一下，方便在服务器上快速进行部署。

基于 Centos~~~

二. 环境篇

2.1 yum 安装

通常情况下 yum 是默认集成的，如果出现 yum 未集成的情况，按照如下步骤进行安装 ：

// S1 : 查询 yum 版本（判断是否安装）
sudo yum version
// S2 : 安装 epel-release软件仓库
sudo yum install epel-release
// S3 : 安装 yum
sudo yum install yum
// S4 : 更新 yum
sudo yum update
// 其他问题 ： 
failovermethod=priority in /etc/yum.repos.d/CentOS-Epel.repo; 
Configuration: OptionBinding with id "failovermethod" does not exist
- 1： sudo vim /etc/yum.repos.d/CentOS-Epel.repo
- 2： 注释掉 # failovermethod=priority
- 3： sudo yum update 更新系统
Failed to download metadata for repo 'appstream': 
Cannot prepare internal mirrorlist: No URLs in mirrorlist
- 由于 centOS 停止维护带来的问题，需要修改 mirro地址
- 1： 进入 repo 管理 cd /etc/yum.repos.d/
- 2： 修改全局地址 
    - sed -i 's/mirrorlist/#mirrorlist/g' /etc/yum.repos.d/CentOS-*
    - sed -i 's|#baseurl=http://mirror.centos.org|baseurl=http://vault.centos.org|g' /etc/yum.repos.d/CentOS-*
- 3：更新缓存 ： yum makecache
- 4：更新 yum : yum update -y

2.2 Java 环境准备

Yum 版本

// S1 : 查询 Java 支持的版本
yum search java|grep jdk
yum search java-1.8.0-openjdk
// S2 : 安装 JDK 
sudo yum install java-1.8.0-openjdk-devel.x86_64
// S3 : 查询 JDK 安装情况
java -version

2.3 Docker 安装

// 查看是否已安装docker列表
yum list installed | grep docker
// 安装必要的软件包
sudo yum install -y yum-utils device-mapper-persistent-data lvm2
// 添加 docker 源 (选择合适的源，以下选其一即可，选错可能会 timeout)
sudo yum-config-manager --add-repo https://download.docker.com/linux/centos/docker-ce.repo
sudo yum-config-manager --add-repo=http://mirrors.tencent.com/docker-ce/linux/centos/docker-ce.repo
sudo yum-config-manager --add-repo http://mirrors.aliyun.com/docker-ce/linux/centos/docker-ce.repo 
// 安装docker    
sudo yum install docker-ce
// 启动docker
sudo systemctl start docker 
sudo systemctl enable docker
sudo systemctl restart docker
// 查看docker服务状态
systemctl status d
2.4 docker compose 安装
// 安装 docker Compose
sudo curl -L "https://github.com/docker/compose/releases/download/v2.2.2/docker-compose-$(uname -s)-$(uname -m)" -o /usr/local/bin/docker-compose
// 准备处理文件夹
sudo chmod +x /usr/local/bin/docker-compose

但是,众所周知的原因，Github 访问不是很快
// 适用 pip3 进行安装
pip3 install -U pip setuptools
pip3 install docker-compose
// 查看 docker compose 版本
docker-compose --version

2.5 防火墙配置
不是所有的服务器都需要配置这个，腾讯云的默认好像就是关闭的，阿里轻量好像要配置

# 查看firewalld的运行状态
# 默认防火墙 是关闭的 (not running)
firewall-cmd --state
# 启动防火墙
# 没有任何提示 则启动成功
systemctl start firewalld
# 添加规则 (--permanent 代表重启也生效) 
# 提示 success 则成功   
firewall-cmd --permanent --zone=public --add-port=8848/tcp         
firewall-cmd --permanent --zone=public --add-port=443/tcp    
firewall-cmd --permanent --zone=public --add-port=3336/tcp   
firewall-cmd --permanent --zone=public --add-port=5601/tcp   
firewall-cmd --permanent --zone=public --add-port=8443/tcp   
// 查看防火墙规则
# 重新加载防火墙配置
# 提示 success 则成功
firewall-cmd --reload
# 至此结束
# 查看所有打开的端口
firewall-cmd --zone=public --list-ports
firewall-cmd --list-all  
# 关闭防火墙
systemctl stop firewalld

2.6 其他小组件
// 安装 curl 
yum install curl
// git 
yum -y install git
ssh-keygen -t rsa -C "test123123@qq.com"

三. 组件安装
3.1 安装 RocketMQ (docker compose)
// 1. 进入一个新路径 （我这里适用 home）
mkdir /home/rocket
// 2. 创建 docker compose
mkdir rocketmq-docker 
cd rocketmq-docker 
touch docker-compose.yml
// 3. 编辑 docker-compose.yml
version: '3'
services:
  namesrv:
    image: rocketmqinc/rocketmq:latest
    container_name: rocketmq-namesrv
    command: sh mqnamesrv
    ports:
      - "9876:9876"
    volumes:
      - ./data/namesrv/logs:/root/logs
  broker:
    image: rocketmqinc/rocketmq:latest
    container_name: rocketmq-broker
    command: sh mqbroker -c /rocketmq/broker.conf
    depends_on:
      - namesrv
    ports:
      - "10909:10909"
      - "10911:10911"
      - "10001:10001"
      - "10002:10002"
      - "8080:8080"
    environment:
      NAMESRV_ADDR: namesrv:9876
    volumes:
      - ./data/broker/logs:/root/logs
      - ./broker.conf:/rocketmq/broker.conf
// 4. 创建 broker.conf
brokerClusterName = DefaultCluster
brokerName = broker-a
brokerId = 0
deleteWhen = 04
fileReservedTime = 48
brokerRole = ASYNC_MASTER
flushDiskType = ASYNC_FLUSH
listenPort = 10911
storePathRootDir=/root/store
storePathCommitLog=/root/store/commitlog
autoCreateTopicEnable=true
brokerIP1=10.10.101.80
// 5. 运行 docker 
docker-compose up -d
// 查询整体运行情况
docker ps
// 发送消息

补充要点 ：
// 以上用的 4.8.0 不一定能下载到，可以查询支持的版本》 去 docker hub 镜像查询
https://hub.docker.com/r/rocketmqinc/rocketmq/tags
// broker.conf 中需要配置你的宿主机IP，否则 nameserver 拿到的会有问题

安装 docker console
wget https://archive.apache.org/dist/rocketmq/4.8.0/rocketmq-all-4.8.0-bin-release.zip
unzip rocketmq-all-4.8.0-bin-release.zip
cd rocketmq-all-4.8.0-bin-release/bin
// 使用 
sh mqadmin sendMessage -n localhost:9876 -t testTopic -p "Hello, RocketMQ!"

安装 RocketMQ Console
// 下载后配置访问地址，别忘了 brokerIP1 里面也要配置地址
https://github.com/apache/rocketmq-dashboard.git
// 注意添加 入站规则
TCP:5601,9876,10909,10911,10001,10002 

3.2 安装 Redis
// S1 : 安装 Redis
yum install redis
// S2 : 允许远程访问
vi /etc/redis.conf
bind 127.0.0.1  -> 加上 # 注释
protected-mode yes 改为 protected-mode no 
//  S3 : 启动redis
service redis start
//------------------------
//  停止redis
service redis stop
//  查看redis运行状态
service redis status
//  查看redis进程
ps -ef | grep redis

3.3 安装 MySQL
图方便短期用直接选择 Docker ，长期用慎选，镜像没选好很容易变肉鸡。
// S1 : 拉取镜像
docker pull mysql
// S2 : 运行容器 （密码适当复杂点）
docker run -d --name antMySQL -e MYSQL_ROOT_PASSWORD=test9786366 -p 3306:3306 mysql
// S3 : 查看运行情况
docker ps
docker exec -it antMySQL bash
mysql -uroot -ptest9786366

3.4 安装 ES
S1 : 准备 docker-compose.yml
version: '3.2'
services:
  elasticsearch:
    image: docker.elastic.co/elasticsearch/elasticsearch:7.12.0
    container_name: elasticsearch
    environment:
      - 'cluster.name=elasticsearch'
      - 'discovery.type=single-node'
      - 'ES_JAVA_OPTS=-Xms1024m -Xmx1024m'
    volumes:
      - esdata:/usr/share/elasticsearch/data
    ports:
      - '9200:9200'
      - '
S2 : 准备 kibana.yml
# Default Kibana configuration for docker target
server.host: '0.0.0.0'
elasticsearch.hosts: ['http://11.22.33.111:9200']
monitoring.ui.container.elasticsearch.enabled: true
S3 : 启动
docker-compose --compatibility up -d
// 这里我是简化版，没用 logstash，想要还可以选择加上更多的配置项
https://blog.51cto.com/u_14129797/5694302

3.5 安装 Nacos
这里还是使用 docker 安装，包含各种监控插件 @参考地址
// S1 : 准备安装目录
mkdir nacos-docker 
cd nacos-docker 
touch docker-compose.yml
// S2 : 配置 docker-compose

找了很多案例，这一个应该是最完整的，提供了 prometheus 和 grafana. 不过里面有些东西已经找不到了，这里补充下 ：
@ docker-compose部署nacos单机版(简洁优化版) 
version: '3'
services:
  nacos:
    image: nacos/nacos-server:2.0.4
    container_name: nacos
    restart: always
    environment:
      PREFER_HOST_MODE: hostname #如果支持主机名可以使用hostname,否则使用ip，默认也是ip
      SPRING_DATASOURCE_PLATFORM: mysql #数据源平台 仅支持mysql或不保存empty
      MODE: standalone
      MYSQL_SERVICE_HOST: 127.0.0.1
      MYSQL_SERVICE_DB_NAME: nacos
      MYSQL_SERVICE_PORT: 3306
      MYSQL_SERVICE_USER: root
      MYSQL_SERVICE_PASSWORD: root
      NACOS_APPLICATION_PORT: 8848
      JVM_XMS: 512m
      JVM_MMS: 320m
    volumes:
      - ./docker/nacos/standalone-logs/:/home/nacos/logs
      - ./docker/nacos/plugins/:/home/nacos/plugins
      - ./docker/nacos/conf/application.properties:/home/nacos-docker/application.properties
    ports:
      - "8848:8848"
  prometheus:
    container_name: prometheus
    image: prom/prometheus:latest
    volumes:
      - ./docker/nacos/prometheus/prometheus-standalone.yaml:/etc/prometheus/prometheus.yml
    ports:
      - "9090:9090"
    depends_on:
      - nacos
    restart: on-failure
  grafana:
    container_name: grafana
    image: grafana/grafana:latest
    ports:
      - 3000:3000
    restart: on-failure

这里还可以编排mysql进去,已经有数据库了，这里就不要了
不需要 prometheus 和 grafana 只取 nacos 即可
application.properties 我给的空的
prometheus-standalone.yaml
global:
  scrape_interval:     15s #拉取 targets 的默认时间间隔
  #scrape_timeout: 10s #拉取一个 target 的超时时间。
  evaLuation_interval: 15s #执行 rules 的时间间隔。
  #external_labels: #额外的属性，会添加到拉取的数据并存到数据库中。
# Alertmanager configuration
alerting:
  alertmanagers:
    - static_configs:
        - targets:
          # - alertmanager:9093
rule_files:
# - "first_rules.yml"
# - "second_rules.yml"
# A scrape configuration containing exactly one endpoint to scrape:
# Here it's Prometheus itself.
scrape_configs:
  # The job name is added as a label `job=<job_name>` to any timeseries scraped from this config.
  - job_name: 'prometheus'
    scheme: http
    # metrics_path defaults to '/metrics'
    # scheme defaults to 'http'.
    static_configs: #因为使用了网桥所以targets可以直接使用容器名而不用ip
      - targets: ['prometheus:9090']
  - job_name: 'nacos'
    metrics_path: '/nacos/monitor/prometheus'
    static_configs:
      - targets: ['nacos:8848']
除了 2.0.4 还有很多其他的版本 nacos/nacos-server Tags | Docker Hub ， 这里我对这个版本比较熟悉
// S3 : 启动容器
docker-compose --compatibility up -d
// S4 : 查看结果
docker-compose ps
docker-compose stop

补充
docker compose 命令
docker-compose up: 启动应用程序（如果不存在，则构建并启动它）
docker-compose down: 停止并删除应用程序的容器
docker-compose ps: 显示当前正在运行的应用程序的容器状态
docker-compose logs: 显示应用程序的容器日志
docker-compose build: 构建应用程序的镜像
docker-compose restart: 重启应用程序的容器
docker-compose exec: 在容器中执行命令
docker-compose stop: 停止应用程序的容器
docker-compose rm: 删除已停止的应用程序的容器

docker 常用命令
// 查找镜像
docker search nacos

总结
基本上常用的就在这里了，其他的以后碰到了再补充进去.
其他比较复杂的就是 jenkins ，K8S 这些，安装可能就不是走 yum了，会稍微复杂一些。有时间单章来发，更多关于Linux项目部署的资料请关注我们其它相关文章！