记录一次自己的服务器迁移过程

郭奕
• 阅读 199

记录一次自己的服务器迁移过程

前言

最近阿里云发动了史上最大力度价格战,自称平均降价超20%。

而我,作为一只哪家便宜,就买哪家的三姓家奴。趁着降价,悻悻然又买了一台阿里云 ECS ,计划用来承接自己一台快过期的 华为云 HECS 的服务。

幸运的是,我这个服务里面,所有的组件早已容器化,业务镜像也早已经使用了私有镜像仓库,所以迁移起来还是很容易的。

让我们立刻开始吧!

目前项目的部署方式

目前这个项目,主要是由多个 Github 私有仓库组成,里面主要有多个后端业务仓库和 1 个部署文件仓库。

其中部署文件仓库,会在目标服务器上进行拉取,并进行部署。同时所有的数据卷,以及日志等等文件,都会写在这个目录内。而那些后端业务仓库,里面实际上就都是一些业务逻辑啥的,CRUD数据库,搞搞 Redis 罢了。

值得一提的是,这些业务仓库都使用了 Github Action 来自动构建镜像,并推送到私有镜像仓库。

其中,我使用 git sha 作为镜像的 Tag,同时在推送完成之后,它们都会触发部署文件仓库的 Action,去修改部署时的环境变量文件。

这样只要每次在服务器上 git pull,拿到的就都是最新版本的镜像了(还能通过备份 tag 来做回滚)。

大概的流程如下图所示:

记录一次自己的服务器迁移过程

另外值得一提的是,之前在华为云部署的时候,本来能好好的拉取 Github 的,后来由于网络原因,一段时间后莫名其妙不能了。

后来我就把那个 部署文件仓库,同时同步到我的 gitee 私有仓库,这样就不会出现拉取失败的问题了。

开始迁移

提前准备

首先我们购买好一台 阿里云 ECS,选择你最熟悉最喜欢的系统镜像,设置你的专有网络和交换机,然后配置一下你的登陆凭证,下载私钥,付钱即可。

这里我把专有网络,设置在了我的函数计算 FC 网络内,这样以后部署 serverless 函数,就能在内网里,调用服务器资源了。

然后到 ECS 控制台进行远程登录,这里我发现阿里云居然有 Mac arm64 的客户端可以下载,而华为云的 CodeArt 只支持 Win,于是就下载安装了客户端:

记录一次自己的服务器迁移过程

安装好了之后,直接通过 ssh 链接服务器,用起来还是挺方便的,还能做文件的管理。

设置安全组

然后 ssh 链接服务器,发现连不上,原来是服务器所在的安全组,并没有把端口放出来。

好的,和往常一样,打开 TCP22/80/443 端口,再打开 UDP500/4500 端口作为 ipsec 协议关联端口,授权对象就先设置成所有服务器吧。

于是 ssh 就顺利连上服务器了。

开始初始化

登录到服务器之后,首先安装 gitdocker-ce

# rpm
sudo dnf install git-all
# deb
sudo apt install git-all

安装好了之后,设置一下:

git config --global credential.helper store

然后直接使用 HTTPS 的方式 clone 我的部署私有仓库。不使用 SSH 的原因在于我比较懒去生成 SSH 密钥了。

安装 docker

由于我自己使用的都是 Ubuntu,所以安装方式也简单:

curl -fsSL https://get.docker.com | bash -s docker --mirror Aliyun

然后安装完成之后,根据自己的需求更换一下 docker 镜像源:

echo '{
    "registry-mirrors": [
        "https://n2mk220u.mirror.aliyuncs.com",
        "https://docker.mirrors.ustc.edu.cn",
        "https://registry.docker-cn.com"
    ]
}' > /etc/docker/daemon.json

然后启动守护进程即可。

sudo systemctl start docker

尝试部署

我直接执行命令:

docker compose up -d --remove-orphans

然后失败了,发现是因为 docker-compose.yml 里包含了一些私有镜像,要先进行登录,才能拉取。

docker login --username=icebreaker registry.cn-hangzhou.aliyuncs.com

登录一下搞定,然后项目就可以顺利启动了。

检查一个预设的 health check 接口,运转良好,就是报很多数据库错误罢了。

这也正常,毕竟数据库那些表啊结构,数据啥的都没同步过来,报个错很正常。

数据库迁移

我使用的是 postgresql,备份还原起来很容易的。

大体流程就是:

pg_dump -Fc postgres > /var/lib/postgresql/data/db$(date +%Y%m%d%H%M%S).dump

pg_restore -d postgres dbxxxxxx.dump

实际到正式环境,区别也不过是跑到容器里面,执行一下命令罢了。

涉及到的文件转移也可以使用 scp 来解决,所以还算是复杂一点点。

不过,其实我早就写好了 sh 脚本,同时还有一个 cron job 天天在那里备份数据库,所以那就更加简单了。

我们直接手动触发,执行一下 job ,把新备份数据库文件下载下来,然后通过 scp 上传到阿里云服务器即可。不过这里我也偷懒了,我直接通过阿里云客户端去上传了。

记录一次自己的服务器迁移过程

然后上传到数据库容器的数据卷里面,执行一下 pg_restore 命令,恢复到指定的数据库,完成之后,重起一下容器就大功告成了。

最后就去做一些数据校验,健康检查即可。

结尾

这只是我自己的一个个人项目,所以用到的技术属于什么用的舒服,什么可以偷懒,就用什么,当然你有更好更方便的方式欢迎提出来,我们一起相互交流优化运维部署方式。

一些问题

为什么中间没有配置 https?

因为我使用的是 Caddyhttps 证书是自动申请的,推荐阅读 为什么个人项目我更推荐使用Caddy?

关于数据库备份

实际上更加稳妥的做法是,直接备份整个 pg 的容器数据卷,没有这样做的原因是我比较懒,也没啥重要的数据。

另外其实也可以使用 pgadmin 这种工具来备份和恢复数据库,但是对数据库文件大小有限制,最大的大小只有 50MB

点赞
收藏
评论区
推荐文章
Wesley13 Wesley13
3年前
MySQL部分从库上面因为大量的临时表tmp_table造成慢查询
背景描述Time:20190124T00:08:14.70572408:00User@Host:@Id:Schema:sentrymetaLast_errno:0Killed:0Query_time:0.315758Lock_
美凌格栋栋酱 美凌格栋栋酱
6个月前
Oracle 分组与拼接字符串同时使用
SELECTT.,ROWNUMIDFROM(SELECTT.EMPLID,T.NAME,T.BU,T.REALDEPART,T.FORMATDATE,SUM(T.S0)S0,MAX(UPDATETIME)CREATETIME,LISTAGG(TOCHAR(
LosAngel LosAngel
4年前
golang包循环引用的几种解决方案
golang包循环引用的几种解决方案发表于2020年11月2日2020年11月3日(https://libuba.com/2020/11/02/golang%e5%8c%85%e5%be%aa%e7%8e%af%e5%bc%95%e7%94%a8%e7%9a%84%e5%87%a0%e7%a7%8d%e8%a7%
小果果学长 小果果学长
4年前
【编译原理】语义分析S属性定义的自下而上计算
目录一、实验目的(about:blank%E4%B8%80%E3%80%81%E5%AE%9E%E9%AA%8C%E7%9B%AE%E7%9A%84)二、实验任务(about:blank%E4%BA%8C%E3%80%81%E5%AE%9E%E9%AA%8C%E4%BB%BB%E5%8A%A1)三、实验原理(about:blank%E
Stella981 Stella981
3年前
Git 克隆远程仓库到本地
Git克隆远程仓库到本地参考$gitclonehelphttps://gitscm.com/book/zh/v2/Git%E5%9F%BA%E7%A1%80%E8%8E%B7%E5%8F%96Git%E4%BB%93%E5%BA%93当前目录/e/mozq/0
Wesley13 Wesley13
3年前
Java 入门进阶
Java入门进阶發表於20150416http://xielong.me/2015/04/16/%E6%9C%8D%E5%8A%A1%E7%AB%AF%E5%B7%A5%E7%A8%8B%E5%B8%88%E5%85%A5%E9%97%A8%E4%B8%8E%E8%BF%9B%E9%98%B6Java%E7%89%88/
Wesley13 Wesley13
3年前
Oracle 数据库勒索病毒 RushQL 处理办法
Oracle数据库勒索病毒RushQL处理办法办法来自Oracle官方:https://blogs.oracle.com/cnsupport\_news/%E5%AF%B9%E6%95%B0%E6%8D%AE%E5%BA%93%E7%9A%84%E2%80%9C%E6%AF%94%E7%89%B9%E5%B8%81%E6%94%BB%E5%8
Wesley13 Wesley13
3年前
Java三大特性
_Java面向对象编程三大特性:封装继承多态(https://snailclimb.gitee.io/javaguide//docs/java/Java%E5%9F%BA%E7%A1%80%E7%9F%A5%E8%AF%86?id_11java%e9%9d%a2%e5%90%91%e5%af%b9%e8%b1%a1%e7%bc%96%e
Stella981 Stella981
3年前
Kafka 是怎么存储的?为什么速度那么快?
文章收录地址:JavaBang(https://gitee.com/iByteCoding/JavaBang/tree/master/%E7%B2%BE%E9%80%89%E6%8A%80%E6%9C%AF%E4%B8%93%E6%A0%8F/Kafka%E6%A0%B8%E5%BF%83%E5%8E%9F%E7%90%86) 专注于系统架构、
Easter79 Easter79
3年前
SVN基本命令
SVN基本命令从远程检出代码svncohttp://路径(目录或文件的全路径)(https://www.oschina.net/action/GoToLink?urlhttp%3A%2F%2F%E8%B7%AF%E5%BE%84%28%E7%9B%AE%E5%BD%95%E6%88%96%E6%96%87%E4%
Wesley13 Wesley13
3年前
Eclipse插件开发调试篇
介绍本文介绍如何定制一种适合自己项目调试的方式。扩展点查看原文:http://surenpi.com/2015/08/13/eclipse%e6%8f%92%e4%bb%b6%e5%bc%80%e5%8f%91%e8%b0%83%e8%af%95%e7%af%87/(https://www.oschina.net/