在原神里钓鱼,有人竟然用上了深度强化学习,还把它开源了…

孝先
• 阅读 1187

转自:机器之心

还愁在《原神》里钓不到鱼吗?这有一份迟到的提瓦特钓鱼指南。

在游戏圈,你可以没有玩过,但一定听过《原神》。

虽然这是一款口碑两极分化的游戏,但不得不承认《原神》是当前最为火热的游戏之一。

特别是在国外,原神可以说是火的一塌糊涂。

就在今年 9 月,这款从开放公测起便屡次登顶国内外讨论热度和手游吸金榜第一的开放世界冒险游戏更新了版本,添加 / 丰富了地图,并且上线了一款小游戏——钓鱼。游戏中多个水域都有钓鱼点,不同的位置可以钓不同的鱼。

尽管是再普通不过的玩法,还是引得玩家流连。一般来说,钓鱼一共分三个步骤:甩杆→等待鱼儿上钩→提竿。其中所涉及的原理需要一定数字图像处理与机器学习基础。模型分为鱼群定位与识别和拉杆 (和鱼博弈) 两个部分。

很多玩家都在寻找钓鱼攻略,你还在愁在《原神》里钓不到鱼吗?今天我们为你送上这份迟到的提瓦特钓鱼指南。

这份钓鱼指南可以说是完全解放双手,不需要任何操作,只需要启动程序就能完成。上线短短几天,收获 1600 + 星。

在原神里钓鱼,有人竟然用上了深度强化学习,还把它开源了…

GitHub 地址:

https://github.com/7eu7d7/gen...

感兴趣的小伙伴也可以去 B 站观看视频,上线不到三天,超过 44 万次播放量。这满屏的弹幕,不禁让人直呼离谱。

已经有网友开始上手了,并评论道:已经在部署了,连夜下载了 anaconda。

在原神里钓鱼,有人竟然用上了深度强化学习,还把它开源了…

B 站地址:

https://www.bilibili.com/video/BV1964y1b7vV?spm_id_from=333.905.b_7570566964656f.3

项目介绍

原神自动钓鱼 AI 由两部分模型组成:YOLOX、DQN。此外,该项目还用到了迁移学习,半监督学习来进行训练。模型也包含了一些使用 opencv 等传统数字图像处理方法实现的不可学习部分。

  • YOLOX 用于鱼的定位和类型的识别以及鱼竿落点的定位;
  • DQN 用于自适应控制钓鱼过程的点击,让力度落在最佳区域内。

安装

该项目是在 python 运行环境中使用的,需要先安装 python,这里推荐使用 anaconda。

配置环境:打开 anaconda prompt(命令行界面),创建新的 python 环境并激活(推荐 python3.7 或以下版本):

conda create -n ysfish python=3.6
conda activate ysfish

下载工程代码:使用 git 下载,或直接在 github 网页端下载后直接解压:

git clone https://github.com/7eu7d7/genshin_auto_fish.git

依赖库安装:切换命令行到本工程所在目录:

cd genshin_auto_fish

执行以下命令安装依赖:

python -m pip install -U pip
python requirements.py

如果要使用显卡进行加速需要安装 CUDA 和 cudnn, 安装后无视上面的命令用下面这条安装 gpu 版:

pip install -U pip
python requirements.py --cuda [cuda 版本]
# 例如安装的 CUDA11.x
python requirements.py --cuda 110

安装 yolox:切换命令行到本工程所在目录,执行以下命令安装 yolox:

python setup.py develop

预训练权重下载:下载预训练权重 (.pth 文件),yolox_tiny.pth 下载后将权重文件放在 工程目录 / weights 下。

YOLOX 训练工作流程:YOLOX 部分用半监督学习打标签。标注少量样本后训练模型生成其余样本伪标签再人工修正,不断迭代以提高精度。样本量较少所以使用迁移学习,在 COCO 预训练的模型上进行 fine-tuning。

将 yolox/exp/yolox_tiny_fish.py 中的 self.data_dir 的值改为解压后 2 个文件夹所在的路径。

训练代码:

python yolox_tools/train.py -f yolox/exp/yolox_tiny_fish.py -d 1 -b 8 --fp16 -o -c weights/yolox

DQN 训练工作流程:控制力度使用强化学习模型 DQN 进行训练。两次进度的差值作为 reward 为模型提供学习方向。模型与环境间交互式学习。

直接在原神内训练耗时较长,首先你需要制作一个仿真环境,大概模拟钓鱼力度控制操作。在仿真环境内预训练一个模型。随后将这一模型迁移至原神内,实现域间迁移。

仿真环境预训练代码:

python train_sim.py

原神游戏内训练:

python train.py

运行

以上准备就绪后,就可以运行钓鱼 AI,注意命令行窗口一定要以管理员权限启动。

显卡加速:

python fishing.py image -f yolox/exp/yolox_tiny_fish.py -c weights/best_tiny3.pth --conf 0.25 --nms 0.45 --tsize 640 --device gpu

cpu 运行:

python fishing.py image -f yolox/exp/yolox_tiny_fish.py -c weights/best_tiny3.pth --conf 0.25 --nms 0.45 --tsize 640 --device cpu

运行后出现 init ok 后按 r 键开始钓鱼,原神需要全屏。出于性能考虑检测框不会实时显示,处理运算后台进行。

更多实现细节,读者可参考原项目。

https://github.com/7eu7d7/gen...

开源前哨 日常分享热门、有趣和实用的开源项目。参与维护 10万+ Star 的开源技术资源库,包括:Python、Java、C/C++、Go、JS、CSS、Node.js、PHP、.NET 等。
点赞
收藏
评论区
推荐文章
手把手教你在夜神、雷电上搭frida+Xposed
一、目标李老板:奋飞呀,你天天手把手教这样不好吧?奋飞:老板你想多了,就咱们行业这种男女比例,有啥不好的?二、步骤夜神Frida先adb连上夜神,看看它是嘛系统fenfeiMac:Desktopff$adbconnect127.0.0.1:62001alreadyconnectedto127.0.0.1:62001fenfeiMac:D
晴雯 晴雯
2年前
苹果Mac电脑玩原神/金铲铲/王者荣耀小工具PlayCover
PlayCoverforMac是一款非常有趣的Mac应用程序,它可以把iphone手机上的IOS应用装进Mac电脑中。PlayCover并且允许您使用键盘、鼠标控制IOS应用,Mac直接化身游戏本,立马装原神、绝地求生、王者荣耀等热门游戏,直接开玩。免费安
Stella981 Stella981
4年前
Cocos Creator基础教程(9)—优化代码编辑器
CocosCreator游戏开发主要是使用JavaScript语言,这里向大家推荐VisualStudioCode和Webstorm两款JavaScript神级编辑器。这两款编辑器的安装都很简单,这里主要介绍在CocosCreator项目中如何调整编辑器配置,以提升开发效率。1\.排除干扰文件我们知道CocosCre
Stella981 Stella981
4年前
Android Studio 于夜神模拟器进行连接
本文使用夜神模拟器自带的nox\_adb.exe在AndroidStudio中连接夜神模拟器。_1.在夜神模拟器的安装路径下,在bin文件夹下有个nox\_adb.exe文件,复制黄色框路径如图:_!(https://oscimg.oschina.net/oscnet/32f257df01618a19691c1c4439175f7801e
Stella981 Stella981
4年前
ES中删除索引的mapping字段时应该考虑的点
1.创建新索引2.新索引创建新mapping3.原索引导出数据到新索引4.新索引创建原索引一致的别名5.删除原索引针对于第四步:这个就要用到索引别名了,如果你最开始建索引的时候没有考虑设计索引别名,那就杯具了。你可以把索引的名称设置成name\_v1 别名设置为name,然后代码里面访问搜索的时候连接的其实是别名na
撼地神牛 撼地神牛
1年前
Vue3 + TS + Leafletjs 打造企业级原神大地图
Vue3TSLeafletjs打造企业级原神大地图Lefalet是一个为建设移动设备友好的互动地图,而开发的现代的、开源的JavaScript库。它是由VladimirAgafonkin带领一个专业贡献者团队开发,虽然代码仅有31KB,但它具有开发人员
ByteSeeker ByteSeeker
2个月前
暗黑破坏神风格的ARPG:《泰坦之旅》手机游戏
《泰坦之旅》是一款经典动作角色扮演(ARPG)手游,背景设定在古希腊、埃及、东方等神话交织的古代世界。玩家将扮演一位英勇的冒险者,踏上阻止泰坦巨神毁灭世界的史诗旅程。游戏以丰富的神话故事、广阔的世界观和深度的角色养成系统著称,是手机上不可多得的ARPG佳作
凿壁偷光 凿壁偷光
2年前
暗黑2:毁灭之王 中文单机移植版
暗黑破坏神2mac破解版是美国暴雪娱乐研发的一款动作类角色扮演游戏,游戏中玩家创建属于自己的角色,在一片片暗黑大地上奔跑、杀敌、寻宝、成长,最终打败统治各个大陆的黑暗势力,拯救游戏中的各个种族。游戏中的技能树、物品装备、甚至喝药水缓慢恢复的设定都是前所未有的,套装概念、宝石、符文等装备强化方式几乎所有的MMORPG都在使用。暗黑破坏神2mac破解版提供完美存档,同时支持联网版本。
流浪剑客 流浪剑客
2年前
全DLC终极版:神界:原罪2 支持M1
mac神界:原罪是一款具有单人模式和多人模式的角色扮演类游戏。喜欢RPG游戏的小伙伴,相信你一点不会讨厌神界原罪的,神界原罪破解版下载可谓是RPG类型游戏在中首屈一指的存在!神界原罪2mac自上线起,就广受玩家的喜爱,神界:原罪2forMac游戏自由度非常
夏灵儿 夏灵儿
2年前
暗黑破坏神2 Diablo II for Mac(毁灭之王)中文
《暗黑破坏神2》是美国暴雪娱乐继《暗黑破坏神》之后,于2000年上市的一款动作类角色扮演游戏。玩家创建属于自己的角色,在一片片暗黑大地上奔跑、杀敌、寻宝、成长,最终成为各自种族里的Master。游戏提供连线功能,除了惯有的Ipx,MODEM,以及Direc
赵颜 赵颜
2年前
高精度原边控制电路D3820,CC/CV精度±5%以内,可作为10W以下小功率、低待机功耗的电源替代
D3820是一款高精度原边控制离线式PWM功率开关。特点1、全电压范围CC/CV精度保持在±5%以内2、用原边控制,无需TL431和光耦3、欠压锁定(UVLO)及自动重启4、驱动BJT5、内置前沿消隐(LEB)6、逐周期限流模式7、输出线压降补偿8、内置原
孝先
孝先
Lv1
伤见路旁杨柳春,一重折尽一重新。今年还折去年处,不送去年离别人。
文章
5
粉丝
0
获赞
0