星露谷物语钓鱼mod怎么用
现代化农场指日可待。钓鱼、除草、砍树、种田,这是大多数玩家在《星露谷物语》里的一天。但到了游戏后期,工作量将会成倍增加,曾经的田园牧歌生活不再,你正在被忙碌的工作逼成一台全自动务农……接下来具体说说星露谷物语怎么钓鱼
一、星露谷物语怎么钓鱼 新手钓鱼技巧
星露谷物语怎么钓鱼?钓鱼有什么技巧?在星露谷物语有个特别有趣的功能就是钓鱼,很多休闲玩家都喜欢钓鱼,但经常遇到一些问题,下面小编就为大家带来星露谷物语新手钓鱼实用技巧,一起来看看吧。
星露谷物语新手开局钓鱼技巧
1.因为人家是卡钓鱼BUG,所以萌新不要因此丧失信心。
2.莫贪心,不要刚开坑直接去高级鱼点钓鱼,老老实实河里掉提升技能和鱼竿。
3.多练练钓鱼,其实并不难而且还很有趣(不要用MOD了)。
钓鱼关键点手速,慢慢悠悠可不行! 刚开始鱼比较稳快速快速快速快速快速快速点击左键!尽量在鱼儿活跃前刷满绿掉起来,适用于低难度鱼。
利用日志卡BUG,相信老司机都知道!就怕萌新一看别人一天掉到几十条,再看看自己瞬间没信心,然后开MOD去了,这个千万要不得,慢慢体验多掉掉,毕竟熟能生巧。
说了这么多,只想告诉那些看了攻略,自己掉了几次放弃的人!!!!你们并不是手残党
以上就是本次小编为大家带来的星露谷物语新手开局钓鱼小技巧心得,希望能多新手玩家有所帮助,更多星露谷物语攻略请关注itmo爱萌游戏网。
二、通过强化学习和官方API制作《星露谷物语》的自动钓鱼mod
这是一个我已经断断续续地研究了很长一段时间的项目。在此项目之前我从未尝试过修改游戏,也从未成功训练过“真正的”强化学习代理(智能体)。所以这个项目挑战是:解决钓鱼这个问题的“状态空间”是什么。当使用一些简单的 RL 框架进行编码时,框架本身可以为我们提供代理、环境和奖励,我们不必考虑问题的建模部分。但是在游戏中,必须考虑模型将读取每一帧的状态以及模型将提供给游戏的输入,然后相应地收集合适的奖励,此外还必须确保模型在游戏中具有正确的视角(它只能看到玩家看到的东西),否则它可能只是学会利用错误或者根本不收敛。
我的目标是编写一个能读取钓鱼小游戏状态并完美玩游戏的代理。目标的结果是使用官方 Stardew Valley 的 modding API 用 C# 编写一个自动钓鱼的mod。该模块加载了一个用 Python 训练的序列化 DQN 模型。所以首先要从游戏中收集数据,然后用这些数据用 Pytorch 训练一个简单的 DQN。经过一些迭代后,可以使用 ONNX 生成一个序列化模型,然后从 C# 端加载模型,并在每一帧中接收钓鱼小游戏的状态作为输入,并(希望)在每一帧上输出正确的动作。
钓鱼迷你游戏
这个代理是在SMAPI的帮助下编写的,SMAPI是Stardew Valley官方的mod API。API允许我在运行时访问游戏内存,并提供我所需要的一切去创造一个与游戏状态进行交互并实时向游戏提供输入的代理。
在钓鱼小游戏中,我们必须通过点击鼠标左键让“鱼钩”(一个绿色条)与移动的鱼对齐。鱼在这条竖线上无规律地移动,鱼钩条与鱼对齐时,绿色条就会填满一些,如果鱼成功逃离绿色条就会开始变空。当你填满绿色的条形图时,你会钓到鱼,当它绿条没有时鱼就跑了。
强化学习问题定义
所以这里只需要每帧从游戏内存中读取这些特定属性并将它们保存为在第 t 帧的状态。通过API我们可以查看并从游戏内存中读取特定属性的代码,对于自动钓鱼,需要在钓鱼小游戏期间跟踪的 4 个变量。 “钩子”中心的位置、鱼的位置、钩子的速度和绿色条的填充量(这是奖励!)。 游戏内部使用的名称有点奇怪,以下是读取它们的代码。
/ Update State // hook position bobberBarPos = Helper.Reflection.GetField< float >(bar, "bobberBarPos" ).GetValue(); // fish position bobberPosition = Helper.Reflection.GetField< float >(bar, "bobberPosition" ).GetValue(); // hook speed bobberBarSpeed = Helper.Reflection.GetField< float >(bar, "bobberBarSpeed" ).GetValue(); // amount of green bar filled distanceFromCatching = Helper.Reflection.GetField< float >(bar, "distanceFromCatching" ).GetValue();
前三个定义了我们的状态:
这是模型可以在每一帧上可以获取的状态,要将其设置为强化学习问题还需要使用奖励来指导训练。 奖励将是绿色条的填充量,这是里的变量名称为 distanceFromCatching。 这个值的范围从 0 到 1,正好非常适合作为奖励。
Replay Memory
Replay Memory是 Q-learning 中使用的一种技术,用于将训练与特定的“时间”去关联。 所以需要将状态转换存储在缓存中并通过缓存中随机抽取批次来训练模型而不是直接使用最新数据进行训练。 为了训练模型,我们需要 4 个数据,分别是当前状态、下一个状态、采取的行动和奖励:
Q-learning 中关键问题是要获取曾经处于哪个状态和采取了哪些行动、到达哪个新的状态,以及执行这个行动中得到的奖励。有了这些数据,我们可以使用像价值迭代 ( Value Iteration 一种动态规划算法)这样的简单算法将奖励从最终状态(获胜状态)开始分析,逐渐往回推直至推至所有状态。因此对于每个可能的状态,模型都会知道最大化其未来回报的方向。 但是我不会使用价值迭代来训练模型,因为真正的问题往往有太多的状态并且动态规划需要很长时间。
上面的价值迭代只是为了说明在 C# 中保存每个条目的方式。 这里使用缓存从最后一帧获取状态和动作,并将所有这些与当前帧的状态和奖励一起存储。
replayMemory[updateCounter,0] = OldState[0]; replayMemory[updateCounter,1] = OldState[1]; replayMemory[updateCounter,2] = OldState[2]; replayMemory[updateCounter,3] = NewState[0]; replayMemory[updateCounter,4] = NewState[1]; replayMemory[updateCounter,5] = NewState[2]; replayMemory[updateCounter,6] = reward; replayMemory[updateCounter,7] = actionBuffer? 1 : 0 ;
所有这些数据都变成了一个巨大的 csv 文件,这样可以通过 Python 加载并用于训练 DQN 模型。
DQN 模型
使用神经网络估计 Q-table的 Q-Learning称为Deep Q-Learning。这个方法在很多个 Pytorch 教程中都有很好的解释,我从里面复制了很多代码并为我们的问题对其进行了一些修改。主要思想是使用两个神经网络。一个将估计 Q(s,a) 的值(Policy Net),另一个将估计未来 Q-values的值(Target Net)。然后我们对这两个网络的差异进行反向传播。
这是 Q-Learning算法的基本方程。我们将使用一个网络来估计当前状态 Q(s,a) 的正确值,另一个将估计下一个状态的最大可能值。两个网络都使用随机值进行初始化,并且每隔几次迭代将Policy Net权重复制到Target Net。Policy Net则通过反向传播更新权重 ,通过反向传播这种,Policy Net 最终将学会估计这两个值。
α 是学习率, 是用于选择为 Q 的未来值给出的重要值的折扣因子(discount factor)。强化学习是比较难易理解的所以最后会整理一堆链接,它们会做更好的细节解释。
训练
训练过程是“自我驱动的”,首先要自己玩游戏收集状态和奖励数据,然后训练一个初始化的效果很差的模型让它自动玩游戏,并为我们收集新的数据。然后使用这些数据在 Python 端训练新模型,生成一个新的 ONNX格式模型,该模型将每 1000 帧左右重新加载一次,然后使用新模型继续玩游戏并生成数据来训练新模型。 因为C̶# 必须编译 mod 并将其打包到与游戏可执行文件兼容的 Windows DLL 中,我没有找到一个可以生成正确的 .NET 机器学习框架二进制文件(Stardew Valley 是在 .NET 5 中编译的),所以我放弃了,这里直接用 Python 编写了这部分。
另外一个重要决定是该模型不需要在线训练。 Q-Learning就是要找到函数 Q(s,a) 的良好近似值,即估计在特定状态 s 下执行特定动作 a 的值的函数。所以模型的目的是数据彻底探索这个状态空间,无论是你(人肉)还是模型玩游戏都没有关系,当然如果能够全部自动化拿看起来肯定更加的高大上。
从 C # 中读取 ONNX 模型
C# 端唯一真正的 ML 代码是 ONNX 进行推理(预测),它定义了张量类型和会话的对象,可以发送张量输入并从序列化的 ONNX 模型获取张量输出。 下面的代码非常简单明了。 更新函数在每一帧都运行,并以当前状态作为输入查询训练模型的动作,最后几行只是用于获取模型输出的 argMax一些代码,这是与产生的动作对应的索引。序列化模型的重量只有 120kb 左右,所以运行起来非常轻巧。
public int Update ( double [] currentState ) {Tensor< double > input = new DenseTensor< double >( new [] { 3 });input[ 0 ] = currentState[ 0 ];input[ 1 ] = currentState[ 1 ];input[ 2 ] = currentState[ 2 ]; // Setup inputs and outputs var inputs = new List<NamedOnnxValue>(){ // the model has only one input, the state tuple NamedOnnxValue.CreateFromTensor< double >( "0" , input)}; using ( var results = session.Run(inputs)){Tensor< double > outputs = results.First().AsTensor< double >(); var maxValue = outputs.Max(); var maxIndex = outputs.ToList().IndexOf(maxValue); return maxIndex;}}
使用 Harmony 进行输入
SMAPI 缺少的API是能够在游戏中提供输入,因为 99.999% 的mod不需要这样的东西。 为了进行输入我找到了一个名为 Harmony 的 C# 库在可以在运行时更改游戏的内部函数,这样我就可以让游戏以为它收到了鼠标输入。 这就是上面让mode自己玩游戏的方法。 非常感谢 Drynwynn,Mod FishingAutomaton 的作者,我使用了很多代码来设置我的 mod。
[ HarmonyPatch(typeof(Game1), "isOneOfTheseKeysDown" ) ] class IsButtonDownHack { // ... // some important stuff // ... // change function return value to true // makes the game think a mouse left button click ocurred __result = true ; return ;}
最终结果
目前,该模型可以捕获所有“简单”和“中级”的鱼。 还不能训练它捕捉传说中的鱼。
这个gif是未训练完成的演示
下面是我们训练的结果,效果还不错
资源和引用
非常感谢 Stardew Valley 的mod社区帮助并让我更好地理解游戏:)
C# mod 和 Python 训练的所有代码都可以在这里找到!
github/ThiagoLira/AutoFisher-SV
三、有玩家在星露谷里做了一个现代化全自动务农Mod
现代化农场指日可待。
钓鱼、除草、砍树、种田,这是大多数玩家在《星露谷物语》里的一天。但到了游戏后期,工作量将会成倍增加,曾经的田园牧歌生活不再,你正在被忙碌的工作逼成一台全自动务农机器。
如果你厌倦了朴素的农耕生活,那么现在,解放双手的机会已经出现在你面前。最近一位名叫Joe Strout的玩家就为《星露谷物语》打造了一个全自动务农机器人Mod,只要你给它输入指令,除草、播种、浇水,它都会一一为你完成。
Mod给玩家的房间装上了一台计算机,用于对农场中的机器人下达指令。这些机器人的形象是一台小型行走的显示器,头顶工作指示灯,背后牵着一根像尾巴似的天线,一旦接收到任务,就会按照既定路线开始行动。
像扫地机器人一样除草
为了让农场主便于操作,Mod的制作者利用MiniScript编程软件给游戏里的计算机编程,以便能够让机器人实现一些最基本的操作。玩家可以在电脑上给机器人们加上今天的“待办事项“,它们接下来就会按照吩咐乖乖工作,还会在完成了一天的任务之后给玩家发送邮件,呈上它的工作报告。
与此同时,玩家还可以利用家中的电脑来监控农场的各类数据,树木、石头、杂草的数量都能在电脑中一览无遗。如果玩家编程能力不错,还能够自己为机器人编写行动计划,但即便你不会编程也不要紧,Mod作者早就贴心为你写好了一份操作指南。
在辛勤工作的同时,机器人还能够感知周围的环境,通过改变灯或者显示器的颜色来改变他们的状态。如果一台机器人还不够满足你的需求,还可以在商店中购买更多的机器人来为你的现代化农场增添色彩。
实际上,《星露谷物语》中的自动化Mod并不少见,早在2017年,游戏社区内就曾经出现过一个非常知名的自动化Mod,玩家只要把工作机器放在收纳箱边,在箱子里放入加工物料,机器就会开始自己取材自动运转。
还有玩家在游戏里做了一台拖拉机,不管是农作物还是树枝杂物,都能统统快速清理干净。
以上就是星露谷物语钓鱼mod怎么用?星露谷物语怎么钓鱼?的详细内容,希望通过阅读小编的文章之后能够有所收获!更多请关注喜价游戏网其它相关文章!
如若转载,请注明出处:https://www.xijia.cn/youxi/39285.html