FishmanTheMurloc
0c02808626
使用TorchSharp重写RodNet，以利后续优化 ( #1613 )
...
* 使用TorchSharp重写RodNet，以利后续优化
* 增加一个外部torch加载配置来代替直接的依赖，如配置不生效则使用原先手搓的算法
* BgiOnnxFactory取消单例，改为在App服务类中注册为单例，由此修复了一堆单元测试
* BgiOnnxFactory中几个静态方法改为成员方法以和App解耦；因不再有多个mat源供消耗，FishBite中文字块算法不再改动传入的mat，使得后续串联的算法不受其影响
* 将BehavioursTests中临时的配置读取方式改为读取主项目编译环境中的json文件；新建单元测试的README
* 将RodNet算法更新到 010006a44cadd5672731
2025-06-01 15:16:54 +08:00
Shatyuka
b2958ac646
用Image<Rgb24>替换Bitmap ( #1563 )
2025-05-11 11:03:53 +08:00
Takaranoao
5b3bac478d
升级多个依赖&增加额外的推理加速功能&迁移OCR ( #1459 )
...
* 更新多个NuGet包至最新版本
* 重构模型加载以适应yolosharp
* feat: 改变接口。TensorRT缓存的初步支持，修改配置项。
* 更新依赖并调整变量顺序，修复加载问题
* 更新AvalonEdit和Microsoft.ML.OnnxRuntime包至最新版本,以修复问题
* fix: downgrade Microsoft.ML.OnnxRuntime.DirectML to version 1.21.0
* typo
* fix: change log level from warning to error for ONNX provider loading failure
* 增加 paddle ocr 的 onnx 模型
* feat: add PaddleOCR models for Chinese, English, and Latin recognition
* 使用cv的DNN生成Tensor，加速Yap文字识别
* feat: 尝试搓一个onnx的ocr
* clean up code
* chore: update OpenCvSharp4 package versions to 4.10.0.20241108
* 修复因格式化代码而丢的引用
* chore: update Microsoft.ML.OnnxRuntime.DirectML package to version 1.21.1 and improve logging for ONNX provider initialization
* chore: 等yolosharp更新再升级onnx
* chore: add Microsoft.ML.OnnxRuntime.Managed package and clean up logging in Det class
* fix: refactor output tensor handling in Det class for improved clarity
* 补充注释，修复DML的OCR问题
* 默认OCR推理使用CPU,整理配置
* fix error NETSDK1152: 找到了多个具有相同相对路径的发布输出文件
* fix(logging): enhance debug log for ONNX initialization with provider details
* 修复TensorRT模型缓存的加载问题
* fix(onnx): improve cached model retrieval and add file existence check
* fix(ocr): replace SrcGreyMat with SrcMat for region of interest processing
* fix(onnx): add file existence check for cached model and adjust session options for DirectML provider
* 增加硬件加速配置UI界面
* 移除旧的OCR模型
* 错别字
---------
Co-authored-by: 辉鸭蛋 <huiyadanli@gmail.com >
2025-05-11 01:08:37 +08:00
FishmanTheMurloc
6d4f8b80e8
Feat/multi lan ( #1336 )
...
* 记录一次对hutaofisher的访谈，帮助开发者理解其算法
* 本地化HelloWorld
* .csproj取消windows版本号，此处导致了IDE在新建代码文件和自动生成代码时，默认命名空间丢失的问题。已知VisualStudio和ReSharper存在这个问题。
* 优化扩展方法写法，改为从localizer扩展；Converter优化写法，避免冲突；新增两种语言，待测试ocr效果
* Revert ".csproj取消windows版本号，此处导致了IDE在新建代码文件和自动生成代码时，默认命名空间丢失的问题。已知VisualStudio和ReSharper存在这个问题。"
This reverts commit 8bd7ee74c5
2025-03-28 11:00:08 +08:00
FishmanTheMurloc
57d33c4312
又一波钓鱼优化 ( #1301 )
...
* GetFishBarRect方法添加更复杂的算法，并为其配备独立的单元测试，和分离难度较大的测试用例（未熟练时两侧出现黄色动态折线的情况）；GetFishBoxArea行为去掉拉条框初始位置必须位于屏幕中轴线的条件，并添加其后续Fishing行为的单元测试来验证可行性；EnterFishingMode行为使用结束时间来代替Sleep，并添加整体超时时间；添加一个鱼咬钩的假阳性测试用例仅供娱乐
* 补充GetFishBarRect算法，使通过遗漏的测试"20250314002439020_Fishing_Succeeded.png"
* 拉条增加1秒未检测持续时间以应对瞬间丢失拉条框的情况；新增一个检查提竿结果的行为；新增一个检查开始钓一条鱼的初始状态的方法，以应对行为状态错配的情况；一些行为将Sleep优化为DateTime；修改上述改动对应的单元测试
* 解决合并冲突剩余问题，删掉ImageRegion的Bitmap构造函数重载
* 提供给测试用例初始化的 SystemInfo、TaskContext 方法，使用 InitForTest 即可
* InitForTest
* 和鸭蛋昨夜的提交撞车了。。。抽象了ISystemInto供单元测试实例化Fake类；给BaseAssets类定义了成员字段systemInfo（我想，既然都是图片模板数据集，如此定义是合理的），供继承类AutoFishingAssets使用，并定义了其在单元测试的派生类；添加了一个900p的选取鱼饵测试用例；blackboard改为负责携带AutoFishingAssets，并将其实例化时机挪到独立任务的Start方法中，避免由于TaskContext尚未初始化导致获取到的SystemInfo为空
* 一个特殊的测试用例：抛竿的瞬间、开始检测咬杆时遇到了假阳性
* Revert "InitForTest"
This reverts commit 225e9783a7610c57263ahuiyadanli@gmail.com >
2025-03-18 19:51:42 +08:00
辉鸭蛋
807288ab90
重构底层截图器，大幅提升截图器耗时 ( #1302 )
...
* to mat init
* BitBlt 加锁
* 使用读写锁重构 Windows.Graphics.Capture，删除BGI自己命名的缓存设置
* dwm加锁并返回mat
* 队伍中没有对应元素角色修复日志问题
* 清除所有 DispatcherTimerOperationEnum 内容
* 修复单测的编译错误
* HDR Support
* 清理无用的截图器模式
2025-03-15 13:18:19 +08:00
FishmanTheMurloc
29a2c0069e
bug fix：拉条过程中内存没有及时释放 ( #1266 )
...
* bug fix：拉条过程中内存没有及时释放
* 新增LiftAndHold行为用于举竿、检测预抛竿时鼠标左键是否被意外松开、终止任务；抛竿开始后5秒内如从未找到落点，则返回失败，并配有单元测试；添加抛竿时无鱼饵适用鱼的单元测试；调整变量名
* 新增一个钓鱼昼夜设置枚举DontChange及其逻辑（枚举值为3），表示不调整时间直接开钓
* 针对可能是游戏中的雾气/滤镜/小黄鸭之类不明原因干扰了钓鱼拉条框的识别，修改了CV算法，使其不严格按照黄色(255,255,192)找矩形，而是按一定HSV范围寻找，并加强过滤；添加上述不明原因案例的测试用例
* 将MySimpleParallel改造为支持两个以上子行为；将“检查抛竿结果”行为合并到“下杆中”并行节点，以去除检查的等待时间，由此希望能应对鱼过快上钩的情况
2025-03-14 00:17:37 +08:00
辉鸭蛋
b0c12d567b
暴力GC
2025-03-11 22:12:29 +08:00
辉鸭蛋
14a55c1204
Revert "添加暴力GC"
...
This reverts commit 203ae22e7b
2025-03-11 21:16:49 +08:00
辉鸭蛋
203ae22e7b
添加暴力GC
2025-03-11 02:18:08 +08:00
FishmanTheMurloc
c5dd67e854
bug fix 严重的内存占用暴涨
2025-03-10 18:54:00 +08:00
FishmanTheMurloc
79257b3d3a
Merge branch 'babalae:main' into main
2025-03-10 18:34:55 +08:00
FishmanTheMurloc
699ed8fc0b
选择鱼饵失败超限后不再直接判定没有鱼；抛竿逻辑不再使用prevTargetFishRect设计，改为直接取离落点最近的鱼，并由此通过了先前的三条炮鲀鱼单元测试；抛竿也采取在无目标鱼时记录失败鱼饵的设计；获取鱼群时，忽略选择鱼饵失败超限及抛竿无目标鱼超限的鱼，配有忽略时的单元测试
2025-03-10 18:25:46 +08:00
FishmanTheMurloc
34e6f4741a
钓鱼添加逻辑：选择鱼饵失败2次后，忽略该种鱼饵，且如果鱼塘中所有鱼的鱼饵被忽略就当没有鱼退出任务；并配有单元测试
2025-03-10 09:59:22 +08:00
辉鸭蛋
7d0649b358
一些自动钓鱼的优化
2025-03-08 23:41:48 +08:00
FishmanTheMurloc
2a548ecb1b
过滤“获得”图标的条件数值优化，配有单元测试用例；完善超时收杆行为，使能应对收杆的同时鱼咬杆的情况，并配有单元测试；
2025-03-06 20:32:17 +08:00
FishmanTheMurloc
462e89731d
给js脚本的genshin.autofishing方法暴露了昼夜参数、两个超时参数取独立任务页面中配置的值、关键帧截图开关常关；将BaseBehaviour<TImageRegion>中saveScreenshotOnTerminate字段由不合理的静态字段改为构造函数传入，修复关键帧截图开关在不同入口交替使用的情况下错乱的bug
2025-03-06 12:11:12 +08:00
FishmanTheMurloc
939c0a5106
添加了一个开关来控制是否在钓鱼的关键帧上保存截图
2025-03-05 21:32:43 +08:00
FishmanTheMurloc
f8c05d2c33
合并代码修补；将退出钓鱼模式封装成行为并优化；将许多行为的日志时机从每次Tick时精简为初始化时；联机时不使用昼夜设置
2025-03-05 16:10:58 +08:00
FishmanTheMurloc
d3659f3b43
Merge branch 'main' into feat/fishing_config
2025-03-05 10:26:20 +08:00
FishmanTheMurloc
aead279c78
单元测试HelloWorld ( #1219 )
...
* AutoFishing为单元测试重构；一个简单的单元测试GetFishpondTest
* 将鼠标操作的注入挪到DesktopRegion中；提供LoadAssetImage的一个不依赖配置的重载；ChooseBait的代码中将Bv的方法替换成不依赖配置的写法；完成ChooseBait的单元测试
* 使用TimeProvider改写ChooseBait以适用单元测试；添加假的绘图上下文类；添加抛竿行为的单元测试
* 选择鱼饵行为比对上次选择的鱼饵，如果相同则直接抛竿（之前的版本曾有此逻辑），但测下来有时会选错饵导致无限抛竿，调整了相关步骤的等待间隔，希望能简单地压制此bug
* 获取鱼群时过滤“获得”界面的鱼图标：1、在Fishpond构造函数中实现。2、配有此类情况的单元测试。3、并由此降低鱼钓上后的等待时间；
修复绘制鱼群时索引不正确导致遗漏的bug；获取鱼群时绘制鱼群供分析
2025-03-05 00:30:11 +08:00
FishmanTheMurloc
e634a54913
钓鱼任务添加整个任务的超时参数、昼夜参数
2025-03-04 21:06:16 +08:00
辉鸭蛋
55442418aa
设置时间结束时，立即关闭退出
2025-02-23 21:17:16 +08:00
辉鸭蛋
56d0463510
fishing: UI调整与优化
...
1. 实时任务只支持半自动
2. 半自动钓鱼恢复自动提杆的能力
3. UI调整
4. 添加自动钓鱼独立任务快捷键
2025-02-23 20:33:16 +08:00
辉鸭蛋
95e17bdef0
fix ra
2025-02-17 21:55:57 +08:00
辉鸭蛋
2135189bf6
新版本自动钓鱼 @FishmanTheMurloc ( #1176 )
...
* Revert "Revert #1059 "
This reverts commit 4b65370e9f#1060 )
* 没有找到鱼饵时不再抛异常而是返回行为失败；细小优化；测试分支是否配置正确
* 恢复半自动钓鱼功能（仅自动拉条）；将CheckFishingUserInterface方法添加到行为树，使其直接控制启停；PutRects方法增加筛选，避免画出没有高度的框框导致残留红点在画布上；去掉局部变量_currContent；钓鱼结束不再依据_noRectsCount判断
* 添加一步抛竿后检查，避免往红色靶点抛竿导致失败
* 大家终于炼出了好用的适用纳塔版本的鱼模型；实现注释描述的“选择最多鱼吃的饵料”；添加koihead鱼类，进入抛竿时忽略koi，只看koihead；Fishpond.TargetRect补上空值处理；去掉_switchBaitContinuouslyFrameNum，目前该段代码有时候会导致发呆；钓鱼结束时多等5秒，避免“获得鱼”的提示图被错误地计入下一次抛竿找鱼的预测
* 注释了AutoFishingTrigger中，FishBite和Fishing方法中的一些代码，解除了对CaptureContent.FrameRate的引用以方便开新坑；开了个新坑AutoFishingTask
* 新增全自动钓鱼独立任务的ui界面
* 封装了所有钓鱼行为，消灭了AutoFishingTrigger中大部分私有变量，剩余一些用来在行为之间传递信息的变量被丢到Blackboard中
* 代码清理：删除AutoFishingTrigger中被注释的私有变量；行为树扩展方法移动到单独的文件中
* 封装好的行为都搬家到Behaviours.cs去了；钓鱼独立任务基本完成；Blackboard添加chooseBaitUIOpening字段以避免在选择鱼饵界面时因图标被灰色遮罩而影响图像匹配；抛竿行为添加OnTerminate方法修复合并预抛竿和抛竿行为时产生的bug
* 优化VisionContext框框的代码
* AutoFishingTask加了个转圈圈找鱼的动作
* 钓鱼任务时如果有F键以及确认键，就交互一下进入钓鱼模式
* 添加供js调用的钓鱼任务方法
* 调整视角时也调整游戏角色的朝向；因为错误率较高，抛竿前找鱼时不再对右下角图标进行模板匹配检查
* 把MoveViewpointDown封装成行为了，黑板新增字段pitchReset，改进了流程中调整视角俯仰的部分；钓鱼任务中为了避免人物待机动作吃掉钓鱼F键，ChangeView方法改成始终都按S和W键
* ThrowRod行为删去对鱼群位置的校验，该段校验经常导致发呆；并将该行为更名为GetFishpond
* 对EnterFishingMode行为进行优化并修复bug；钓鱼循环修正
* 将螺旋视角找鱼的行为简化为低头转圈找，以适应路径任务完成时经常无法朝向鱼的情况；按下钓鱼键后等待界面出现时间延长至2秒
* 添加js独立任务调用自动钓鱼
* 新增`fishing`的Action用于触发钓鱼
* AutoFishingTask删去右下角ExitFishingButtonRo的模板匹配校验，因为错误的未识别有点多；添加当前焦点窗口校验
* AutoFishingTask增加设置昼夜功能，在7点和19点各钓一轮
---------
Co-authored-by: 辉鸭蛋 <huiyadanli@gmail.com >
---------
Co-authored-by: FishmanTheMurloc <162452111+FishmanTheMurloc@users.noreply.github.com >
2025-02-17 11:36:10 +08:00
