对了,还要用 opendal 实现一个类似 alist 可以上传的插件。我现在经常通过 alist 上传再使用 nas-tool 刮削
这个过程完全可以用上述的插件事件通知触发刮削(插件允许上传时指定媒体元数据)
#nastool
这个过程完全可以用上述的插件事件通知触发刮削(插件允许上传时指定媒体元数据)
#nastool
nastool 本身应该为插件提供前端组件,一种简单的,制式组件。插件返回页面布局描述,由 nastool 本身组装成真正的页面。
插件的路由统一用 /module/:pluginid/作为前缀,可以自由追加路由。
在插件管理列表,可以设置将插件固定到侧边栏,或者首页常用
#nastool
插件的路由统一用 /module/:pluginid/作为前缀,可以自由追加路由。
在插件管理列表,可以设置将插件固定到侧边栏,或者首页常用
#nastool
今天稍微思考了一下插件架构应该怎么设计……
我的场景是这样的:主程序是个 nas 管理工具,需要通过插件来扩展功能。比如下载插件负责下载文件,元数据插件负责处理下载完的媒体文件信息,字幕插件去找字幕。这些插件之间可以互相配合,但也可以独立工作。
所以插件系统需要:
1. 每个插件都要能说明自己能做什么
2. 插件之间要能发布和订阅事件
3. 长时间任务要能反馈进度
经过一番思考,整理出了这样的接口规范:
然后拿下载插件举个例子:
这样的设计既简单又灵活,用 HTTP + JSON 的方式也让插件开发没有语言限制。每个插件都是一个独立的 HTTP 服务,主程序只要调用这些 API 就行了。
插件之间的协作通过事件来完成,比如下载完成时发个事件,元数据插件订阅这个事件就能自动开始处理文件,处理完再发事件给字幕插件……
而用户通过 nastool 的插件管理页面,设置插件的订阅事件,以及如何提取所订阅的事件里的参数映射到插件入参等等。
其实这个配置过程还是不够人性化,有点废手,可以考虑以 mcp 的形式提供,由 ai 来决定怎么填充!
想到这里,感觉这个方案还不错,先这样吧 😋
#开源项目 #nastool
我的场景是这样的:主程序是个 nas 管理工具,需要通过插件来扩展功能。比如下载插件负责下载文件,元数据插件负责处理下载完的媒体文件信息,字幕插件去找字幕。这些插件之间可以互相配合,但也可以独立工作。
所以插件系统需要:
1. 每个插件都要能说明自己能做什么
2. 插件之间要能发布和订阅事件
3. 长时间任务要能反馈进度
经过一番思考,整理出了这样的接口规范:
# 每个插件必须实现的基础接口
@dataclass
class PluginInfo:
id: str # 插件唯一标识
name: str # 插件名称
version: str # 版本
description: str # 描述
author: str # 作者
homepage: str # 可选,项目主页
@dataclass
class ActionParameter:
type: str
description: str
required: bool
default: Any = None
@dataclass
class Action:
description: str
method: str # GET/POST/PUT/DELETE
path: str
params: dict[str, ActionParameter]
returns: dict # 返回值描述
@dataclass
class Event:
description: str
schema: dict # JSON Schema 描述事件数据结构
# 基础 HTTP 接口
GET /plugin/info -> PluginInfo
GET /plugin/capabilities -> {
"actions": dict[str, Action],
"events": dict[str, Event],
"subscriptions": list[str]
}
GET /health -> {"status": "ok" | "error"}
POST /events -> 接收订阅的事件
然后拿下载插件举个例子:
# 下载插件接口定义
POST /actions/download {
"request": {
"url": str,
"save_path": str,
"headers": dict[str, str] # 可选
},
"response": {
"task_id": str,
"status": "started"
}
}
GET /tasks/{task_id} {
"response": {
"task_id": str,
"status": "downloading" | "completed" | "error",
"progress": float, # 0-100
"speed": int, # bytes/s
"downloaded": int, # bytes
"total": int # bytes
}
}
# 事件定义
events = {
"download.completed": {
"task_id": str,
"file_path": str,
"file_size": int,
"mime_type": str
}
}
这样的设计既简单又灵活,用 HTTP + JSON 的方式也让插件开发没有语言限制。每个插件都是一个独立的 HTTP 服务,主程序只要调用这些 API 就行了。
插件之间的协作通过事件来完成,比如下载完成时发个事件,元数据插件订阅这个事件就能自动开始处理文件,处理完再发事件给字幕插件……
而用户通过 nastool 的插件管理页面,设置插件的订阅事件,以及如何提取所订阅的事件里的参数映射到插件入参等等。
其实这个配置过程还是不够人性化,有点废手,可以考虑以 mcp 的形式提供,由 ai 来决定怎么填充!
想到这里,感觉这个方案还不错,先这样吧 😋
#开源项目 #nastool
对于 nastool 的后续改造计划一
1. 由于 GIL 的存在,即使 twisted 线程池也无法真正充分利用多核心并行,所以打算用多进程+reuseport 的方式其多个 twisted 进程
2. 然后我意识到像配置监听热重载以及写入对于多进程来说是个阻碍
3. 我的部署场景是只考虑支持容器化,实际上不需要热重载和源码升级重启这些能力,应该将这些部分清除,既可以减少累赘,也可以扫除多进程的障碍
4. 新的架构应该是,首先一个主进程,负责初始化数据,然后启动多线程背景任务,接着管理分叉多个 twisted 子进程等待。各自的子进程并行利用多核优势进行网络请求的处理响应
#开源项目 #nastool
1. 由于 GIL 的存在,即使 twisted 线程池也无法真正充分利用多核心并行,所以打算用多进程+reuseport 的方式其多个 twisted 进程
2. 然后我意识到像配置监听热重载以及写入对于多进程来说是个阻碍
3. 我的部署场景是只考虑支持容器化,实际上不需要热重载和源码升级重启这些能力,应该将这些部分清除,既可以减少累赘,也可以扫除多进程的障碍
4. 新的架构应该是,首先一个主进程,负责初始化数据,然后启动多线程背景任务,接着管理分叉多个 twisted 子进程等待。各自的子进程并行利用多核优势进行网络请求的处理响应
#开源项目 #nastool
发布了第一个 alpha 版本镜像
ghcr.io/yuchanns/nastool:v2.10.0-alpha.2
#开源项目 #nastool
功能上暂无什么实质性的变更,主要改动了:
1. HTTP 运行时从 flask 自带的 demo 改成使用 twisted
2. 调整了项目布局,以便于优化 Dockerfile 的构建流程
3. 为代码添加了 ruff format 和 lint 并通过验证
4. 打包镜像时限制了最小权限提高安全性
5. 增加开发脚本,优化了开发时的体验
6. 采用 PDM 管理依赖
ghcr.io/yuchanns/nastool:v2.10.0-alpha.2
#开源项目 #nastool
功能上暂无什么实质性的变更,主要改动了:
1. HTTP 运行时从 flask 自带的 demo 改成使用 twisted
2. 调整了项目布局,以便于优化 Dockerfile 的构建流程
3. 为代码添加了 ruff format 和 lint 并通过验证
4. 打包镜像时限制了最小权限提高安全性
5. 增加开发脚本,优化了开发时的体验
6. 采用 PDM 管理依赖
刚刚发现原来 nastool 的原作者开了个新坑 https://github.com/jxxghp/MoviePilot
😂不过我还是决定基于原来的 2.9.1 分支继续开发我想要的版本,因为我感觉到了乐趣
#开源项目 #nastool
😂不过我还是决定基于原来的 2.9.1 分支继续开发我想要的版本,因为我感觉到了乐趣
#开源项目 #nastool
先把仓库建起来,并作了 pdm 的适配,对目录进行了改造。
修改了 Dockerfile 移除了一些没用的功能脚本。把基础镜像改成了 debian。
此外添加了 ruff lint format,还有 mypy typecheck 。不过目前 typecheck 有太多不通过的地方了😅慢慢改
https://github.com/yuchanns/nastool
#开源项目 #nastool
修改了 Dockerfile 移除了一些没用的功能脚本。把基础镜像改成了 debian。
此外添加了 ruff lint format,还有 mypy typecheck 。不过目前 typecheck 有太多不通过的地方了😅慢慢改
https://github.com/yuchanns/nastool
#开源项目 #nastool