GitHub 热门
共 74 个项目 · 第 2 / 3 页
SAOS-3624 / dsh-see-now 多模态 JavaScript
按画面变化筛选帧并拼图,让 AI 低成本实时看屏幕
dsh-see-now 是给 DSH 用的实时视觉插件,让 AI 直接「看见」你的屏幕,而不是听你口头描述。它解决的是一个很实际的矛盾:定时截全屏喂给模型,截得密会把 token 烧穿,截得疏又会漏掉关键变化。它的做法是先给每帧算一个 0–255 的变化分,只有画面突然切换或持续运动攒够量才留下,再把留下的几帧拼进同一张图,一张图的固定成本摊到多帧上——同样 30 秒的操作,别人烧 30 张图,它常常只要 2 到 3 张,静止屏幕则几乎不出图。除了画面,它还能抓系统回环音频并转写成带时间码的台词,让模型把某句话对应到某一格画面。适合需要让 AI 陪看屏幕的场景,比如做桌面 Agent、屏幕共享助手、视频内容分析的开发者;如果你的工作不涉及给模型喂视觉上下文,这个项目和你关系不大。
★ 362 24h +33 ⑂ 35 创建 3 天前 更新 6 小时前
MagoStudio / MagoStudio 多模态 TypeScript
本地优先的 AI 视频编辑器,剧本到成片加素材风格化
MagoStudio 是一款本地优先的 AI 视频编辑桌面应用,可以理解为把 Runway、Kling 这类在线 AI 视频工具搬到你自己电脑上跑。它分两块能力:Mago Director 负责从剧本到成片,你写好剧本、设定角色和分镜,它能生成前后衔接一致的连续场景;Mago Transform 则是素材进、风格化素材出,支持按帧范围编辑、用遮罩只改视频局部、重新打光或替换画面里的人物。渲染默认走你自己的 GPU(底层接 ComfyUI),项目和视频都留在本机,只有需要云端模型时才上传该次渲染必需的素材。它还带版本管理和精确到帧的审阅流程,适合有成片交付压力的人。值得看的是短视频团队、独立影视创作者以及做 AI 视频工作流的工程师——后者还能利用它为 AI agent 而写的代码结构,快速接入新出的视频模型。普通后端或算法岗与它关系不大。
★ 291 24h +32 ⑂ 48 创建 2 天前 更新 13 小时前
neuregex / freefield 多模态 Python
开源版 Higgsfield,基于 ComfyUI 的图像视频 VFX 音频创作应用集合
Freefield 是一个开源项目,把 Higgsfield 那套创意应用(图片、视频、VFX、音频)搬到 ComfyUI 上,全部基于开放权重模型,不依赖任何闭源 API。它包含 120 个应用,比如换脸、视频重绘、混媒风格、配音、AI 虚拟人等,每个应用就是一个文件夹加一份描述文件,界面表单、模型下载、显存占用都自动从描述生成,你也可以把自己的 ComfyUI 工作流一键导入成新应用。每个示例都附带实验室真实 GPU 跑出的耗时和峰值显存,方便你判断在自己显卡上跑不跑得动。适合想用本地或云端 GPU 做 AI 图像视频创作、又不想被 Higgsfield 等 SaaS 按次收费绑定的创作者和开发者;如果你只是做纯文本或后端开发,跟它的关系不大。
★ 929 24h +32 ⑂ 178 创建 16 天前 更新 2 天前
jwang771 / 3d-world-simulator 多模态 Python
用神经网络学习物理动力学的三维世界模拟器
这是一个用学习方法做物理世界模拟的研究项目,可以理解为「用神经网络替代传统物理引擎」的尝试。它先用 VAE 把物体的三维状态压缩成隐变量,再训练一个动力学模型,根据历史状态和动作预测下一步会发生什么,从而模拟布料、箱子、绳子、插头等物体的形变与交互。相比 MuJoCo 这类基于方程求解的仿真器,它靠数据驱动,能处理柔性物体这类传统引擎难以精确建模的场景,还支持触觉传感信息。项目来自 Columbia、UC Berkeley、NVIDIA 等机构的联合团队,目前主要提供训练流程,数据和推理代码尚未上传。值得看的是机器人学习、具身智能方向的研究者和工程师,尤其是做操作仿真、sim-to-real 的人;如果你不涉及机器人或物理仿真,这个项目和你关系不大。
★ 210 24h +34 ⑂ 18 创建 2 天前 更新 2 天前
OpenMOSS / MOSS-Image 多模态 Python
5B 文生图模型,强在图内文字渲染与排版控制
MOSS-Image 是 OpenMOSS 团队开源的 5B 参数文生图基础模型(DiT 架构),主打三点:图内文字渲染准确、可控制文字和视觉元素的排版布局、支持长达 4K token 的长提示词,风格覆盖二次元到写实照片。它提供 Base 和 SFT 两个权重版本,SGLang、vLLM-Omni、ComfyUI 都已支持,也接入了 MOSI API 平台,社区还出了支持 6GB 显存 LoRA 训练的 KohakuMossTrainer。典型场景是做海报、电商主图、带文案的营销素材——这类需求里文字排版和字形准确性往往是文生图模型的硬伤,而它正是冲着这个痛点来的。值得看的人:做图像生成产品或 AIGC 应用的算法与工程团队、需要批量产出带字视觉内容的设计师和运营、以及想在垂直领域微调文生图模型的研究者;如果你的工作和图像生成无关,这个项目可以跳过。
★ 2.6k 24h +30 ⑂ 151 创建 20 天前 更新 2 天前
ultralytics / ultralytics 多模态 Python
YOLO 系列视觉模型的官方统一框架,覆盖检测分割跟踪等任务
Ultralytics 是 YOLO 系列目标检测模型的官方实现和统一框架,可以理解为计算机视觉领域的「一站式工具箱」:一套代码就能跑通目标检测、实例分割、语义分割、图像分类、姿态估计、旋转目标检测和视频里的目标跟踪,覆盖 YOLOv8 到最新的 YOLO11、YOLO26、YOLO27 各代模型。它解决的是视觉落地时的重复造轮子问题——比如做安防监控要统计人流并跟踪个体、做工业质检要定位缺陷区域、做自动驾驶要识别车辆行人并估计其姿态,用它都能直接调用现成模型和训练流程,不必自己从零搭训练管线。值得看的是计算机视觉工程师、算法工程师,以及需要快速验证视觉方案的产品和数据团队;如果你的工作只涉及 NLP 或纯 LLM 应用,和它的关系不大。另外提醒一句,商用需要 Enterprise License。
★ 63k 24h +28 ⑂ 11k 创建 2022-09-11 更新 47 分钟前
Pyramidriseize / ai-fursuit-pattern-generator 多模态 JavaScript
免费本地兽装纸样与 furry 插画生成器,几何部分有原型
Furge 是一个免费的本地兽装(fursuit)纸样生成器,主打「别再为纸样付钱了」。它想解决的是自制兽装的第一道坎:不知道该按什么形状下剪刀,而市面上的纸样要么不合身要么收费。你描述自己的 fursona,它会把头部、手爪、脚爪、尾巴和连体衣拆成一张张可打印的图纸,带实线裁剪线、虚线缝合线和毛流方向箭头,还能按你的身材尺寸出裁剪清单和用料估算,导出 A4/Letter 拼页 PDF 以及 SVG、DXF 给切割机用。它的思路是 AI 负责理解描述选形状,几何引擎(基于 FreeSewing)负责把曲面摊平成真正能对缝的裁片,避免「AI 画一张图但你没法缝」的问题。不过要注意,README 明确写着 AI 部分和应用本体还没做出来,目前只有头部裁片的几何原型,没经过完整兽装实测。对做 fursona 手作、兽装 maker 或本地跑 AI 出图(头像、贴纸、ref sheet)的人值得看一眼;纯 AI 从业者关系不大。
★ 160 24h +28 ⑂ 6 创建 1 天前 更新 1 天前
nanocle / Charakuru 多模态
一张插画生成 VRM 虚拟形象的本地工具包
Charakuru 是一个把一张全身角色插画变成 VRM 虚拟形象的本地工具包,底层依赖 Tripo 的 Smart Mesh 做 3D 建模。它把原本需要自己摸索的 Tripo 与 Blender 工作流——建模、绑定骨骼、贴图等——打包成一个本地应用加 AI agent Skills,让你把繁琐操作交给 Codex 或 Claude Code 这类编码 agent 去执行,自己只在关键节点做判断:导入插画、审阅生成的四视图、在多个候选模型里挑一个、调整身体比例、用走路动画检查肩膝弯曲是否自然,最后导出 VRM 文件。整个流程被切成若干检查点,agent 不会擅自替你做视觉决策,也不会自动往下推进,避免了「全放手给 AI 结果不可控」和「全程手搓太费劲」两个极端。适合想做虚拟主播形象、VTuber 皮套或游戏/社交用 3D 角色,但既不懂 Blender 又不想纯靠 AI 碰运气的创作者;纯技术岗或不碰 3D 内容的人关系不大。项目仍在开发中,文档由 AI 撰写,建议配合编码 agent 阅读。
★ 1.3k 24h +28 ⑂ 114 创建 2026-10-06 更新 3 天前
sirioberati / Genjustsu-Open-Source-Workflow 多模态 Python
用深度图与 SAM 掩码配合 Seedance 替换视频人物物体的开源工作流
这是一套用 AI 替换视频中人物或物体的开源工作流,由 TEIN 提供。它把深度图、SAM 分割掩码、人脸网格和音频处理串在一起,最终调用 Seedance 模型完成替换,自带本地网页界面用于准备素材、检查掩码、预览生成结果并导出成片。实际用法是:先从原片提取音频并用 Demucs 分离人声,把人声升调后嵌回合成视频,再用彩色深度图配合 SAM 3 掩码抠出主体,交给 Seedance 生成草稿,人工审核通过后才出 1080p 成片,最后把完整原声轨还原回去,保证口型和背景音不被破坏。它适合短视频创作者、影视后期和广告制作团队,尤其是需要换角色、换商品或做创意二创但预算有限的人;对纯算法或后端岗位来说关系不大。注意它依赖 Enhancor 的 Seedance API,需要自备密钥。
★ 1.4k 24h +26 ⑂ 332 创建 29 天前 更新 27 天前
ersinkoc / AI-Video-Factory 多模态 TypeScript
Claude 多 Agent 驱动的多语种 YouTube 视频自动生产线
这是一个把单个选题变成成片多语种 YouTube 视频的自动化流水线,可以理解为「AI 版的视频内容工厂」:Claude 的多个 Agent 分工完成写故事、编剧本、分镜规划、画矢量插画和自我审稿,配音、图像、视频片段由付费媒体 API 生成,最后用 Remotion 渲染成片。它内置质量关卡——盲评 Agent 检查画作是否可辨识、是否贴合参考图,不合格就带着缺陷清单重画;真实人物和物体参考 Wikipedia、Wikimedia Commons 的素材,地图国旗用真实数据生成,历史地图还会匹配当年边界。全流程分阶段断点续跑,中途失败可接着来,另有 64 套风格包和一个 Web Studio 让人随时接管、否决或放行。适合想批量做多语种动画科普或解说视频的 YouTube 内容团队、独立创作者,以及对多 Agent 协作视频生产管线感兴趣的技术人;只写代码不做内容的人关系不大。
★ 183 24h +24 ⑂ 27 创建 6 天前 更新 18 小时前
Akillll-DuoHe / fy-code-animation 多模态 TypeScript
把中文文案变成连贯代码动画的 DeepSeek 技能
fy-code-animation 是一个 DeepSeek Harness 技能,用来把中文文案、画风提示词和声音变成前后连贯的代码动画,落地形式可以是 Remotion、Canvas 或 HTML。它针对的是中文动画最容易踩的坑——做成逐句贴卡的 PPT,每镜时长平均、意思断裂;这套流程会先读懂全文,再做语义分镜、选画风、设计镜头转场与角色表演、配音乐音效,最后落地并检查返修,还内置了 341 个画风的检索库和大量可复用的运动、转场、背景、中文字体、数据 UI 源码。适合需要批量产出中文短视频、产品演示动画或知识类内容的自媒体运营、动效设计师,以及想用 AI 工作流替代手工剪辑的开发者;如果你不做视频内容,跟你的关系不大。
★ 210 24h +18 ⑂ 30 创建 6 天前 更新 6 天前
hyz317 / HairDeck 多模态 Python
单图生成可动画的风格化发片与弹簧骨链
HairDeck 能从一张角色图片直接生成可用于动画的风格化头发卡片(hair cards)。它把每张发片编码成一个 token,用 set diffusion transformer 整体生成整套发型,输出带 UV 的几何网格,并额外用一个 chain diffusion 模型生成驱动发片摆动的 spring-bone 骨骼链,最终可导出 GLB 或挂到虚拟形象上导出 VRM。相比传统流程里美术手工建发片、绑骨骼、刷权重,它把这整套环节自动化了,适合快速给 3D 角色或虚拟主播形象做可动发型。做游戏美术、虚拟偶像/VTuber 内容、3D 角色管线的技术美术和 TA 值得一看,尤其是需要批量产出可动画发型的团队;纯后端或算法岗读者关系不大。
★ 820 24h +18 ⑂ 58 创建 6 天前 更新 7 小时前
apekshik / anyscene 多模态 Python
AI agent 从一段描述自动生成完整照片级 Blender 场景
anyscene 让 AI agent 从一段文字描述或几张参考图出发,自动搭出照片级的 Blender 3D 场景:先由 Claude 按 SKILL.md 规划房间结构和道具清单,再为每件道具生成参考图,用 fal 上的 Tripo 和 Meshy 两个 image-to-3D 模型各转一次,通过同光照渲染对比挑出更好的那个,最后脚本化完成摆放、碰撞检查、污渍雾气、实用光源布光、电影感运镜和调色渲染。整个过程每步都有可视化检查关卡,.blend 文件只是可重新生成的构建产物。示例场景包括东京深夜电子维修店、拉面店、香港大排档和 1970 年代任务控制中心,单个场景包含七八十件自动生成的道具;也支持不装 Blender,直接把参考图发到托管端点拿回完整场景包。适合做 3D 场景、影视预演、游戏关卡概念验证的美术和技术美术,以及想用 agent 批量生产虚拟布景的团队;纯后端或算法岗关系不大。
★ 313 24h +19 ⑂ 35 创建 5 天前 更新 1 天前
abouchedidxcode / open-source-hands 多模态 TypeScript
浏览器手势游戏工具包,MediaPipe 手部追踪加手势引擎
这是一套在浏览器里用摄像头做手部游戏的开源工具包,底层跑 Google 的 MediaPipe Hand Landmarker,把每只手的 21 个关键点转成稳定的游戏输入。它内置约 1600 行无依赖的 TypeScript 手势引擎,能识别 20 种静态手势(握拳、比心、捏合、点赞等)、16 种动作(挥手、画圈、推拉、投掷等)以及拍手、缩放、转向等双手手势,还带平滑和防抖处理,避免手势误触发;视频全程留在本地设备。仓库附带一个完整的 three.js 起步游戏模板和一份从 17 个手部游戏总结出的开发手册,作者用它做过《Show of Hands》等 15 款小游戏。它还专门为 coding agent 写了入口文档,你可以直接让 Claude Code 等工具照着模板生成新游戏,比如「用手指挥交响乐」。适合想做体感互动网页、线下活动 demo 或给产品加手势交互的前端和创意开发者;纯后端或做模型训练的人关系不大。
★ 130 24h +17 ⑂ 21 创建 2 天前 更新 2 天前
andyhuo520 / digital-human-koubo 多模态 TypeScript
一张照片加一句话,Agent 自动生成数字人口播短视频
这是一个给 AI 编程 Agent 用的技能包,让 Claude Code、Codex 这类助手能从一张照片加一句话自动生成完整的数字人口播视频:写脚本、生成对口型的 AI 主播、清理配音、加字幕,再套上 YouTuber 风格的包装组件,底层调用 Renoise MCP 和 Grok Video 1.5。它内置 5 种成片风格和 48 个包装组件,覆盖直播带货广告、产品推荐、教程讲解、产品发布拆解等常见短视频形态,还带成本闸门——生成前先报段数、时长和积分消耗,等你确认再批量跑,并用 whisper 转写比对脚本做质检。适合做短视频内容的运营、自媒体创作者,以及想用 Agent 批量生产口播视频的 AI 应用开发者;如果你不做视频内容,跟你的关系不大。
★ 1.7k 24h +17 ⑂ 404 创建 10 天前 更新 4 天前
tesseract-ocr / tesseract 多模态 C++
老牌开源 OCR 引擎,可离线批量识别 100 多种语言
Tesseract 是最老牌的开源 OCR 引擎,最初由 HP 在 1985 年开发,后来长期由 Google 维护,如今是文档识别领域的事实标准之一,很多商业 OCR 产品底层都用了它。它能把图片里的文字提取出来,支持 100 多种语言,能处理 PNG、JPEG、TIFF 等常见格式,输出纯文本、PDF、hOCR、TSV 等多种格式;4.x 起加入了基于 LSTM 神经网络的识别引擎,识别准确率明显提升,同时保留了旧版字符模式识别以兼容老场景。典型用途包括批量扫描件转文本、发票和合同的信息抽取、古籍数字化、字幕提取等。它不带图形界面,主要以库和命令行形式集成到应用里。如果你在做文档数字化、数据抓取或 RAG 数据清洗,需要一个可离线部署、可训练自定义语言的 OCR 组件,Tesseract 值得认真评估;但如果你只是偶尔识别一两张图,直接用现成的云服务或桌面工具更省事,这个项目和多数从业者关系不大。
★ 77k 24h +16 ⑂ 10k 创建 2014-08-12 更新 2 天前
opencv / opencv 多模态 C++
计算机视觉与图像处理的基础库
OpenCV 是计算机视觉领域的老牌基础库,可以理解为图像处理界的瑞士军刀:从读取图片、缩放裁剪、颜色空间转换,到人脸检测、目标跟踪、相机标定,几乎所有「让程序看懂图像」的底层操作都能在里面找到现成实现。它被广泛用在工业质检中检测产品缺陷、在自动驾驶里做车道线识别、在安防监控中做运动检测,也常作为深度学习模型的前处理和后处理环节,比如把摄像头画面裁剪归一化后喂给神经网络,再把输出的检测框画回图像上。如果你是做 CV 算法、嵌入式视觉、机器人或 AI 应用开发的工程师,它几乎是绕不开的工具;但如果你只做大模型或 NLP 相关工作,平时用不到图像处理,那这个项目和你关系不大。
★ 91k 24h +14 ⑂ 57k 创建 2012-07-19 更新 2 小时前
wangweihong / comfyui-costume-gallery 多模态 JavaScript
ComfyUI 中文服装图库节点,内置1407套服装供换装工作流调用
这是一个 ComfyUI 的中文服装图库节点,内置 1407 套服装原图和缩略图,共 8 个分类,支持中英文搜索、分类筛选和随机抽取,可以把它理解为给 ComfyUI 工作流用的本地服装素材库。它本身不执行换装,而是把选中的服装原图作为参考图输出,接入后续支持图像参考的工作流,比如附带的 Qwen Image 2.1 换脸换装、姿态迁移示例:图1原人物、图2服装、图3目标人像,一次采样完成服装替换。你也可以上传自己的参考图入库,随机节点每次运行重新抽一张,锁定后则固定使用当前素材。做 AI 写真、虚拟试衣、电商服装生成的从业者,或者正在搭 ComfyUI 换装工作流、苦于没有成规模中文服装素材的人,值得花两分钟看看;只做纯文本或代码生成的读者和它关系不大。
★ 156 24h +14 ⑂ 29 创建 6 天前 更新 1 天前
threerocks / sweety-handdraw-video 多模态 JavaScript
把文章或主题自动做成边画边讲的手绘有声视频
这是一个把文字内容变成手绘讲解视频的制作工具:给它一个主题、一篇文章或完整故事,Agent 负责理解内容、写口播、设计分镜和生成插画,本地工具则负责逐笔描线、按笔顺书写汉字、上色、配音对齐与导出成片。它类似把「白板动画」类视频的整条流水线自动化了,画风、时长和讲解形式(清单、流程图、公式等)都跟着内容走。典型场景是知识博主或教学团队做概念讲解、故事寓言、产品原理视频——比如把一篇讲墨菲定律的文章改成两分钟有声手绘片,口播按语义段生成并过音质检查,画面按旁白时间戳逐笔出现,改字幕也不用重新生图。适合内容创作者、知识区 UP 主、做内部培训或产品科普的市场与教育岗位;如果你不做视频内容,跟多数从业者关系不大。它需要能执行本地命令的 Agent(Codex 或 Claude Code)和图像生成能力才能跑起来。
★ 1.0k 24h +11 ⑂ 176 创建 23 天前 更新 1 天前
OpenBMB / MiniCPM-OCR 多模态 TypeScript
高效文档解析模型,附带OCR结果质量评估
MiniCPM-OCR 是 OpenBMB 推出的文档解析模型系列,主打把扫描件、照片、弯曲页面等复杂来源的中英文文档和 PDF 快速转成结构化文本,覆盖文字、表格、公式、图表、印章等元素,可类比为 PaddleOCR、MinerU 这类工具的模型级替代品。它在真实文档基准 Real5-OmniDocBench 上取得 93.68 的成绩,配合解码加速后端到端效率提升约 55%,吞吐明显高于 PaddleOCR-VL 和 MinerU2.5 Pro,适合批量处理。系列里的 MiniCPM-OCR Jev 更特别:它不负责识别,而是对 OCR 结果做区域级质量评估,标出哪些区域可信、哪些需要人工复核,能搭配任意解析模型使用。值得看的是做文档数字化、票据或合同信息抽取、RAG 数据管线的后端和算法工程师,以及需要在移动端离线跑 OCR 的开发者;纯前端或非技术岗位关系不大。
★ 819 24h +10 ⑂ 61 创建 8 天前 更新 2 小时前
Arekejoker / qwen21-nsfw-pose-skill 多模态 Python
Qwen-Image 2.1 本地 NSFW/姿势出图配方与 agent skill
这是一套基于 ComfyUI 和 Qwen-Image 2.1 底模的本地出图配方,主打 NSFW 内容和精确姿势控制,同时打包成 agent skill,可直接在 Claude Code、Codex、Cursor、OpenClaw 里调用。它把散落的要素整合成可复现的流程:作者级提示词结构、专用 NSFW LoRA、136 个 3D 姿势库,以及通过 VNCCS 人偶骨骼旋转实现的姿势迁移——比如给一张已有角色图换姿势但保住脸和服装,或者用 3D 人偶摆好动作再一键出图,还提供 L0 到 L3 的大胆度阶梯让你逐级加料。需要 12GB 以上显存的 NVIDIA 卡或 32GB 以上统一内存的 Mac 才跑得动,模型约 16GB。对多数互联网和 AI 从业者来说这与工作关系不大;值得看的是做 AI 绘画工作流、ComfyUI 集成或 agent skill 封装的工程师,以及想在本地跑 Qwen-Image 出图的创作者。
★ 4.1k 24h +10 ⑂ 716 创建 23 天前 更新 9 天前
commaai / openpilot 多模态 Python
开源自动驾驶操作系统,为300多款车升级辅助驾驶
openpilot 是 comma.ai 开源的自动驾驶操作系统,可以理解为给 300 多款量产车加装一套第三方辅助驾驶系统:配合 comma 的车载设备和线束,它接管车辆的自适应巡航与车道保持,让原本只有基础 ACC 的车获得接近高阶辅助驾驶的体验。它解决的是「我的车原厂辅助驾驶太弱,又不想换车」的麻烦,比如长途高速上自动跟车、车道居中,减少驾驶疲劳。项目主要用 Python 写成,包含感知、规划、控制等完整链路,社区活跃,也常被用来研究端到端自动驾驶和实车数据闭环。值得看的人包括自动驾驶算法工程师、做车载感知或规控的从业者,以及想了解真实量产车辅助驾驶系统怎么落地的 AI 工程师;如果你不碰机器人或自动驾驶,和多数人的日常工作关系不大。
★ 64k 24h +6 ⑂ 11k 创建 2016-11-24 更新 1 小时前
datalab-to / indra 多模态 Python
CPU 上跑的轻量 OCR,比 Tesseract 快 15 倍
Indra OCR 是一个只有 100 万参数的轻量 OCR 模型,把 PDF 和图片转成 markdown、纯文本或带坐标框的 JSON,可以理解为 Tesseract 的现代替代品,但完全跑在 CPU 上,不需要 GPU 和 PyTorch。它支持 80 多种语言(含中日韩、阿拉伯文等),能识别手写、歪斜 45 度以内的扫描件,并输出每行每块的版面标签和阅读顺序,比如标题、列表、表格、脚注;遇到带文字层的数字 PDF,它只对缺失部分做 OCR。速度是它的主打卖点:32 核机器上约每秒 44 页,比 Tesseract 快 15 倍,4 核约 210 毫秒一页,精度在 OmniParseBench 上也超过 PaddleOCR 的完整流水线。适合需要批量处理文档的后端和数据工程岗位,比如把合同、发票、论文扫描件灌进 RAG 或数据管线的人;如果你只是偶尔转一两个文件,或者做的是手写、数学公式、复杂表格这类高难度场景,它未必是最优解,README 也明确建议那种情况用他们更大的 Chandra 模型。
★ 1.6k 24h +8 ⑂ 167 创建 22 天前 更新 15 小时前
Nicovic17 / vanish_webcam 多模态 Python
本地摄像头瞬移消失特效工具,可接入 OBS 直播
这是一个本地运行的摄像头特效工具,能把你的摄像头画面实时变成动漫里的「瞬移消失」效果,类似给直播或视频通话加一层趣味滤镜。它用 MediaPipe 做人脸和手势识别,通过按键或手势触发烟雾、粒子等特效,让人物瞬间消失再出现,视频全程只在本机处理,不上传服务器。输出可以接到 OBS Virtual Camera,方便在直播场景里使用。适合想给直播、短视频或线上会议加点整活效果的内容创作者和主播,尤其是喜欢 Naruto、Goku 这类动漫梗的人;如果你不玩直播或不做视频内容,这个项目和你关系不大。另外要注意,打包版 EXE 需要联网激活邮箱许可证,本地源码版则没有这层限制。
★ 871 24h +8 ⑂ 108 创建 26 天前 更新 1 天前
joeblau / subvox 多模态 Swift
用 AirPods 头部运动数据把无声默念转成文字的实验原型
Subvox 是一个 macOS 原型,用来验证一个想法:AirPods Pro 的头部运动传感器数据,能否把你在心里默念、嘴唇微动的词识别成文字。它不依赖语言模型,而是用小词表的模板匹配加统计检验,判断信号是否真实存在。你先对着它无声地念几个词,它把每次的头部加速度、旋转和姿态变化存成模板;之后再默念时,它用动态时间 warping 把新片段和模板比对,输出文字,旁边还并排显示麦克风的实时转写作对照。它还内置留一交叉验证和标签置换检验,告诉你识别准确率是否显著高于随机猜测,并能拆开看加速度、旋转、姿态哪个通道真正携带了信号。对做可穿戴交互、无声语音输入或传感器信号研究的工程师和研究者来说,这是个能快速验证假设的实验工具;如果你不关心这类前沿输入方式,和日常工作关系不大。
★ 732 24h +7 ⑂ 97 创建 5 天前 更新 5 天前
上一页 2 / 3 下一页