test-bit-sys / algeria-geo
Python
阿尔及利亚全量行政区划数据,支持多语搜索与历史边界
这是阿尔及利亚行政区划的地理数据包,把全国 69 个省(wilaya)、538 个区(daira)、1,541 个市镇(commune)的名称、编码、邮编、坐标和边界数据打包成 Python 和 TypeScript 两个库,功能完全对齐,且不依赖任何第三方运行时。它解决的是做阿尔及利亚相关产品时找不到权威、结构化地理数据的麻烦:比如你要做一个地址选择器,可以直接生成阿拉伯语或法语的下拉选项;用户输入「Warqla」能模糊匹配到「Ouargla」和「ورقلة」,阿拉伯语变音符号、法语重音、音译变体都能折叠处理。数据还覆盖了 1984 年 48 省、2019 年 58 省、2026 年 69 省三个历史时期的边界,方便做跨年代的数据对比,同时提供 GeoJSON 可直接喂给 Leaflet 或 MapBox 画地图。做北非市场业务的后端、前端或数据工程师,以及需要行政区划数据做分析的人值得看;和阿尔及利亚无关的从业者基本可以跳过。
★ 205
24h +5
⑂ 20
创建 5 天前
更新 1 天前
surendrapandar / minilytics
TypeScript
以收入为核心的自托管网站分析,追踪哪个渠道真正带来付费
Minilytics 是一个开源的网站分析工具,可以理解为自托管版的 DataFast 或轻量版 Google Analytics,但它把「收入」放在第一位:除了常规的访问量、跳出率、停留时长,它会直接告诉你哪条推文、哪篇文章、哪个 Google 搜索词甚至哪个 AI 助手(如 ChatGPT)带来的访客最终付了钱。每个付费客户都能看到完整旅程——从首次访问、浏览页面、点击按钮到完成支付的全时间线,还能按来源一键筛选整个面板,甚至有一个实时地球展示当前在线访客。它跑在 Cloudflare 免费套餐上,数据完全存在你自己的账号里。适合独立开发者、solo founder 和做增长的营销人员:当你在 X 上发推、投 newsletter 或做 SEO 时,它能直接回答「这次投放到底赚没赚钱」,而不只是给你一堆虚荣指标。对大厂数据团队或纯技术岗来说关系不大。
★ 811
24h +2
⑂ 197
创建 12 天前
更新 2 天前
pathwaycom / pathway
数据工程
Python
Python 实时 ETL 框架,批流一体并内置 LLM/RAG 管道工具
Pathway 是一个用 Python 写的数据 ETL 框架,可以理解为「能同时处理批数据和实时流的 Flink 替代品」,底层由 Rust 引擎驱动,做增量计算,同一份代码既能本地开发调试,也能直接上生产跑 Kafka 流、日志监控或实时分析。它内置了 LLM 工具封装,能搭实时 RAG 管道,比如把 SharePoint、GDrive 里的文档变化自动同步进向量库,或者用 Ollama 搭私有 RAG,还支持多模态 RAG 和非结构化数据即时转 SQL。连接器覆盖 Kafka、PostgreSQL、Airbyte 等 300 多种数据源。适合数据工程师、做实时数仓或事件驱动告警的后端,以及需要让 RAG 知识库随数据源实时更新的 AI 应用开发者;如果你只做离线批处理或纯模型训练,关系不大。
★ 62k
⑂ 1.7k
创建 2022-11-27
更新 3 小时前
microsoft / markitdown
数据工程
Python
把各类文件和 Office 文档转成 Markdown,方便喂给 LLM
MarkItDown 是微软开源的一个 Python 工具,能把各种文件统一转成 Markdown,可以理解为面向 LLM 的 textract 替代品。它支持 PDF、Word、PowerPoint、Excel、HTML、CSV/JSON/XML、EPub、ZIP 包,甚至图片(OCR)、音频(转写)和 YouTube 链接,转换时会尽量保留标题、列表、表格、链接等结构信息,输出的 Markdown 既省 token 又是主流模型最熟悉的格式。典型用法是把公司内部的合同、报表、PPT 批量喂给 GPT-4o 做摘要、问答或 RAG 检索,省去为每种格式写解析器的麻烦;它还支持插件,比如用 LLM Vision 对文档内嵌图片做 OCR。如果你在做 AI 应用开发、数据管线或知识库建设,需要把异构文档清洗成模型可读的文本,这个工具值得花十分钟看看;纯前端、后端业务开发或不碰 LLM 的人关系不大。
★ 193k
⑂ 14k
创建 2024-11-13
更新 7 天前
Signcluengine / onchain-money-trail-analyzer
JavaScript
跨链追踪被盗加密资金流向并生成报案报告的本地工具
Ferret 是一个本地运行的加密货币资金追踪工具,把被盗资金在链上的流转路径像银行流水一样铺开:粘贴一个地址或交易哈希,它会逐跳追踪资金在 Bitcoin、Ethereum、TRON、BNB Chain、Solana 之间的移动,包括跨链桥和兑换,并标出资金最终停在哪个交易所充值地址、混币器或制裁名单地址上。除了路径,它还会从 ENS、NFT、诈骗站点公开页面、历史举报等公开来源收集钱包背后操盘者的线索,每条线索都附带存档来源和时间,方便日后举证;最后一键生成可直接交给警方和交易所的 PDF 报告,附带申请冻结所需的全部地址。它还提供「追回骗局检测」,帮你识别假冒的资产追回服务,并可对地址设监控,资金再次异动时提醒你补充报案材料。适合加密货币被盗的受害者、做链上取证的调查人员,以及安全或合规岗位需要快速产出资金流向证据的场景;普通开发者和 AI 从业者关系不大。
★ 173
⑂ 13
创建 5 天前
更新 1 天前
PlantCraft / PlantCraft
Python
面向流程工厂的开源工业软件套件,集成数据、分析、报警与AI助手
PlantCraft 是一套面向流程工业(化工、制药、能源等工厂)的开源工业软件套件,把 Historian 数据采集、信号分析、报警管理、看板、流程模型和文档库整合到一个平台里,对标的是 OSIsoft PI 加各类商业组态软件的组合。它对工厂只读,不写 DCS/PLC,可离线部署;每个页面内置 AI 助手,能根据你的描述自动生成分析方法、报警规则、看板或模型,也能基于工厂自身数据和文档回答问题,还提供只读 MCP 接口让你自己的 AI 读取工厂数据。Analytics 会自动巡检所有控制回路和信号,优先报出最差的并说明原因,比如坏数据、回路振荡、阀门卡涩。适合流程行业的工艺工程师、仪表与控制工程师、工厂运维数据团队,以及做工业 AI 应用的开发者;纯互联网或通用 AI 岗位的人关系不大。
★ 149
⑂ 28
创建 7 天前
更新 2 天前
lexifina / romania-law
Python
用 git 历史管理罗马尼亚法律修订,可查任意日期生效文本
这个项目把罗马尼亚的法律体系整个搬进了 git 仓库:每部法律的每一条单独存成文件,法律每次修订生效当天生成一条 commit,而做出这次修订的那部法令就是 commit 的作者。于是你可以直接用 git blame 查某一段文字是哪部法律改的,用 git log 看某一条的完整修订史,也可以用配套工具查询任意历史日期当天生效的法律文本,比如 2014 年 10 月 18 日的《民法典》第 1112 条长什么样。数据覆盖宪法、法律、政府紧急法令等各类规范性文件,来源是罗马尼亚司法部的官方立法门户,每次修订都标注了出处页面。对做罗马尼亚市场合规、法律科技产品或跨境法务检索的人来说,这是一份可直接程序化查询的结构化法律语料;如果你的工作和罗马尼亚法律无关,那它基本用不上。
★ 148
⑂ 10
创建 7 天前
更新 2 天前
DolphinStronghold9 / stolen-crypto-tracer
JavaScript
追查被盗加密货币流向交易所的链上追踪工具
这是一个面向被盗加密货币受害者的追踪工具:粘贴钱包地址或交易哈希,它会沿着链上资金流向一路追查,直到资金进入某个中心化交易所,因为交易所掌握 KYC 信息、有能力冻结这笔钱。支持 Bitcoin、Ethereum、TRON、BNB Chain、Solana 五条主流链,还内置了一键生成警方报案材料的功能。它解决的是受害者「钱被偷了却不知道该找谁」的现实麻烦——过去这类资金追踪往往要花钱请链上调查公司,现在自己就能先跑一遍,锁定交易所后再去报案或联系交易所风控。如果你是做链上安全、反洗钱风控、交易所风控合规,或者本身就是加密货币安全事件的从业者,这个项目的思路和数据源值得翻一翻;普通开发者或不碰加密货币的人则关系不大。
★ 146
⑂ 11
创建 5 天前
更新 3 天前
skavuri143 / mapverity
Python
把映射表变成可执行测试,验证数据管道每个字段的转换正确性
MapVerity 是一个数据管道字段级验证工具,专门解决医疗、保险、金融这类行业里「数据看着没问题但其实错了」的痛点——类型对、非空、在域内,但值就是错的。它把业务分析师已经在维护的 source-to-target mapping 表格直接编译成可执行的测试套件,对每个映射字段从源记录重新推导期望值,再和管道实际写入的结果比对,能处理 COBOL copybook、定宽文件、CSV、JSON、Parquet、S3、MongoDB、SQL 数据库和 REST API 等各种真实数据源。除了逐字段校验,它还能做数据变异测试,主动注入 15 类 ETL 故障来衡量你的测试套件到底能抓出多少、盲区在哪,并用基于公开缺陷数据训练的模型给转换函数打风险分、给出 SHAP 解释,把最可能出问题的检查排在前面跑。适合数据平台工程师、ETL 开发和数据质量负责人在 CI 里做发布门禁;如果你不负责数据管道的正确性验证,和你关系不大。
★ 116
⑂ 117
创建 5 天前
更新 3 天前
floatboatai / OpenMinutes
数据工程
TypeScript
MemoTalk 录音笔的开源工作台:转录、AI 归类、检索复盘
OpenMinutes 是一个配合 MemoTalk S1 录音笔使用的开源工作台,把录音笔里的 MP3 导入电脑后,自动转成可搜索、可分类的文字。它把导入、转录、AI 归类、检索复盘串成一条流水线:每条录音都有清晰的状态标签(待下载、待转录、转录中、待归类、已归档、失败等),支持批量操作。转录用流式 ASR 生成带时间戳的分段文本,AI 归类则用 LLM 生成结构化标题、摘要、分类、标签、要点和待办事项,且可手动修改;还能按分类、标签、阶段筛选,按时间排序,回放时可直接跳到对应句子。对每天产生大量会议、访谈录音的人来说,它解决的是「录了一堆却找不到某段对话」的麻烦。适合需要整理语音记录的产品、运营、研究或助理类岗位,以及想自建语音笔记系统的开发者;如果你不用录音笔或不常处理音频,关系不大。
★ 108
⑂ 0
创建 7 天前
更新 6 天前
novaya-gazeta-ru / archive
Python
抢救性存档俄媒 novayagazeta.ru 全部文章为 Markdown 语料
这是对俄罗斯独立媒体 novayagazeta.ru 的抢救性存档:网站已宣布 2026 年 11 月 9 日关停服务器,该项目赶在截止日前把 2000 至 2026 年间的 93,933 篇文章连同配图抓取为 Markdown 文件,共 1.1 GB 文本和 8.3 GB 图片,按日期归档。它不依赖浏览器和第三方包,只用 Python 标准库直接读取页面内嵌的 JSON 数据,因此速度很快,约每秒 14 个请求,两万篇二十分钟即可完成;由于站点不公开完整索引,脚本还从 sitemap、Common Crawl、搜索接口和 Wayback Machine 等多个来源拼凑 URL,抓取可断点续跑。对做俄语语料、新闻文本挖掘或媒体史研究的人来说,这是一份现成的大规模语料库;如果你的工作与俄语内容、新闻数据无关,这个项目基本不用看。
★ 101
⑂ 16
创建 5 天前
更新 3 天前
上一页
2 / 2