工作流
tjromack/open311-pipeline · Streaming civic-data pipeline: Chicago 311 → Kafka → Claude urgency classification (Langfuse-traced) → DuckDB or Snowflake via idempotent MERGE → dbt SLA marts. Runs with no accounts: make demo-local.
该项目是一个可复用的「流 → 分类 → 数据仓库 → 建模」市民数据流水线模板:轮询 Open311(芝加哥 311)请求,写入按 service_request_id 分键的 Kafka,用 Claude Haiku 4.5 对请求做结构化输出的紧迫度分级(每次调用在 Langfuse 中留有 trace),失败进入死信队列,再通过幂等 MERGE 写入 DuckDB(默认)或 Snowflake,最后由 dbt 构建部门 SLA 合规度数据模型。项目提供无需账号、无需 API key 的本地演示(make demo-local / make demo-local-nokafka),演示回放 300 条真实芝加哥 311 请求及其由 Claude Haiku 4.5 标注的标签;另有一条路径可从城市数据门户加载整个财年(约 212 万行)并测量整体队列的 SLA 合规度。仓库含 61 个 pytest 测试与 45 个 dbt 数据测试,覆盖 schema 漂移、DLQ、MERGE 幂等性等失效模式。README 明确指出其 SLA 阈值为项目自设而非芝加哥官方标准。
展开详情收起详情:open311-pipeline:芝加哥 311 市民服务请求的流式 LLM 紧迫度分类与数据仓库流水线⌄
程序员作为可复用的「流 → 分类 → 数据仓库 → 建模」流水线模板,供数据/分析工程师评估该模式:轮询 Open311 请求、写入 Kafka、用 Claude Haiku 4.5 做结构化输出的紧迫度分级、失败进入死信队列、通过幂等 MERGE 写入 DuckDB 或 Snowflake,再由 dbt 构建 SLA 数据模型;仓库含 61 个 pytest 测试与 45 个 dbt 数据测试,覆盖 schema 漂移、DLQ、MERGE 幂等性等失效模式,可用于参考实现与测试设计。
产品经理用于数据分析与 SLA 合规度衡量:项目提供无需账号、无需 API key 的本地演示,回放 300 条真实芝加哥 311 请求及其由 Claude Haiku 4.5 标注的标签,并可从城市数据门户加载整个财年(约 212 万行)测量整体队列的 SLA 合规度,输出部门 SLA 合规度数据模型,供产品经理参考市民请求的紧迫度分级与合规度分析。
★ 0 · 开发框架
原文发布:未知收录:2026-10-08
综合合集
joconne8/sprinthack-nd-2026 · SprintHack@ND 2026 - problem PRDs and agentic build plan
该仓库是 SprintHack@ND 2026 黑客松的项目资料集合,围绕 Goodwill Michiana 电商报表分析场景,包含本地范围说明、指标字典、v1 契约、开发快速入门(可运行的 Python/SQLite CLI/API)、合成企业数据包、演示数据与验证证据、展示幻灯片与讲解视频,以及面向编码智能体并行开发的周末执行计划。材料还包含获取、数据流水线、仪表盘、AI、QA/演示与生产路线图的子任务 PRD,以及归档的其他 PRD 和会议笔记。仓库以 HTML 为主,未见具体开源许可证说明。
展开详情收起详情:SprintHack@ND 2026:Goodwill 电商报表分析黑客松项目文档与智能体构建计划⌄
程序员仓库提供可运行的 Python/SQLite CLI/API 开发快速入门、v1 契约与合成数据包,程序员可据此搭建和测试电商报表分析的数据流水线与接口。
产品经理仓库包含获取、数据流水线、仪表盘、AI、QA/演示与生产路线图等子任务 PRD,以及指标字典和范围说明,产品经理可用于需求分析与 PRD 撰写参考。
★ 0 · 资料合集
原文发布:未知收录:2026-10-06
工具
rsm-sdeenadayalan/wildchat-analytics · Loupe: user analytics for GenAI assistants. 3.2M real conversations, a browser-side dashboard, and a full PM case study (PRD, metrics framework, trends report, retro).
Loupe 将原始对话日志转化为产品经理所需的用户洞察,回答谁在使用助手、使用强度、使用目的以及在哪里体验失败等问题。项目基于 WildChat-4.8M 的 320 万条真实人机对话构建与演示,提供数据处理流水线、浏览器端仪表盘以及完整的 PM 案例研究(含机会简报、指标框架、趋势报告与复盘),并附带可复现的标注、分类与指标聚合脚本。
展开详情收起详情:Loupe:面向 GenAI 助手的用户行为分析工具⌄
程序员提供可复现的数据处理流水线脚本,包括数据扁平化、采样、标注、分类与指标聚合,并配有单元测试,可用于构建和测试对话日志分析流程。
产品经理将 GenAI 助手的原始对话日志转化为产品经理所需的用户洞察,回答谁在使用助手、使用强度、使用目的以及在哪里体验失败等问题;仓库还提供机会简报、指标框架、趋势报告与复盘等 PM 案例研究材料,可用于用户研究与数据分析工作。
★ 0 · 可直接使用的工具
原文发布:未知收录:2026-10-04
工具
docling-project/docling · Get your documents ready for gen AI
Docling 是一个 Python 文档处理工具,可解析 PDF、DOCX、PPTX、XLSX、HTML、EPUB、图像、音频等多种格式,并提供高级 PDF 理解能力,包括页面布局、阅读顺序、表格结构、代码、公式与图像分类等。它使用统一的 DoclingDocument 表示,支持导出 Markdown、HTML、DocTags 和无损 JSON 等格式,可与 LangChain、LlamaIndex、Crew AI、Haystack 等生成式 AI 生态集成,并支持本地执行、OCR、视觉语言模型、ASR 和 MCP/API 服务。
展开详情收起详情:Docling:将多种文档格式解析并转换为生成式 AI 可用的结构化数据⌄
程序员将 PDF、DOCX、PPTX、XLSX、HTML、EPUB、图像、音频等多种格式的文档解析并转换为 Markdown、HTML、DocTags 或无损 JSON 等结构化数据,供生成式 AI 应用使用;可与 LangChain、LlamaIndex、Crew AI、Haystack 等生态集成,并支持本地执行、OCR、视觉语言模型、ASR 以及 MCP/API 服务。
产品经理将 PDF、DOCX、PPTX、XLSX、HTML、EPUB、图像、音频等多种格式的文档解析并转换为 Markdown、HTML、DocTags 或无损 JSON 等结构化数据,供生成式 AI 应用使用;可与 LangChain、LlamaIndex、Crew AI、Haystack 等生态集成,并支持本地执行、OCR、视觉语言模型、ASR 以及 MCP/API 服务。
★ 67420 · 可直接使用的工具
原文发布:未知收录:2026-09-21
工具
scenic-industrialarts74/Q-ReAlign · Evaluate image quality with lightweight, human-aligned multimodal vision-language models that run on minimal hardware.
Q-ReAlign 是一个在本地计算机上运行语言模型的工具,用于对信息打分、重组文本和管理数据集,无需复杂编程。它提供 0.8B、4B、9B 三种模型规格供用户按硬件选择,并包含数据集构建、文本评分和 CLI 工作流等功能。程序完全在本机运行,无需账号或联网即可使用主要功能,仅下载模型文件时需要一次网络连接。
展开详情收起详情:Q-ReAlign:用轻量语言模型在本地完成文本评分与数据处理⌄
程序员在本地运行轻量语言模型对文本进行评分、重组文本和管理数据集,并通过 CLI 工作流自动化重复任务,无需复杂编程。
产品经理使用本地语言模型对文本按给定指令打分排序,并将评分导出到电子表格,用于整理和评估文本类数据。
★ 0 · 可直接使用的工具
原文发布:未知收录:2026-09-18
工具
microsoft/markitdown · Python tool for converting files and office documents to Markdown.
MarkItDown 是微软开源的轻量级 Python 工具,用于把 PDF、PowerPoint、Word、Excel、图片、音频、HTML、CSV/JSON/XML、ZIP、YouTube URL、EPub 等多种格式转换为 Markdown,并尽量保留标题、列表、表格、链接等文档结构,主要面向 LLM 与文本分析流水线。它提供命令行与 Python API,支持可选依赖、第三方插件、通过 LLM 生成图片描述,以及 Azure Document Intelligence 与 Azure Content Understanding 云端转换(后者按调用计费,并支持 YAML 结构化字段抽取)。
展开详情收起详情:MarkItDown:将文件与办公文档转换为 Markdown 的 Python 工具⌄
程序员在开发 LLM 或文本分析流水线时,使用 MarkItDown 的 Python API 或命令行将 PDF、Word、Excel、PPT 等文档转换为 Markdown,以便作为 LLM 输入或进行文本分析。
产品经理产品经理在整理用户研究资料、需求文档或数据分析时,可使用 MarkItDown 将 PDF、Word、Excel 等格式的文档转换为 Markdown,便于后续文本分析或输入 LLM 处理。
★ 183988 · 可直接使用的工具
原文发布:未知收录:2026-09-15