Harzva/dsh-research-lab

Harzva★ 0TypeScriptLast synced: 2026-08-17

Open on GitHub

DSH-native multi-runtime baseline, ablation, and reproducible evaluation control plane

README excerpt

DSH Research Lab dsh-research-lab 是独立的 DeepSeek Harness 研究插件:在 DSH Web 内管理多推理 Runtime、固定 Baseline、生成消融矩阵,并冻结可复现的实验 Manifest。 开发者检索关键词: dsh 、 dsh-plugin 、 deepseek-harness 、 dsh-research-lab 、 reasoning-runtime 、 agent-evaluation 、 ablation-study 。 M0 边界:当前是 Manifest-first 控制面。它不会调用模型、不会产生 API 费用,也不宣称 Plan-and-Execute、Tree of Thoughts 或 Reflexion 已经可运行。 已实现 - 独立 DSH 插件包 @harness-flow/dsh-research-lab 。 - DSH 原生入口: Settings → Plugins → Research Lab 。 - Runtime Catalog:ReAct Default、Plan Guided、Code Orchestration,以及明确标记为设计态的 Plan-and-Execute、ToT、Reflexion。 - 固定 DSH、Profile、Preset、模型、数据、预算、指标与种子的 Baseline 协议。 - Runtime × repetitions 消融矩阵,最多 64 个 planned runs。 - 规范化 JSON + SHA-256 的确定性 Manifest。 - DSH Home 私有、原子、幂等存储;API 不返回绝对路径或凭据。 - Windows/Linux CI、TypeScript 构建和单元测试。 本地开发 要求 Node.js 22+、pnpm 11,以及当前已验证的 DSH 0.1.0-rc.6 。 把生成的 .tgz 安装到 DSH Web Profile: 文档 - ROADMAP — 唯一执行控制面 - M0 PRD - 架构 - Experiment Schema - M0 本地证据 本项目是社区项目,不代表 DeepSeek 官方背书。

View full README on GitHub →
Searchablation-studyagent-evaluationdeepseek-harnessdshdsh-plugindsh-research-labreasoning-runtimeagent

Category