14级Fusion Pipeline用于LLM令牌压缩——可逆压缩、AST识别代码分析、智能内容路由。零LLM推理成本。MIT授权。
概览
Claw Compactor 是一个基于 14 级构建的开源软件。每个阶段都是专门的压缩器——从支持AST的代码分析到JSON统计采样，再到基于simhash的重复去重——通过不可变的数据流架构串联起来，每个阶段的输出相互传递。 LLMLingua-2 通过困惑度评分丢弃令牌——对自然语言有效，但会破坏代码标识符、JSON 键和日志模式。Claw Compactor 使用内容类型感知阶段，理解所压缩内容的结构。 - — FusionContext 是一个冻结的数据类。每个阶段都会生成一个新的 FusionResult;现场没有变异。- — 每个阶段都有 should_apply（），在进行任何工作前检查上下文类型、语言和角色。不应用的阶段则被零成本跳过。- — Cortex 自动检测内容类型（代码、JSON、日志、差异、搜索结果）和语言（Python、Go、Rust、TypeScript 等），然后下游阶段做出类型感知的压缩决策。
概述（AI 翻译）
{ “@context”：“https://schema.org", “@type”：“SoftwareApplication”， “名称”：“爪式压缩器” “描述”：“14级融合流水线，支持可逆压缩、AST感知代码分析和智能内容路由的LLM令牌压缩” “applicationCategory”： “DeveloperApplication”， “操作系统”：“跨平台”， “softwareVersion”： “7.0.0”， “许可证”：“https://opensource.org/licenses/MIT", “url”：“https://github.com/open-compress/claw-compactor", “downloadUrl”：“https://github.com/open-compress/claw-compactor", “作者”：{ “@type”：“组织”， “名称”：“OpenClaw”， “url”：“https://openclaw.ai" }, “提议”：{ “@type”：“提议”， “价格”：“0”， “价格货币”：“美元” }, “关键词”：“令牌压缩、LLM、AI代理、融合流水线、可逆压缩、AST代码分析、上下文窗口优化” }
–>
爪式压缩机
LLM 令牌压缩的14级融合流水线
根据内容压缩15–82%·零LLM推断成本·可逆性·1600+测试
文档 · 架构 · 基准测试 · 快速入门 · API
什么是爪压缩机？
本页由 AI 翻译，技术细节请以原文为准。
README
以下为原文 README 节选，完整内容请查看原文。
What is Claw Compactor?
Claw Compactor is an open-source LLM token compression engine built around a 14-stage Fusion Pipeline. Each stage is a specialized compressor — from AST-aware code analysis to JSON statistical sampling to simhash-based deduplication — chained through an immutable data flow architecture where each stage’s output feeds the next.
Demo
$ claw-compactor benchmark ./my-workspace
Claw Compactor v7.0 — Fusion Pipeline Benchmark
─────────────────────────────────────────────────
Scanning workspace... 47 files, 234,891 tokens
Stage Results:
┌──────────────────┬──────────┬───────────┬──────────┐
│ Stage │ Applied │ Reduction │ Time │推荐工具
换一个关键词，或者移除筛选条件。
安装
npx skillfish add open-compress/claw-compactor