MMCPMarkets
OC

open-compress/claw-compactor

Developer tools

Эта страница переведена автоматически. Технические детали смотрите в оригинале. Открыть оригинал

2 тыс. stars Качество 60 Тренд 25MIT
Repository Install

14-ступенчатый Fusion Pipeline для сжатия токенов LLM — обратимое сжатие, анализ кода с учётом AST, интеллектуальная маршрутизация контента. Нулевая стоимость вывода LLM. Лицензировано MIT.

Обзор

Claw Compactor — это открытый исходный код, построенный на 14-ступенчатом . Каждый этап представляет собой специализированный компрессор — от анализа кода с учётом AST до статистической дискретизации JSON и дедупликации на основе simhash — который интегрируется в архитектуру неизменных потоков данных, где выход каждого этапа питает следующий. LLMLingua-2 отбрасывает токены по шкале перплексности — эффективно для естественного языка, но уничтожает идентификаторы кода, JSON-ключи и шаблоны логов. Claw Compactor использует этапы, учитывающие тип контента, которые понимают структуру того, что они сжимают. - — FusionContext — это замороженный класс данных. Каждый этап генерирует новый FusionResult; ничего не мутируется на месте. - — На каждом этапе есть should_apply(), который проверяет тип контекста, язык и роль перед выполнением любой работы. Этапы, которые не применимы, пропускаются без затрат. - — Cortex автоматически обнаруживает тип контента (код, JSON, логи, различия, результаты поиска) и язык (Python, Go, Rust, TypeScript и др.), затем последующие этапы принимают решения о сжатии, учитывая тип.

Обзор (машинный перевод)

{ “@context”: “https://schema.org”, “@type”: “Программное приложение”, “name”: “Claw Pressactor”, «описание»: «14-ступенчатый Fusion Pipeline для сжатия токенов LLM с обратимым сжатием, анализом кода с учетом AST и интеллектуальной маршрутизацией контента», “applicationCategory”: “DeveloperApplication”, “операционная система”: “Кроссплатформенная”, “softwareVersion”: “7.0.0”, “лицензия”: “https://opensource.org/licenses/MIT”, “url”: “https://github.com/open-compress/claw-compactor”, “downloadUrl”: “https://github.com/open-compress/claw-compactor”, “автор”: { “@type”: “Организация”, “name”: “OpenClaw”, “url”: “https://openclaw.ai” }, “offers”: { “@type”: “Предложение”, «цена»: «0», “priceCurrency”: “USD” }, “ключевые слова”: “сжатие токенов, LLM, AI-агент, fusion pipeline, обратимое сжатие, анализ кода AST, оптимизация контекстных окн” }

–>

Компактор когтей

14-ступенчатый конвейер слияния для сжатия токенов LLM

15–82% сжатия в зависимости от содержания · Нулевая стоимость вывода LLM · Обратимость · 1600+ тестов

Документация · Архитектура · Бенчмарки · Быстрый старт · API

Что такое Claw Pressactor?

Эта страница переведена автоматически. Технические детали смотрите в оригинале.

README

Показан фрагмент оригинального README. Открыть оригинал.

What is Claw Compactor?

Claw Compactor is an open-source LLM token compression engine built around a 14-stage Fusion Pipeline. Each stage is a specialized compressor — from AST-aware code analysis to JSON statistical sampling to simhash-based deduplication — chained through an immutable data flow architecture where each stage’s output feeds the next.

Demo

$ claw-compactor benchmark ./my-workspace

  Claw Compactor v7.0 — Fusion Pipeline Benchmark
  ─────────────────────────────────────────────────

  Scanning workspace... 47 files, 234,891 tokens

  Stage Results:
  ┌──────────────────┬──────────┬───────────┬──────────┐
  │ Stage            │ Applied  │ Reduction │ Time     │
Открыть полный README на GitHub

Рекомендуемые инструменты

Попробуйте другой запрос или уберите фильтр.

Установка

npx skillfish add open-compress/claw-compactor
Новичок в MCP? Начните с руководства на mcpskill.org →