github.com

Снижение стоимости API Claude до 70% через рендеринг текстового контекста в изображения

Команда teamchong выпустила утилиту pxpipe, которая снижает расходы на API Claude до 70% за счет конвертации текстового контекста в графический формат. Биллинг визуальных данных у Anthropic зависит только от их разрешения в пикселях, а не от количества символов на них. Локальный прокси-сервер перехватывает запросы и упаковывает объемные системные промпты, документацию инструментов и старую историю переписки в плотные PNG-файлы. В результате технический контент дает около 3.1 символа на один токен изображения против 1 символа при классической отправке текста.

Механика опирается на возможности моделей к распознаванию текста, что означает неизбежную потерю точности на специфичных данных. По умолчанию утилита использует Fable 5, которая успешно читает сгенерированные графические блоки и решает логические задачи по ним без потери качества. Однако при работе со строгими последовательностями байтов, такими как 12-символьные hex-строки или идентификаторы, возможны тихие галлюцинации — модель придумывает значения вместо выдачи ошибки. Старшая модель Opus справляется с чтением такого плотного контекста значительно хуже, поэтому для нее алгоритм отключен на уровне базовых настроек.

Утилита запускается локально через npx pxpipe-proxy, после чего среда разработки перенаправляется на прокси-порт. Инструмент содержит встроенный калькулятор рентабельности: скрипт оценивает плотность символов в каждом запросе и применяет конвертацию только там, где математика токенов гарантирует снижение цены. При этом генерация ответов от нейросети происходит в стандартном текстовом потоке без изменений.

Поделиться:

Telegram

Ещё из архива

Все публикации