Перейти к содержимому
Экосистема AI Vibe

Разборы

A2A CLI и Rust: один бенчмарк, три способа «отдать» агента

Редакция 4 ноября 2026 г.

A2A CLI и Rust: один бенчмарк, три способа «отдать» агента

Три способа отдать один Rust-к compute в A2A v1.0: официальный SDK, программа под a2a server --exec и координатор ADK на Gemini. A2A CLI даёт общую консоль для карточек и вызовов, но порядок величин другой: миллисекунды у SDK и exec против секунд у облачного координатора; на локальном железе ошибка «все быстро» бьёт по UX агента и по бюджету Vertex.

Один Cargo-проект и три «двери» в A2A v1.0

Эксперимент устроен так, чтобы математика не мешала сравнению. Один проект на Rust: общая библиотека с тестом Lucas–Lehmer по первым N экспонентам чисел Мерсенна и четыре бинаря. Три из них обслуживают один и тот же compute тремя способами.

Первый путь: нативный агент на официальном Rust SDK (mersenne-agent, порт 8104), AgentExecutor и три роутера, интерфейсы JSON-RPC и HTTP+JSON, оба под A2A protocol 1.0. Второй: программа stdin/stdout без A2A в исходниках (mersenne-exec, 8105), которую протокол получает через обёртку a2a server --exec. Третий: координатор LlmAgent в ADK на Vertex (rust_bench, 8106); CLI ходит к card URL координатора, а тот уже дергает Rust-агентов как remote tools.

Исходники rig лежат в репозитории автора. Карточка агента в таблице версий помечена как Major.Minor → 1.0; историю «до v1.0» Bill не разбирает, зато явно показывает data parts: protobuf Struct отдаёт числа как double (count: 6 приходит как 6.0), и советует as_f64 с проверкой целости.

Цифры эксперимента: миллисекунды протокола и секунды координатора

Замеры делали с двух сторон: из shell через a2a send и из Rust-клиента mersenne-bench (crate a2a-client-lf). Для прямых вызовов SDK и exec по 20 повторов на каждое N от 1 до 26; через ADK три повтора, одна серия на модель.

Сводка по overhead Rust-клиента (round trip минус compute агента):

Путь Overhead (Rust client) a2a send из shell, N=1
Official Rust SDK 0.55–1.40 ms 20.74 ms
a2a server --exec 3.33–5.05 ms 20.81 ms
ADK coordinator 1328 ms (gemini-3.5-flash), 2283 ms (gemini-3.8-flash) 2664.00 ms (3.8-flash)

Все вызовы до N=26 вернули корректный found; расходились только накладные расходы оболочки, не сам ответ агента.

Отдельно Bill вытащил стоимость самого CLI: медиана одного a2a send -o json к SDK-агенту 20.74 ms, из них 7.62 ms уходит на старт процесса (a2a version в том же прогоне). Скрипт cli-bench.py даёт медиану «median of per-N medians» для native 20.28 ms, exec 17.51 ms, ADK 3.8-flash 2217.55 ms (78 вызовов). Альтернативный прогон cli-transport.py (N=1, 30 runs): JSON-RPC 20.74 ms, --transport rest 21.49 ms, exec 20.81 ms.

По таблице протокол SDK и exec-обёртка добавляют порядка 1–5 ms на клиенте; координатор ADK даёт секунды на round trip при том же compute в Rust. Это не «медленный Rust», а цена маршрута через LLM-координатор.

Оговорки Bill не прячет. Compute при back-to-back и с паузой 1.3 s расходится (пример N=20: 26.07 ms vs 68.09 ms); причину на уровне CPU он помечает как «untested». Серии ADK: одна выборка на модель на Vertex global; разница 3.5-flash и 3.8-flash не многократный прогон. Замеры на одном ноутбуке 13th Gen Intel Core i7-1360P, Linux, release, все процессы на одной машине, даты 2026-11-03 и 2026-11-04. Не гоняли: gRPC transport, task cancel, task subscribe, push, authentication.

CLI, exec и координатор ADK: один пульт и облачная цепочка

Для vibe-coding сильнее сигнал в другом: один Go-бинарь закрывает card get, send, --stream, REST, data parts, -o json, task list, --async, task get --wait и для нативного SDK-агента, и для exec-обёртки, и для card координатора.

Установка: Homebrew, WinGet, release binaries или:

go install github.com/a2aproject/a2a-cli@latest

go install кладёт бинарь как a2a-cli; Bill переименовывает его в a2a, на машине версия a2a v0.3.1. npx/cargo для самого CLI не фигурируют.

Минимальный repro агентов: git clone → cd rust-dev/a2a-benchmark-rust → cargo build --release → scripts/start-all.sh (8104 native, 8105 exec). Проверка эха: a2a server --echo --port 8108.

Exec-ветка показывает типичный соло-паттерн: около 30 строк без A2A в коде превращаются в агента, которого потом может вызывать ADK через RemoteA2aAgent. Overhead exec выше SDK на несколько миллисекунд; Bill не разложил долю старта процесса и HTTP и помечает это как «was not measured».

Облачный координатор тянет отдельный контур зависимостей: Python-стек, Vertex и ADC, а не только ещё один порт на 8106. Установка: pip install -U "google-adk[a2a]", auth через gcloud auth application-default login. Скрипт adk-env.sh выставляет GOOGLE_GENAI_USE_VERTEXAI=TRUE, GOOGLE_CLOUD_LOCATION=global, project и MODEL_NAME (по умолчанию gemini-3.8-flash); в бенчмарках фигурирует и gemini-3.5-flash. Запуск: adk api_server --a2a --port 8106.

Сценарий: RemoteA2aAgent смотрит на оба Rust-агента; tool run_benchmark; в истории a2a send видны transfer_to_agent и ответ exec/native. Правила бенчмарка через LLM: timing только из кода/tool; скрипты check-adk-reply.py и adk-reliability.sh на 3.8-flash дают 10/10 pass benchmark replies и 10/10 unnamed → native_rust_agent.

Два флага для exec + ADK Bill выделяет как обязательные: --advertise-address http://localhost:8105 (origin card vs RPC URL) и --chunk=$'\n' для streaming. Без chunk приходит UNSUPPORTED_OPERATION, Python-клиент ADK падает. Квоты Vertex и billing по регионам кроме global Bill не разбирает.

Версии с машины автора (2026-11-03): A2A CLI v0.3.1; a2a-lf / a2a-server-lf / a2a-client-lf 0.4.2 / 0.5.3 / 0.2.9; Rust 1.99.1, edition 2024; google-adk / a2a-sdk / google-genai 2.13.0 / 1.3.0 / 2.34.0.

Что вынести в свой стек

Если нужны быстрые итерации с агентом на своём железе и предсказуемый overhead протокола, цифры эксперимента тянут к SDK или exec и к привычке мерить из CLI и клиента, а не гадать по ощущениям. Если нужен оркестратор на Gemini с делегированием в Rust-tools, ADK осмыслен, но round trip измеряется секундами, и это нужно закладывать в UX агента и в бюджет облака (Vertex global, ADC), а не сравнивать с локальным a2a send «на глаз».

Практический шаг: поднять start-all.sh, прогнать a2a send на native и exec на одном N, затем, если уже есть Vertex, один прогон через ADK с теми же флагами advertise/chunk. Сравнение «тот же код» без общей библиотеки и без фиксированного N было бы другим экспериментом; здесь методика зафиксирована в Dev.to-публикации Bill и в rig на GitHub.


Источники

  • Bill (@xbill), «The A2A CLI and Rust: The Same Code, Three Ways to Serve It», Dev.to (доступ 2026-11-04 UTC)
  • Rig a2a-benchmark-rust, https://github.com/xbill9/rust-dev/tree/main/a2a-benchmark-rust (доступ 2026-11-04 UTC)
  • Introducing the A2A CLI, https://a2a-protocol.org/latest/blog/2026/10/01/introducing-a2a-cli/ (упомянуто в References поста)
  • Репозитории a2a-cli, a2a-rs, документация ADK, ссылки из References поста: https://github.com/a2aproject/a2a-cli , https://github.com/a2aproject/a2a-rs , https://google.github.io/adk-docs/