НОВОЕ: кольца конфиденциальности Solana уже доступны в основной сети
Баннер Agave 3.1
Блог/Обновления

Обновление Agave 3.1: всё, что нужно знать

ИсследовательLostin в X
Чтение: 13 мин

Большое спасибо 0xIchigo и Brian Wong за рецензирование предыдущих версий этой работы.

Введение

Вышла Agave v3.1 — новейшая версия клиента Solana Agave. Обновление включает широкий набор улучшений производительности клиента, эксплуатации валидаторов и удобства разработки. Оно также активирует несколько важных функций, которые закладывают основу для распределения вознаграждений за блоки на уровне протокола, значительного снижения залога за состояние (то есть арендной платы) и, что особенно важно, предстоящего обновления консенсуса Alpenglow.

Основные обновления Agave 3.1

  • Снижение дискового ввода-вывода при повторном воспроизведении
  • Более быстрые перезапуски клиента
  • Обработка транзакций в 2 раза быстрее
  • Увеличенные лимиты Account Infos для CPI*
  • Vote Account V4 для валидаторов и отложенные обновления комиссии*
  • Сокращение числа раундов ChaCha в Turbine*
  • Новый указатель на данные инструкции*
  • Улучшения RPC

* обновление с активацией через feature gate

Независимо от того, управляете ли вы валидатором или разрабатываете приложения, это руководство познакомит вас с обновлениями и поможет эффективно использовать последние улучшения. Каждый раздел статьи самодостаточен, поэтому вы можете сосредоточиться на наиболее важных для вас темах. 

На момент написания Agave 3.1.8 считается кандидатом на обновление mainnet (MUC), а Anza ищет добровольцев, которые помогут довести долю стейка этого выпуска до 25%. Валидаторы, пора обновляться!

Повышение производительности клиента

Этот крупный выпуск Agave включает ряд улучшений производительности. Ниже мы рассмотрим наиболее важные из них.

Снижение дискового ввода-вывода при повторном воспроизведении 

Agave 3.1 значительно снижает дисковую активность при повторном воспроизведении. На изображении ниже показан 10-секундный интервал профилирования повторного воспроизведения в Agave 3.0 при обработке реальных транзакций mainnet. Число дисковых операций, обозначенных красными маркерами, превышает 1 100. Это проблема, поскольку каждое обращение к диску вызывает ожидание ввода-вывода и повышает нестабильность задержки как при банковской обработке, так и при повторном воспроизведении. 

В Agave 3.1 дисковый ввод-вывод при повторном воспроизведении резко сокращён. За тот же 10-секундный интервал выполняется менее 80 дисковых операций — на 93% меньше. Это повышает стабильность повторного воспроизведения, уменьшает износ дисков и помогает продлить срок их службы.

Более быстрые перезапуски клиента

Скорость перезапуска клиента продолжает значительно расти, главным образом благодаря оптимизации AccountsDB. В основных выпусках Agave 1.* перезапуск обычно занимал более 30 минут. В выпусках Agave 2.* это время сократилось до менее чем 10 минут. В Agave 3.1 перезапуск стал ещё быстрее и теперь обычно занимает меньше минуты. Ожидается, что следующий крупный выпуск, Agave 4.0, сократит время перезапуска до менее чем 30 секунд. Это дополнительно повысит время безотказной работы валидаторов и ускорит восстановление после обслуживания или непредвиденных сбоев.

Более быстрая обработка транзакций

Agave 3.1 включает ключевые исправления, которые значительно повышают эффективность обработки транзакций. Ранее из-за ошибок в конвейере обработки транзакций банковские рабочие потоки тратили слишком много времени на синхронизацию с Proof of History, а не на выполнение транзакций. Поэтому в режиме лидера клиент примерно 61% времени не планировал транзакции активно.

После устранения этих проблем в Agave 3.1 банковские рабочие потоки теперь тратят ~91% времени на обработку транзакций. В результате транзакции обрабатываются вдвое быстрее, что значительно повышает пропускную способность и эффективность использования времени лидера.

Среди других заметных улучшений производительности — хранение индекса аккаунтов целиком в памяти по умолчанию. Переходы между эпохами также значительно ускорены и теперь занимают менее 400 мс вместо более чем двух секунд. Благодаря этому при смене эпох пропускается намного меньше слотов.

Повышение устойчивости сети

Anza вкладывает значительные ресурсы в устойчивость клиента Agave: непрерывное стресс-тестирование, работу red team и мониторинг ситуации в реальном времени. Ранее детали этой работы оставались конфиденциальными, однако программа достигла достаточной зрелости, чтобы теперь можно было рассказать об этой важной работе публично. Специализированная команда invalidator в Anza активно атакует публичную testnet Solana, каждый час применяя новый набор тестов. 

Тесты делятся на две основные категории. Первая посвящена сценариям отказа в обслуживании на сетевом уровне, стресс-тестированию обработки обратного давления и сбросу нагрузки в экстремальных условиях. Вторая включает создание специально подготовленных блоков с необычными и враждебными транзакциями, призванными проверить пределы Solana VM.

Anza систематически моделирует сценарии атак и разрабатывает средства защиты от них. Эта работа опирается на реалистичные модели угроз: что способен сделать злонамеренный, хорошо информированный валидатор с достаточным стейком и что может попытаться предпринять внешний, хорошо финансируемый и опытный разработчик.

Этот уровень готовности подтвердился в декабре, когда Solana выдержала крупную DDoS-атаку, продолжавшуюся несколько недель. По имеющимся данным, её пиковая мощность достигала почти 6 Тбит/с, что делает её одной из крупнейших когда-либо зафиксированных атак на распределённую систему. Несмотря на огромный масштаб, заметного влияния на сеть почти не было: на протяжении всей атаки подтверждения занимали менее секунды, а задержка слотов оставалась стабильной.

Увеличенные лимиты Account Infos для CPI

Активация SIMD-0339: увеличение лимита Account Infos для CPI в mainnet запланирована на цикл выпуска Agave 3.1. Изменение почти в четыре раза увеличивает лимит данных об аккаунтах для межпрограммных вызовов (CPI): с 64 до 255. Это решает давнюю проблему разработчиков программ, которым необходимо передавать через CPI большие списки аккаунтов. Account infos — это сериализованные метаданные аккаунтов, передаваемые в системные вызовы CPI. Они позволяют вызываемой программе читать аккаунты, предоставленные вызывающей стороной.

Ранее каждый системный вызов CPI мог содержать не более 64 account infos. Из-за этого ограничения программам приходилось удалять дубликаты и заново формировать списки аккаунтов перед вызовами CPI, что повышало сложность и накладные расходы. На практике многие реальные программы регулярно превышают этот порог — например, оболочки для агрегаторов DEX, таких как DFlow или Jupiter.

Помимо увеличения лимита, этот feature gate меняет стоимость в вычислительных единицахв зависимости от числа account infos и аккаунтов инструкции, передаваемых в CPI. Это сохраняет стимул для программ минимизировать использование аккаунтов. 

Поскольку лимит только увеличивается, изменение полностью обратно совместимо и не влияет на поведение существующих программ.

Vote Account V4 для валидаторов и отложенные обновления комиссии

Два обновления с активацией через feature gate, запланированные на цикл выпуска Agave 3.1, особенно важны для операторов валидаторов. Первое — SIMD-0185: Vote Account V4. Оно вводит новую версию состояния vote account для поддержки будущих обновлений протокола, включая Alpenglow, распределение дохода от блоков и улучшения механизма комиссий.

Сейчас vote account хранит только одну ставку комиссии. Однако после появления описанной в SIMD-0123: распределение дохода от блоков возможности распределять доход от блоков на уровне протокола валидаторам потребуется задавать отдельные ставки комиссии для разных источников дохода.

Кроме того, весь доход от комиссий за блоки, включая базовые и приоритетные комиссии, сейчас зачисляется на identity account валидатора. Это создаёт операционные риски и риски безопасности, поскольку identity account нельзя хранить в холодном кошельке: он должен часто подписывать сообщения для критически важных сетевых протоколов, таких как Turbine и Gossip.

Vote Account V4 устраняет эти ограничения, добавляя в состояние голосования новые поля (см. блок кода ниже). Они позволяют валидаторам настраивать ставку комиссии и аккаунт для сбора инфляционных вознаграждений и дохода от блоков. Обновление также удаляет устаревшее поле prior_voters.

Код
pub struct VoteStateV4 {
    pub node_pubkey: Pubkey,
    pub authorized_withdrawer: Pubkey,

    /// REMOVED
    /// commission: u8,

    /// NEW: the collector accounts for validator income
    pub inflation_rewards_collector: Pubkey,
    pub block_revenue_collector: Pubkey,

    /// NEW: basis points (0-10,000) that represent how much of each income
    /// source should be given to this VoteAccount
    pub inflation_rewards_commission_bps: u16,
    pub block_revenue_commission_bps: u16,

    /// NEW: reward amount pending distribution to stake delegators
    pub pending_delegator_rewards: u64,

    /// NEW: compressed bls pubkey for alpenglow
    pub bls_pubkey_compressed: Option<[u8; 48]>

    pub votes: VecDeque<LandedVote>,
    pub root_slot: Option<Slot>,

    /// UPDATED: serialization structure of the AuthorizedVoters map is
    /// unchanged but will now contain entries for the previous epoch.
    pub authorized_voters: AuthorizedVoters,

    /// REMOVED
    /// prior_voters: CircBuf<(Pubkey, Epoch, Epoch)>,

    pub epoch_credits: Vec<(Epoch, u64, u64)>,
    pub last_timestamp: BlockTimestamp,
}

В рамках обновления значения комиссии будут храниться в базисных пунктах. Однако существующая инструкция UpdateCommission в Vote Program поддерживает только целочисленные процентные значения комиссии. До принятия SIMD-0291: ставка комиссии в базисных пунктах ставки комиссии будут по-прежнему ограничены целыми процентами. Поэтому пока для расчётов комиссии следует использовать целочисленные процентные значения.

Существующие инструменты и программы, которые читают состояние голосования, включая stake program, будут обновлены для поддержки новой версии vote account.

Отложенные обновления комиссии

Второе обновление с активацией через feature gate, важное для операторов валидаторов, — SIMD-0249: отсрочка обновлений комиссии. Это изменение позволяет валидаторам отправлять обновления комиссии в любое время, но они вступают в силу только после завершения как минимум одной полной эпохи.

Vote program будет изменена: из неё уберут действующее ограничение, которое запрещает повышать комиссию в первой половине эпохи. Вместо ограничения времени отправки изменения комиссии протокол вводит задержку до его активации. Валидаторы смогут свободно корректировать ставки комиссии, но новая ставка вступит в силу не ранее чем через одну полную эпоху.

Эта задержка также полезна делегаторам стейка: они получат уведомление о предстоящем изменении комиссии за полную эпоху. Что особенно важно, она предотвращает «комиссионный рагпул» — практику, при которой злонамеренные валидаторы незадолго до границы эпохи временно повышают комиссию до 100%, чтобы забрать вознаграждения, а вскоре после этого быстро возвращают её к обычному уровню.

Снижение залога за состояние (арендной платы)

Высокие требования к залогу за состояние, обычно называемому «арендной платой», остаются одним из важнейших долгосрочных ограничений масштабирования для разработчиков Solana. Сегодня залог за состояние в mainnet обходится дорого: хранение одного гигабайта стоит примерно $1 млн. Например, для создания одного нового токен-аккаунта (ATA) требуется чуть больше 0,002 SOL, что при текущих ценах составляет около $0,25. Из-за этого масштабные прямые аирдропы токенов становятся чрезмерно дорогими. Это также создаёт препятствия для микроплатежей и приложений для платежей в стейблкоинах: им приходится либо субсидировать создание токен-аккаунтов, либо перекладывать расходы на конечных пользователей.

Первым шагом к снижению этой нагрузки станет SIMD-0194: отказ от порога освобождения от арендной платы, активация которого запланирована на цикл выпуска Agave 3.1. Это начало более масштабной работы по существенному снижению и упрощению стоимости хранения. Приложения смогут масштабироваться до миллионов пользователей без чрезмерных требований к капиталу для хранения состояния. Кроме того, сейчас готовятся ещё три SIMD, которые напрямую затрагивают стоимость залога за состояние и дополнительно снижают арендную плату.

SIMD-0194 упрощает будущие обновления арендной платы. Сейчас проверка освобождения аккаунта от неё требует от ончейн-программ относительно больших ресурсов. Текущее вычисление `Rent::minimum_balance` использует арифметику с плавающей точкой (f64) и расходует около 256 вычислительных единиц на вызов. В SIMD-0194 эта величина сокращается до 8 CU благодаря исключению операций с плавающей точкой из логики освобождения от арендной платы.

Для этого поле exempt_threshold (f64) объявляется устаревшим, и программам больше не нужно выполнять вычисления с плавающей точкой при определении статуса освобождения от арендной платы.

В рамках изменения lamports_per_byte_year переименовывается в lamports_per_byte, а значение по умолчанию удваивается с 3480 до 6960. Это отражает историческое правило, согласно которому для освобождения от арендной платы на аккаунте должна храниться сумма, эквивалентная плате за два года. Важно, что обновление не меняет сумму, необходимую для освобождения аккаунта от арендной платы. Оно лишь упрощает и стандартизирует представление и расчёт этого значения.

Обновление полностью обратно совместимо и не повлияет на уже развёрнутые программы.

Что дальше: SIMD-0437

Среди дополнительных SIMD, связанных с арендной платой и ожидаемых позднее в этом году, наиболее важен SIMD-0437: поэтапное снижение `lamports_per_byte` до 696. Предложение описывает структурированный график снижения долгосрочной стоимости залога за состояние путём постепенного уменьшения `lamports_per_byte` с 6960 до 696, то есть в 10 раз.

SIMD-0437 заменяет более раннее предложение SIMD-0436, предусматривавшее единовременное снижение на 50%. Вместо этого SIMD-0437 вводит более детальный график из пяти этапов: 6333 → 5080 → 2575 → 1322 → 696.

Разделение изменения на несколько этапов позволяет сети наблюдать и оценивать рост состояния с течением времени. Кроме того, наиболее спорные сокращения выделяются в отдельные этапы для более ясного обсуждения и управления.

Другие важные обновления цикла выпуска Agave 3.1

Строгое требование: 32 шарда данных и 32 кодирующих шарда

Сейчас Turbine принимает переменное число шардов в каждом наборе FEC. Такое поведение создаёт лишнюю сложность без существенных преимуществ. Проверять индексы шардов становится труднее, поскольку для определения границ индексов получателям нужны кодирующие шарды. Предстоящая активация feature gate для SIMD-0317: требование 32 шардов данных и 32 кодирующих шардов стандартизирует это поведение: каждый набор FEC должен содержать ровно 32 шарда данных и 32 кодирующих шарда. Изменение также улучшает обнаружение эквивокации, что позднее ляжет в основу механизмов принуждения, таких как штрафы со слэшингом.

Статические лимиты инструкций

Сейчас транзакции с более чем 64 инструкциями верхнего уровня проходят первоначальные проверки корректности, но завершаются ошибкой во время выполнения. Это создаёт лишнюю нагрузку на планировщик: транзакции, которые гарантированно завершатся неудачей, попадают в конвейер и расходуют его ресурсы.

Предстоящая активация feature gate для SIMD-0160: статический лимит инструкций решает эту проблему, применяя лимит в 64 инструкции во время проверки корректности транзакции. После изменения любая транзакция с более чем 64 инструкциями верхнего уровня, включая вызовы CPI, не пройдёт проверку и будет немедленно отклонена.

Сокращение числа раундов ChaCha в Turbine

SIMD-0332: сокращение числа раундов ChaCha для Turbine с 20 до 8 обеспечивает небольшое, но заметное улучшение производительности Turbine при распространении данных блоков. Сейчас Turbine использует ChaCha20, чтобы детерминированно перемешивать валидаторов с учётом их стейка при построении деревьев распространения блоков. Такой случайный порядок важен для защиты от атак с цензурированием, но требует дополнительных вычислений.

Раунды ChaCha служат детерминированным механизмом перемешивания: на каждом раунде применяются преобразования, которые дополнительно рандомизируют результат. Большее число раундов обеспечивает более надёжную криптографическую защиту, но также увеличивает вычислительные затраты.

После перехода Agave на XDP повторная отправка стала почти мгновенной, поэтому взвешенное перемешивание теперь занимает большую часть времени выполнения. При затратах около ~1 микросекунды на шард переход с ChaCha20 на ChaCha8 сохраняет достаточную случайность для защиты от цензурирования и не позволяет этому этапу стать узким местом.

Новый указатель на данные инструкции

Сейчас программы sBPF должны разбирать раздел аккаунтов сериализованной входной области, чтобы найти данные инструкции. Поскольку в структуре сериализации аккаунты располагаются перед данными инструкции, программам приходится перебирать каждую запись аккаунта, прежде чем они достигнут сегмента данных инструкции. Это создаёт лишнюю работу для программ, которые преимущественно или исключительно используют данные инструкции.

Предстоящая активация feature gate для SIMD-0321: указатель на данные инструкции в регистре 2 VMустраняет эту проблему, предоставляя 64-битный указатель на данные инструкции в регистре r2 VM в точке входа программы. Указатель напрямую ссылается на начало раздела данных инструкции во входной области. Программы могут сразу обращаться к этим данным, не разбирая сначала раздел аккаунтов. Устранение накладных расходов на разбор снижает потребление вычислительных единиц.

Примечание о совместимости: эта функция обратно совместима только с программами, которые сейчас не читают r2 в точке входа. После активации функции перестанут работать программы, которые некорректно полагаются на ранее присутствовавшее в r2 неинициализированное или случайное значение.

Улучшения RPC

Эндпоинт RPC getProgramAccounts теперь возвращает корректные ошибки JSON-RPC при передаче некорректных фильтров. Ранее недопустимые фильтры молча игнорировались, из-за чего вызов RPC переходил к запросу без фильтрации. Это часто приводило к неожиданно ресурсоёмким запросам и лишней нагрузке на ноды RPC. Теперь некорректные фильтры возвращают понятную ошибку, предотвращая случайные ресурсоёмкие запросы и значительно упрощая отладку.

Кроме того, ошибки проверки подписи в simulateTransaction() и на предварительном этапе sendTransaction() теперь возвращаются как TransactionError::SignatureFailure в поле err результата симуляции, а не выбрасываются как ошибка API JSON-RPC (-32003).

Поэтому приложения, которые ранее перехватывали исключения JSON-RPC при ошибках проверки подписи, теперь должны ожидать эти ошибки непосредственно в ответе симуляции. Приложения, которые уже материализуют и обрабатывают значения TransactionError в результатах симуляции, теперь будут получать TransactionError::SignatureFailure на этих этапах проверки.

Заключение

Agave v3.1 — крупное обновление клиента с рядом улучшений производительности и оптимизаций, включая сокращение дискового ввода-вывода, ускорение обработки транзакций и улучшенную обработку ошибок RPC. Agave добилась заметного прогресса в повышении устойчивости сети к враждебным воздействиям. Этот выпуск также знаменует первый шаг к значительному снижению залога за состояние.

Anza продолжает выделяться как единственная в отрасли команда разработки ядра, которая выпускает улучшения для всего стека, включая отправку исправлений в ядро Linux. Agave 3.1 вскоре станет основой работы сети, а Solana продолжает доказывать свою способность к масштабированию.

Следующая важная веха — Agave 4.0 и запуск Alpenglow в testnet, который сейчас запланирован на начало мая.

Дополнительные ресурсы

Подпишитесь на Helius

Следите за новостями разработки на Solana и получайте уведомления о наших публикациях

Увеличенное изображение