跳至内容

Solana Firedancer

2024年3月5日2 min

Firedancer

在以下报告中,我们深入探讨 Firedancer,探索其价值主张以及它在实现 Solana 原始白皮书中概述的愿景中所扮演的角色。对于许多人来说,其在生产环境中的发布将标志着迈向 Solana 2.0 的第一步,将硬件和软件的界限推向极限,解决现有验证器客户端的挑战,并重新定义网络的可扩展性、可靠性和效率。

关键要点

  • Solana 的愿景是以硬件为中心的,相信根据摩尔定律的线性可扩展性,并假设软件优化能跟上步伐。
  • 在当前状态下,现有的验证者面临性能和可扩展性问题,主要由于软件限制而非硬件约束。
  • Solana 的网络弹性取决于多样化其验证者客户端,以降低系统性故障风险并增强容错能力。引入 Firedancer,这是一个新的第三方验证者客户端软件,标志着朝着增加这种弹性、促进客户端多样性和解决 Solana 对有限客户端依赖的行动。
  • Jump Crypto(Firedancer背后的团队)的方法基于高性能全球交易系统——这与优化Solana天作之合,最终旨在在物理和理论极限的边缘运行。
  • 虽然Firedancer的开发代表了一个重要的里程碑,但文档、兼容性和社区治理方面的持续努力对于Solana演变为开放标准至关重要。

引言

Solana 的故事始于 2017 年,当时 Anatoly Yakovenko 发布了 原始白皮书,描述了 Proof of History。这概述了构建一个能够克服现有解决方案可扩展性问题的区块链的愿景。它被设计为一个高性能、低延迟的平台——一个你可以构建交易引擎的区块链,这些引擎足以与 Nasdaq 匹敌。

基于 Anatoly 和创始团队提出的原始想法,前提是软件不会妨碍硬件,区块链的整体网络性能可以随着硬件进步而线性增长——按照 Moore’s law 以及观察到集成电路中的晶体管数量大约每两年翻一番,同时成本最小幅上升。假设软件最优,Solana 的性能指标可以每两年翻倍,而无需任何进一步升级。

Source: Medium

然而,即使性能能够随着硬件进步而扩展,有效的节点通信对于防止网络带宽成为瓶颈至关重要,从而避免网络放缓。这一点对于防止任何类型的网络放缓至关重要,即使有硬件进步。

当前的 Solana 验证器客户端存在一些限制,这些限制会影响它们的性能和可扩展性,以及网络可靠性,这是由于缺乏多样性所致。这些限制中的大多数是基于软件的,而不是硬件层面约束的结果。Kevin J Bowers 是 Jump High-Performance Systems 的研究员,他领导着 Firedancer 的开发工作,以一句著名的短语“光速太慢”而闻名。凭借数十年开发高性能全球交易系统的经验,Jump 通过构建一个名为 Firedancer 的独立验证器客户端来提升 Solana 的可靠性。

Source: Solana

Firedancer 不是一种仅通过回顾后视镜来设计的短期补丁。它旨在推动计算的界限,以提供规模和可靠性,在物理和理论极限的边缘运行。

迈向 Solana 2.0

在传统的开发中,操作被视为数据空间的方面,而不是物理空间。这种视角不可避免地受到物理限制的约束,如光速,从而导致硬件利用率不佳和系统速度较慢。

Source: Revelo Intel

由于传统开发实践常常忽略物理限制,这导致硬件利用率不佳。换句话说,系统可扩展性不是受硬件限制,而是受低效软件限制。有一句著名的名言:“更快的硬件是解决慢速软件的坏第一解决方案”.

Jump Trading 直面这些约束,从传统的交易系统演变为高度定制化的技术栈。这一转型解决了全球规模交易的独特挑战,其中与交易所的物理接近性、异构的市场要求以及严格的操作标准至关重要。

与传统的超级计算机不同,Jump 的系统必须快速、透明的容错,并可逐步升级。它们需要在多样化、竞争激烈且高度监管的环境中运行,遵守严格的数据保留和问责标准。仅仅为 Solana 添加更多硬件是不够的。相反,软件的优化是关键,而 Firedancer 推动它更接近实现这些目标。

作为参考,一个运行 Firedancer 的单个验证器在 2022 年 11 月的实时演示中处理了 1.2M TPS ,尽管大多数估计认为 600k TPS 是一个更现实的数字。这个数字是 Solana 当前理论极限 50k TPS 的许多倍,并且远远超过像 Visa 这样的领先服务提供商通常处理的交易量(~1.5k – 2k TPS)。

Source: Twitter

Firedancer 为 Solana 的验证者客户端架构和功能带来了范式转变。它不仅仅是构建一个验证者客户端;它是构建一个高度可靠且性能导向的客户端,从而提升了 Solana 区块链本已快速高效的特性。

Source: Frictionless Capital

借助 Firedancer,Jump 正在引领许多人称之为 Solana 2.0 的发展。通过利用在高频交易环境中的多年经验,将这个即将推出的独立验证器客户端添加到 Solana 的工具包中,将有助于使网络更加可靠、高性能和健壮。

Source: Revelo Intel

Solana 出色的速度以及最近对停机问题的解决方案使其脱颖而出。然而,还有进一步改进的潜力。Firedancer 旨在成为跨区块链表现最佳的验证器客户端,改善 Solana 的客户端多样性并解决其目前对少数客户端的过度依赖。





Source: Github

设置舞台

在 Solana 中,验证者参与 Solana 的 Proof of Stake 共识机制来验证交易并提出要添加到链上的新区块。

Source: Revelo Intel

这样,Solana ($SOL) 代币持有者可以通过在验证节点中锁定他们的 $SOL 代币来参与共识并获得质押奖励。

Source: Revelo Intel

权益证明 (PoS) 提供了正向和负向激励。参与者需要将资金作为保证金进行质押。如果验证者违反规则,他们的部分质押将被“slashed”作为惩罚。否则,他们将获得 staking rewards 作为补偿。

为了完成工作并与网络中的其他节点连接,验证者需要使用 validator clients,这些是使他们能够参与 consensus 的应用程序。这是允许验证和确认交易的软件,以确保它们遵守网络规则。

不同的验证者客户端可以包含不同的代码,但它们都必须实现相同的逻辑。这很重要,因为如果其中一个客户端出现 bug 或故障,运行其他客户端的节点将能够保持网络在线并防止其出现停机时间。

Source: Revelo Intel

增加客户端多样性意味着在验证者客户端代码中可能存在的错误或漏洞方面,具有更多的弹性和保护措施。例如,在 2016 年,攻击者发现了一个漏洞 在 Ethereum 的 geth 客户端中,并开始通过一系列 DDoS(分布式拒绝服务)攻击来攻击网络。为了防范这种情况,解决方案是让节点运营商快速切换到另一个客户端,在修补漏洞的同时保持网络运行。

Solana 验证器客户端的当前状态

Solana 目前拥有 ~1,649 validators,按节点数量计算,它拥有最大的 PoS 网络之一,同时也是最分散的之一,以 Nakamoto Coefficient 来衡量。Solana 上的当前验证者客户端是 Solana Labs client 和 Jito Labs client,分别持有 68% 和 32% 的活跃质押。尽管 Jito Labs 客户端在 2023 年增长中发挥了关键作用,促进了网络的多样化,但仍有工作要做。

Jito 客户端是 Solana Labs 客户端的一个分支,其区别在于它引入了一个伪内存池(因为 Solana 没有真正的内存池)来优化 MEV。这允许验证者搜索内存池中未确认或待处理的交易,将它们最优地捆绑在一起,并提交到 Jito Block Engine。

Source: Revelo Intel

然而,它是一个分叉的事实意味着两个客户端共享了许多在原始代码库中开发的组件。因此,如果原始 Solana Labs 客户端中存在任何未被发现的漏洞或 bug,两个客户端都会受到影响。

展望未来,除了现有的两个客户端(Solana Labs 和 Jito)和 Firedancer 之外,还有两个独立团队正在开发新的客户端。这总共构成了 5 个验证器,其中三个使用 Rust(Solana Labs、Jito 和 Agave by Anza),一个使用 C(Firedancer),一个使用 Zig(Sig by Syndica)。

为什么需要另一个验证器客户端?

拥有像 Firedancer 这样的另一个验证器客户端对于 Solana 来说很重要,因为它能提升网络的弹性和性能。多样化的验证器客户端可以降低系统性故障的风险,因为不同的客户端可能对相同网络问题有不同的响应。

Source: Solana

验证器客户端软件的多样性确保一个客户端中的单一错误或漏洞不会危及整个网络。此外,像 Firedancer 这样的专用客户端可以带来针对 Solana 独特需求量身定制的性能改进,进一步增强网络的效率和可靠性。

Source: Revelo Intel

当网络上运行多个不同的客户端时,它们不太可能共享相同的漏洞。如果一个客户端由于特定错误或攻击而失败,其他具有不同架构的客户端可能不受影响,从而确保网络的连续性和稳定性。

Source: Revelo Intel

另一个问题是,当前的客户端(Solana Labs 和 Jito)以单一进程运行——这使得一旦在生产环境中运行,就很难更改代码。例如,运行这些客户端的验证者需要在实施即时安全升级时被迫关闭。所有分布式系统——无论是中心化的支付处理器、数据库还是区块链——都有一个共同点。单一的实现错误就可以让整个系统崩溃。

此外,任何测试都无法防止所有可能的错误。这就是为什么在生产环境中支持多个客户端如此重要,特别是对于一个旨在实现零停机时间并在被推向极限时变得反脆弱的区块链。

理想情况下,可能涉及由独立团队开发并使用不同编程语言的 4 个客户端,每个客户端占有活跃权益的 25% 支配地位。这样,没有单一实现会占有超过 33% 的活跃权益,从而有助于防止单一故障点。

Source: Revelo Intel

除了提升性能之外,Jump 正在为 Solana 构建一个新的验证器客户端,以解决网络的可靠性问题。例如,Solana 在过去已经经历了 4 次事件,其中区块生产因影响共识的软件模块问题而停止。这些事件通常通过 Discord 协调验证器来解决,并需要手动修复。

一旦 Firedancer 投入生产,它将更容易将相同的优化应用于所有其他客户端。例如,Jito 正在开发 JitoDancer,它将实现必要的优化以与 Firedancer 协同工作。

Firedancer

Firedancer 是 Solana 当前验证器客户端用 C 编程语言重写的版本,确保不会从原始代码库中携带任何 bug。

它是由 Jump 从零开始开发的。通过利用他们在高频交易方面的专业知识,Jump 是构建此类高性能、低延迟且容错系统的最有能力的团队之一。

Source: Revelo Intel

该代码是开源的,这使得任何人可以审计并了解正在开发的优化措施。Kevin Bowers 目前正在领导一个在高性能环境中推动技术边界方面有成功记录的团队。他们的专长在于优化数据编排、定制技术栈以及全球扩展系统,这是无可比拟的。

“光速太慢了。”这是 Kevin Bowers——Jump 的首席科学官兼 Firedancer 的技术负责人——在十多年前的一次采访中被问到“你认为 Jump 面临的最大挑战是什么?”时的回答。https://t.co/UWWmlTc5qo1/17 pic.twitter.com/huv2AvY9A0— Jump Crypto (@jump_) August 17, 2022

“光速太慢了。”

这是Jump的首席科学官和Firedancer的技术负责人Kevin Bowers在十多年前的一次采访中被问到“您认为Jump面临的最大挑战是什么?”时的回答。https://t.co/UWWmlTc5qo

1/17 pic.twitter.com/huv2AvY9A0

— Jump Crypto (@jump_) August 17, 2022

像 Jump 一样,Solana 需要一个强大、可适应且高效的基础设施来支持其不断增长的生态系统。引入 Firedancer,这是一个独立的第二个 validator,是朝着这个目标迈出的一步。Firedancer 被设计为全球可扩展的、逐步可演进的、耐故障的,并且对广大社区易于访问。它正在公开开发,邀请 Solana 社区的合作和反馈。

Source: Revelo Intel

除此之外,该客户端仍与 Solana Labs 和 Jito Labs 客户端保持互操作性,尽管它们是用 Rust 编写的。Firedancer 客户端还将与 Solana 验证者使用的现有硬件兼容,而不会迫使它们升级到新机器。借助 Firedancer,Solana 将随着带宽和硬件扩展

Firedancer 的愿景很简单:每个组件都必须针对最大性能进行优化,以便客户端的运行容量仅受验证者硬件的限制。将此与当前状态对比,在当前状态下,验证者的性能受软件低效性的限制。

Firedancer 堆栈

Firedancer 是从头构建的,通过用 C 重写现有 Solana Labs 客户端的 3 个主要功能组件,对每个单独部分进行优化,将客户端推向其硬件极限。

Source: Revelo Intel

本质上,Firedancer 不仅仅是一个验证器;它是 Jump 推动边界并在技术和金融交汇处创新能力的证明——旨在优化交易吞吐量并最小化成本。

Source: Revelo Intel

通过优化这些关键组件,Firedancer 确保 Solana 的扩展主要受客户端运行的硬件限制,而不是软件本身。这与 Anatoly 多年前为 Solana 制定的原始愿景一致:设计一种高效的节点通信方式,使带宽不再成为瓶颈。

在高性能计算的世界中,一切最终都必须优化。这种方法与 Moore’s Law 一致,该定律指出,微芯片上的晶体管数量大约每两年翻一番,从而导致计算能力增加和每个晶体管的成本降低。

Firedancer 的扩展性与微芯片中晶体管的数量密切相关,因为更多的晶体管会导致芯片表面占用更多的物理空间。因此,芯片设计师可以添加更多核心,从而为 Solana 带来更高的数据吞吐量。这使得网络能够在保持足够去中心化水平的同时,随着带宽和硬件改进进行扩展。

Source: Revelo Intel

在 Solana 的上下文中,拥有更多处理器核心意味着能够并行执行更多交易。这导致显著更高的数据吞吐量,因为多个交易可以同时处理而无需相互等待。

早期模拟显示,随着核心数量的增加,带宽几乎呈线性增长。换句话说,将验证者硬件中的核心数量加倍,将导致该验证者在相同时间内接收到的交易数量几乎加倍。

模块化架构

Firedancer 的模块化架构使其区别于现有的客户端。这种模块化指的是其内部结构,旨在提高网络验证过程的效率和可靠性。这不应与更广泛的区块链架构辩论混淆,后者关注区块链网络本身的结构和运作方式。

后者涉及区块链生态系统中劳动分工的讨论,例如分离共识、执行和数据可用性层,这是一个与 Firedancer 的设计原则或功能性没有直接关系的概念。

Source: Revelo Intel

Firedancer 使用基于 tile 的架构,其中每个 tile 是一个独立的 Linux C 进程,带有一些内存。相比之下,当前的 Rust 客户端作为一个单一进程运行。

在这个上下文中,一个进程指的是一个正在运行的程序的实例。例如,现代操作系统通过为不同的进程分配内存和资源来工作,每个进程处理一个特定的任务。

Source: Revelo Intel

Tiles 作为独立进程,比单一进程系统提供了多项优势。它们通过在不同工作空间中管理验证器状态来隔离故障,确保一个 tile 中的问题不会影响整个系统。

这种隔离还简化了维护和升级,因为单个 tile 可以被修改或替换,而无需停止整个系统。例如,每个 tile 可以在重启或升级期间从它中断的地方继续处理。

此外,tiles 能够实现更好的资源利用,因为每个 tiles 都可以运行在独立的 CPU cores 上,避免资源争用并优化性能。这些因素使 tiles 比单进程方法更具鲁棒性、灵活性和效率。

早期测试显示,与 Solana Labs 客户端相比,性能提升了 10-100 倍,在测试期间每个 GPU core 实现了超过 1M tps。

Source: Revelo Intel

安全模型

C 相对于 Rust 的一个权衡是,C 没有 内存安全保证,而 Rust 原生提供这些保证。为了防范这些情况,Jump 采用了一种称为“OS sandboxing”的实践,这基本上指的是将不同的进程(tiles)与操作系统隔离。

遵循 Principle of Least Privilege,tiles 只能访问它们严格需要执行其工作的系统资源并执行系统调用。事实上,C 语言中备受研究的内存安全领域促使团队采用对抗性思维,并尽可能最小化攻击面。如果 tiles 未被隔离,攻击者如果成功在多个验证器上利用此漏洞,则可能对整个网络造成损害。

这种实践承认没有所谓“完美代码”这种东西,并且在某个时刻不可避免地引入 bug 或安全漏洞。然而,为了防范这些场景,Jump 遵循一种 Defense in Depth strategy,以便如果攻击者设法破坏一段代码,其范围将被限制,并且该线程不会影响技术栈的其他部分。

前路展望

毫无疑问,Firedancer 向生产环境的发布是 Solana 的一个重大里程碑,许多人将其称为 Solana 2.0。话虽如此,从安全角度来看,前方仍有挑战。

尽管带来了所有这些好处,Firedancer 仍然需要密切复制现有客户端的行为。否则,由于不兼容性,可能会引入共识 bug。

解决这些担忧的一种方案是在两种客户端上运行一定比例的 stake,旨在在较长一段时间内将 Firedancer 保持在总 stake 的 33% 以下。

最重要的是要考虑到,代码库不能孤立地开发。这就是为什么 Jump 继续根据现有 Labs 客户端的功能审查性能的原因。

Jump 目前面临的另一个挑战是缺乏规范和标准化文档。从积极的一面来看,这将是会改变的事情。

新实现需要在跟上开发速度的同时格外小心,以免引入新错误。因此,Jump 已将其改进 Solana 文档作为优先事项之一。

一旦 Jump 提供实际的规范文档来定义 Solana 协议,任何人应该只需查看文档,而无需查看验证器代码,就能创建 Solana 验证器。

这不仅将帮助 Firedancer 随着时间保持兼容性,而且这份全面的文档还将为其他独立团队构建自己的客户端发挥关键作用。最终,即使网络可以利用 Jump 数十年的专业知识,最终目标是让 Solana 成为由多样化社区贡献者治理的开放标准。

结论

总之,Firedancer 的引入,即使它只是 Solana 的一个独立验证器客户端,也代表了该网络的一个重大里程碑。

Firedancer 旨在提升 Solana 的可靠性、性能和客户端多样性,解决当前过度依赖少数客户端的问题。

这一举措符合 Solana 的愿景,即设计节点之间高效通信的方式,随着硬件改进而扩展,而不是受软件低效的限制。

参考文献

Solana 白皮书

Solana 验证者

Solana Labs 客户端

Jito Labs 客户端

Firedancer 客户端

Tinydancer – Solana 的第一个轻客户端

Jump 与光速的较量

Helius:什么是Firedancer?

Firedancer 文档

披露

Revelo Intel 从未与 Solana 或 Jump Crypto 建立过商业关系,本报告未以任何方式获得报酬或委托。

Revelo Intel 团队成员,包括直接参与上述分析的人员,可能持有所讨论的代币头寸。

本内容仅供教育目的提供,不构成财务或投资建议。您应进行自己的研究,并仅投资您能承受损失的金额。Revelo Intel 是一个研究平台,不是投资或财务顾问。

Alea Research · 2024年3月5日 · 2 min · 11 个章节

返回顶部