區塊鏈數據的重要性及索引器的崛起

數據是區塊鏈技術的核心,也是開發去中心化應用(dApp)的基礎。雖然目前大多數討論集中在數據可用性(DA)上,但數據可訪問性同樣重要卻常被忽視。

在模塊化區塊鏈時代,DA解決方案已成爲不可或缺的一部分。它們確保所有參與者都能訪問交易數據,從而實現實時驗證並維護網路完整性。然而,DA層更像是一個公告板而非數據庫,數據不會長期存儲。

相比之下,數據可訪問性側重於檢索歷史數據的能力,這對開發dApp和區塊鏈分析至關重要。盡管討論較少,但數據可訪問性與數據可用性同等重要。兩者在區塊鏈生態系統中發揮着不同但互補的作用,全面的數據管理方法必須同時解決這兩個問題,以支持強大高效的區塊鏈應用。

區塊鏈數據檢索的傳統方法

區塊鏈的出現徹底改變了基礎設施,推動了遊戲、金融和社交網絡等領域dApp的創建。但構建這些dApp需要訪問大量區塊鏈數據,這既困難又昂貴。

對開發者來說,一種選擇是托管和運行自己的存檔RPC節點。這些節點存儲所有歷史區塊鏈數據,允許完全訪問。但維護成本高昂,查詢能力有限。運行較便宜的節點是另一種選擇,但數據檢索能力有限,可能影響dApp運行。

使用商業RPC節點提供商是另一種方法。這些提供商負責節點成本和管理,通過RPC端點提供數據。公共RPC端點免費但有速率限制,可能影響用戶體驗。私有RPC端點性能更好,但即使簡單數據檢索也需要大量通信,效率低下且難以擴展。

區塊鏈索引器:更優的解決方案

區塊鏈索引器在組織鏈上數據並將其發送到數據庫以便查詢方面發揮着關鍵作用,因此被稱爲"區塊鏈的谷歌"。它們索引區塊鏈數據,通過類似SQL的查詢語言使數據可用。索引器提供統一的查詢接口,大大簡化了數據檢索過程。

不同類型的索引器優化數據檢索:

1. 完整節點索引器:直接從完整區塊鏈節點提取數據,確保完整準確,但需要大量存儲和處理能力。

2. 輕量級索引器:根據需要從完整節點獲取特定數據,減少存儲需求但可能增加查詢時間。

3. 專用索引器:針對特定數據類型或區塊鏈優化,如NFT數據或DeFi交易。

4. 聚合索引器:從多個區塊鏈和來源提取數據,包括鏈下信息,提供統一查詢接口,適用於多鏈dApp。

索引器協議部署多個索引器,可高效索引和快速查詢大量數據。它們還允許復雜查詢、數據過濾和後分析。一些索引器可聚合多個來源的數據,避免在多鏈dApp中部署多個API。分布在多個節點上,索引器提供了更好的安全性和性能。

總的來說,與RPC節點提供商相比,索引器提高了數據檢索的效率和可靠性,同時降低了部署成本。這使得區塊鏈索引器協議成爲dApp開發者的首選。

索引器的應用場景

構建dApp需要檢索和讀取區塊鏈數據才能運行服務。這包括DeFi、NFT平台、遊戲甚至社交網絡等各類dApp,因爲它們需要先讀取數據才能執行其他交易。

DeFi

DeFi協議需要各種信息來爲用戶提供具體價格、比率和費用。自動做市商(AMM)需要資金池的價格和流動性信息來計算掉期利率,借貸協議需要利用率來確定借貸利率和清算的債務比率。在計算用戶執行的利率之前,這些信息對dApp至關重要。

遊戲

GameFi需要快速索引和訪問數據,以確保用戶流暢遊戲體驗。只有通過快速的數據檢索和執行,Web3遊戲才能在性能上與Web2遊戲相媲美,從而吸引更多用戶。這些遊戲需要土地所有權、遊戲內代幣餘額、遊戲內操作等數據。使用索引器可以更好地確保穩定的數據流和正常運行時間,保證完美的遊戲體驗。

NFT

NFT市場和借貸平台需要索引各種信息,如NFT元數據、所有權和轉讓數據、版稅信息等。快速索引這些數據可避免逐個瀏覽每個NFT以查找所有權或屬性數據。

無論是需要價格和流動性信息的DeFi AMM,還是需要更新新用戶帖子的SocialFi應用,快速檢索數據對dApp正常運行至關重要。借助索引器,它們可以高效準確地檢索數據,提供流暢的用戶體驗。

分析

索引器提供了從原始區塊鏈數據(包括每個區塊中的智能合約事件)中提取特定數據的方法。這爲更具體的數據分析提供了機會,從而得出全面的見解。

例如,永續交易協議可以發現哪些代幣交易量大、產生費用,從而決定是否將其列爲永續合約。DEX開發者可以爲自己的產品創建儀表板,深入了解哪些資金池回報率最高或流動性最強。還可以創建公共儀表板,讓開發者靈活查詢任何類型的數據並在圖表中顯示。

由於有多個區塊鏈索引器可用,了解它們之間的差異對於開發者選擇最適合自己需求的索引器至關重要。

主要區塊鏈索引器概述

The Graph

The Graph是首個在以太坊上啓動的索引器協議,可輕鬆查詢以前難以訪問的交易數據。它使用子圖定義和過濾從區塊鏈收集的數據子集,如與某個特定資金池相關的所有交易。

索引器質押原生代幣GRT用於索引和查詢服務,委托人可選擇質押代幣。策展人可訪問高質量子圖,幫助索引器確定要編制哪些子圖以賺取最佳查詢費用。The Graph正逐步向更去中心化過渡,最終將停止托管服務,要求子圖升級到其網路。

其基礎設施使每百萬次查詢的平均成本達到40美元,遠低於自托管節點。使用文件數據源,它還支持同時對鏈上和鏈下數據進行並行索引,實現高效數據檢索。

The Graph的索引器獎勵在過去幾個季度穩步增長,部分源於查詢量增加,也得益於代幣價格漲。他們計劃在未來整合AI輔助查詢。

Subsquid

Subsquid是一個點對點、可水平擴展的去中心化數據湖,可高效聚合大量鏈上和鏈下數據,並通過零知識證明保護。作爲去中心化工作器網路,每個節點負責存儲特定區塊子集的數據,通過快速識別所需數據的節點來加快檢索過程。

Subsquid支持實時索引,允許在區塊最終確定前進行索引。它還支持以開發者選擇的格式存儲數據,便於使用各種工具進行分析。此外,子圖可在Subsquid網路上無代碼部署。

雖然仍處於測試網階段,Subsquid已取得令人印象深刻的成果,擁有超過8萬測試網用戶,部署了6萬多個索引器,網路上有2萬多名經過驗證的開發者。Subsquid最近啓動了其數據湖主網。

除索引外,Subsquid Network數據湖還可在分析、ZK/TEE協處理器、AI代理和預言機等用例中替代RPC。

SubQuery

SubQuery是一個去中心化的中間件基礎設施網路,提供RPC和索引數據服務。它最初支持Polkadot和Substrate網路,現已擴展到200多個鏈。其工作原理類似於使用索引證明的The Graph,但引入了消費者來提交購買訂單,以保障索引器收入。

SubQuery將引入支持分片的數據節點,以優化查詢效率,同時實現更大程度去中心化。用戶可選擇按每1000個請求支付約1 SQT代幣的計算費用,或通過協議爲索引器設置自定義費用。

盡管SubQuery今年才推出代幣,但節點和委托人的發行獎勵也呈現美元價值環比增長,反映其平台上提供的查詢服務數量不斷增加。自TGE以來,質押的SQT總量從600萬增加到1.25億,凸顯了網路參與度的增長。

Covalent

Covalent是一個去中心化索引器網路,由區塊樣本生產者(BSP)節點創建區塊鏈數據副本並在Covalent L1鏈上發布證明。這些數據再由區塊結果生產者(BRP)節點根據規則篩選出符合要求的數據。

通過統一API,開發者可輕鬆以一致的格式提取區塊鏈數據,無需編寫復雜查詢。可使用在Moonbeam上結算的CQT代幣從網路運營商處提取這些預配置數據集。

Covalent的獎勵從23年第一季度到24年第一季度總體呈增長趨勢,部分原因是CQT代幣價格漲。

選擇索引器的考慮因素

數據可定制性

一些索引器(如Covalent)僅通過API提供標準預配置數據集。雖然速度快,但缺乏靈活性。使用索引器框架則允許更多自定義數據處理,以滿足特定應用需求。

安全性

索引數據必須安全,否則基於這些索引器構建的dApp也容易受攻擊。所有索引器都通過質押代幣來保障安全,但一些解決方案還使用額外證明機制。

Subsquid提供樂觀和零知識證明選項,Covalent發布包含區塊哈希的證明。The Graph爲索引器查詢提供爭議挑戰期,SubQuery爲每個區塊生成Merkle Mountain證明。

速度和可擴展性

隨着區塊鏈增長和交易量上升,索引大量數據變得更加繁瑣。索引器協議引入了解決方案來應對這些需求。

Subsquid通過添加更多節點來水平擴展。The Graph提供並行流數據以加快同步,SubQuery引入節點分片來加速同步過程。

支持的網路

雖然以太坊仍是主要活動場所,但其他區塊鏈也日益受歡迎。爲其他索引器不支持的鏈提供服務可獲得更多市場份額。索引數據密集型網路(如Solana)並非易事,目前只有Subsquid成功爲其提供索引支持。

結語

盡管索引器在dApp開發中廣泛應用,但其潛力仍然巨大,特別是在與AI集成方面。隨着AI在Web2和Web3中普及,其改進取決於訪問相關數據來訓練模型和開發AI代理。確保數據完整性對AI應用至關重要,可防止模型受到有偏見或不準確信息的影響。

在索引器解決方案領域,Subsquid在性能和用戶指標方面取得重大進展。用戶已開始嘗試使用Subsquid構建AI代理,展示了該平台的多功能性和潛力。此外,AutoAgora等工具幫助索引器使用AI爲The Graph上的查詢服務提供動態定價,SubQuery支持多個AI網路以實現透明的數據索引。

AI與索引器的集成有望增強區塊鏈生態系統中的數據可訪問性和可用性。通過利用AI技術,索引器可提供更高效準確的數據檢索,使開發者能構建更復雜的dApp和分析工具。隨着AI和索引器繼續共同發展,我們對數據索引的未來及其在塑造去中心化數字格局中的作用保持樂觀。