Важливість даних Блокчейн та зростання індексаторів

Дані є ядром технології Блокчейн, а також основою для розробки децентралізованих додатків (dApp). Хоча наразі більшість обговорень зосереджені на доступності даних (DA), доступність даних також є важливою, але часто ігнорується.

У епоху модульних Блокчейн-рішень, рішення DA стали невід'ємною частиною. Вони забезпечують доступ усіх учасників до даних транзакцій, що дозволяє здійснювати верифікацію в реальному часі та підтримувати цілісність мережі. Однак, рівень DA більше схожий на дошку оголошень, ніж на базу даних, дані не зберігаються довгостроково.

У порівнянні, доступність даних зосереджується на здатності отримувати історичні дані, що є критично важливим для розробки dApp та Блокчейн-аналізу. Незважаючи на меншу дискусію, доступність даних є такою ж важливою, як і їхня доступність. Обидва чинники відіграють різні, але взаємодоповнюючі ролі в екосистемі блокчейну, тому всебічний підхід до управління даними повинен одночасно вирішувати ці дві проблеми для підтримки потужних і ефективних блокчейн-додатків.

Традиційні методи пошуку даних Блокчейн

Поява Блокчейн радикально змінила інфраструктуру, сприяючи створенню dApp у таких сферах, як ігри, фінанси та соціальні мережі. Проте побудова цих dApp вимагає доступу до великої кількості даних Блокчейн, що є як складним, так і дорогим.

Для розробників одним із виборів є хостинг і запуск власного архівного RPC вузла. Ці вузли зберігають всі історичні дані блокчейну, дозволяючи повний доступ. Але витрати на обслуговування є високими, а можливості запиту обмежені. Запуск дешевших вузлів є іншим вибором, але можливості отримання даних обмежені, що може вплинути на роботу dApp.

Використання постачальників комерційних RPC-нодів є ще одним способом. Ці постачальники відповідають за вартість і управління вузлами, надаючи дані через RPC-інтерфейси. Публічні RPC-інтерфейси безкоштовні, але мають обмеження швидкості, що може вплинути на користувацький досвід. Приватні RPC-інтерфейси мають кращу продуктивність, але навіть простий запит даних потребує великої кількості комунікацій, що є неефективним і важким для масштабування.

Блокчейн індексатор: кращі рішення

Блокчейн індексатор відіграє ключову роль в організації даних ланцюга та їх відправці до бази даних для запитів, тому його називають "Гуглом блокчейну". Вони індексують дані блокчейну, роблячи їх доступними через подібну до SQL мову запитів. Індексатори надають єдиний інтерфейс запитів, значно спрощуючи процес отримання даних.

Різні типи індексаторів оптимізують доступ до даних:

1. Повний вузол-індексатор: безпосередньо витягує дані з повного вузла Блокчейн, забезпечуючи повноту та точність, але вимагає великої кількості пам'яті та обчислювальних потужностей.

2. Легкий індексатор: отримує специфічні дані з повного вузла за потребою, зменшуючи вимоги до зберігання, але можливо збільшуючи час запиту.

3. Спеціалізований індексатор: оптимізований для певних типів даних або Блокчейн, таких як дані NFT або DeFi-транзакції.

4. Агент агрегування: витягує дані з кількох Блокчейн і джерел, включаючи інформацію поза ланцюгом, надає єдиний інтерфейс запиту, підходить для багатоланцюгових dApp.

Протокол індексаторів розгортає кілька індексаторів, що дозволяє ефективно індексувати та швидко запитувати великі обсяги даних. Вони також дозволяють складні запити, фільтрацію даних і подальший аналіз. Деякі індексатори можуть агрегірувати дані з кількох джерел, уникаючи необхідності розгортати кілька API в багатоланцюгових dApp. Розподілені на кількох вузлах, індексатори забезпечують кращу безпеку та продуктивність.

В цілому, порівняно з провайдерами RPC-нод, індексатори підвищують ефективність та надійність отримання даних, одночасно знижуючи витрати на розгортання. Це робить протокол індексації Блокчейн перевагою для розробників dApp.

Застосування індексаторів

Будівництво dApp вимагає пошуку та читання даних Блокчейн для виконання послуг. Це включає в себе різні dApp, такі як DeFi, NFT платформи, ігри та навіть соціальні мережі, оскільки їм потрібно спочатку прочитати дані, щоб виконати інші транзакції.

DeFi

DeFi-протоколи потребують різноманітної інформації, щоб надати користувачам конкретні ціни, ставки та комісії. Автоматизовані маркет-мейкери (AMM) потребують інформації про ціни та ліквідність в пулі, щоб розрахувати ставки свопу, а кредитні протоколи повинні використовувати коефіцієнт завантаження для визначення ставок позики та співвідношення боргових зобов'язань під час ліквідації. Ця інформація є критично важливою для dApp перед розрахунком ставок, які виконуються користувачами.

Гра

GameFi потребує швидкого індексування та доступу до даних, щоб забезпечити користувачам плавний ігровий процес. Лише завдяки швидкому отриманню даних та виконанню Web3 ігри можуть конкурувати за продуктивністю з Web2 іграми, залучаючи більше користувачів. Ці ігри потребують даних про право власності на землю, баланс токенів у грі, операції в грі тощо. Використання індексаторів може краще забезпечити стабільний потік даних та нормальний час роботи, гарантуючи ідеальний ігровий досвід.

NFT

NFT-ринок і платформи кредитування потребують індексації різної інформації, такої як метадані NFT, дані про власність і передачу, інформація про роялті тощо. Швидка індексація цих даних може запобігти необхідності переглядати кожен NFT окремо для пошуку даних про власність або атрибути.

Незалежно від того, чи потрібна інформація про ціну та ліквідність для DeFi AMM, чи потрібно оновити пости нових користувачів у SocialFi додатках, швидкий доступ до даних є критично важливим для正常 роботи dApp. Завдяки індексатору, вони можуть ефективно та точно отримувати дані, забезпечуючи плавний користувацький досвід.

Аналіз

Індексатор надає метод для вилучення певних даних з первинних Блокчейн даних (, включаючи події смарт-контрактів в кожному Блок ). Це відкриває можливості для більш детального аналізу даних, що веде до отримання всебічних уявлень.

Наприклад, протоколи безстрокової торгівлі можуть виявити, які токени мають великий обсяг торгівлі та генерують комісії, що дозволяє їм вирішити, чи слід включити їх до безстрокових контрактів. Розробники DEX можуть створити інформаційні панелі для своїх продуктів, щоб детально зрозуміти, які пул ресурсу мають найвищу прибутковість або найвищу ліквідність. Також можна створити публічні інформаційні панелі, які дозволяють розробникам гнучко запитувати будь-які типи даних і відображати їх на графіках.

Оскільки доступно кілька Блокчейн індексаторів, розуміння їхніх відмінностей є надзвичайно важливим для розробників, які обирають найбільш підходящий індексатор для своїх потреб.

Основний огляд індексаторів блокчейну

Граф

The Graph є першим протоколом індексації, який запустили на Блокчейн Ethereum, що дозволяє легко запитувати раніше важкодоступні дані про транзакції. Він використовує підграфи для визначення та фільтрації підмножини даних, зібраних з Блокчейн, таких як усі транзакції, пов'язані з певним фондом.

Стейкінг рідного токена GRT для індексування та запитів, делегати можуть вибрати токени для стейкінгу. Куратори можуть отримати доступ до якісних підграфів, щоб допомогти індексатору визначити, які підграфи слід створити для отримання найкращих зборів за запити. The Graph поступово переходить до більшої децентралізації, в кінцевому підсумку припинивши хостингові послуги та вимагатиме оновлення підграфів до своєї мережі.

Його інфраструктура дозволяє знизити середню вартість до 40 доларів за мільйон запитів, що значно нижче, ніж у випадку з самостійними вузлами. Використовуючи файлові джерела даних, вона також підтримує паралельне індексування як на ланцюгу, так і поза ним, що забезпечує ефективний пошук даних.

Нагороди індексаторів The Graph стабільно зростали протягом останніх кількох кварталів, частково завдяки збільшенню обсягу запитів, а також завдяки зростанню ціни токенів. Вони планують у майбутньому інтегрувати запити з підтримкою ШІ.

Кальмари

Subsquid є піринговим, горизонтально масштабованим децентралізованим дата-озером, яке ефективно агрегує великі обсяги даних з блокчейну та поза ним, захищаючи їх за допомогою нульових знань. Як децентралізована мережа робочих вузлів, кожен вузол відповідає за зберігання даних конкретного підмножини блоків, прискорюючи процес пошуку шляхом швидкої ідентифікації вузлів, що містять необхідні дані.

Subsquid підтримує реальний індекс, дозволяючи індексувати дані до остаточного підтвердження блоку. Він також підтримує зберігання даних у форматі, обраному розробниками, що спрощує аналіз за допомогою різних інструментів. Крім того, субграфи можуть бути безкодовими розгорнуті в мережі Subsquid.

Хоча він все ще на стадії тестової мережі, Subsquid досяг вражаючих результатів, маючи понад 80 тисяч користувачів тестової мережі, розгорнувши понад 60 тисяч індексаторів, а в мережі є понад 20 тисяч перевірених розробників. Subsquid нещодавно запустив свою основну мережу Data Lake.

Окрім індексування, дані з湖 Subsquid Network також можуть замінити RPC у випадках аналізу, ZK/TEE ко-процесорів, AI агентів та оракулів.

Підзапит

SubQuery є децентралізованою інфраструктурною мережею проміжного програмного забезпечення, що надає послуги RPC та індексації даних. Спочатку вона підтримувала мережі Polkadot та Substrate, але тепер розширилася на понад 200 ланцюгів. Її робота подібна до The Graph, що використовує індексні докази, але вводить споживачів для подання замовлень на покупку, щоб забезпечити дохід індексаторів.

SubQuery впровадить підтримку шардованих вузлів даних для оптимізації ефективності запитів, одночасно досягнувши більшого рівня децентралізації. Користувачі можуть вибрати оплату приблизно 1 SQT токена за кожні 1000 запитів або налаштувати власні збори для індексаторів через протокол.

Незважаючи на те, що SubQuery цього року лише запустив токен, винагороди за випуск для вузлів і делегатів також демонструють зростання вартості в доларах у порівнянні з попереднім періодом, що відображає постійне збільшення кількості запитів, що надаються на його платформі. З моменту TGE загальна кількість заморожених SQT зросла з 6 мільйонів до 125 мільйонів, що підкреслює зростання участі в мережі.

Ковалентні

Covalent є децентралізованою мережею індексаторів, що складається з виробників зразків блоків (BSP), які створюють копії даних блокчейну та публікують докази на ланцюзі Covalent L1. Ці дані потім фільтруються виробниками результатів блоків (BRP) згідно з правилами для визначення відповідних даних.

Через єдиний API розробники можуть легко витягувати дані Блокчейн у єдиному форматі, не пишучи складних запитів. Можна використовувати CQT токени, які розраховуються на Moonbeam, для отримання цих попередньо налаштованих наборів даних від операторів мережі.

Нагороди Covalent загалом зростають з першого кварталу 23 року до першого кварталу 24 року, частково через зростання ціни токена CQT.

Фактори для вибору індексатора

Налаштування даних

Деякі індексатори (, такі як Covalent ), надають стандартні попередньо налаштовані набори даних лише через API. Хоча швидкість висока, але бракує гнучкості. Використання фреймворку індексації дозволяє більше налаштувань обробки даних для задоволення конкретних потреб застосування.

Безпека

Індексні дані повинні бути безпечними, інакше dApp, побудовані на цих індексаторах, також можуть піддаватися атакам. Всі індексатори забезпечують безпеку за допомогою стейкінгу токенів, але деякі рішення також використовують додаткові механізми доказу.

Subsquid пропонує оптимістичні та нульові варіанти доведення, Covalent випустив довідку, що містить хеш блоку. The Graph надає період оскарження для запитів індексаторів, SubQuery генерує Merkle Mountain доведення для кожного блоку.

Швидкість та масштабованість

З ростом Блокчейн і зростанням обсягу торгівлі, індексація великої кількості даних стає все більш складною. Протокол індексації запроваджує рішення для задоволення цих вимог.

Subsquid розширюється горизонтально шляхом додавання більшої кількості вузлів. The Graph надає паралельні потоки даних для прискорення синхронізації, SubQuery впроваджує фрагментацію вузлів для прискорення процесу синхронізації.

Підтримувані мережі

Хоча Ethereum все ще є основним місцем активності, але інші Блокчейн також набирають популярність. Надання послуг для інших індексаторів, які не підтримують ланцюги, може забезпечити більшу частку ринку. Індексування даних, що потребують ресурсів, мережі (, такі як Solana ), не є простим завданням, наразі лише Subsquid успішно надає підтримку індексування для них.

Заключення

Незважаючи на те, що індексатори широко використовуються в розробці dApp, їх потенціал все ще величезний, особливо в інтеграції з AI. З поширенням AI у Web2 та Web3 його вдосконалення залежить від доступу до відповідних даних для навчання моделей і розробки AI-агентів. Забезпечення цілісності даних є критично важливим для AI-додатків, оскільки це може запобігти впливу упередженої або неточної інформації на моделі.

У сфері рішень для індексаторів Subsquid досяг значного прогресу в показниках продуктивності та користувачів. Користувачі почали експериментувати з використанням Subsquid для створення AI-агентів, що демонструє багатофункціональність і потенціал цієї платформи. Крім того, такі інструменти, як AutoAgora, допомагають індексаторам використовувати AI для динамічного ціноутворення на послуги запитів на The Graph, а SubQuery підтримує кілька AI-мереж для забезпечення прозорого індексування даних.

Інтеграція ШІ та індексаторів обіцяє поліпшити доступність та використання даних у екосистемі Блокчейн. Завдяки використанню технологій ШІ, індексатори можуть забезпечити більш ефективний та точний пошук даних, що дозволяє розробникам створювати більш складні dApp та аналітичні інструменти. У міру того, як ШІ та індексатори продовжують розвиватися разом, ми оптимістично налаштовані щодо майбутнього індексації даних та її ролі у формуванні децентралізованого цифрового ландшафту.