Blok Zinciri Veri Indeksi'nin Evrimi: Düğümden AI Destekli Tam Zincir Veri Hizmetine

1 Giriş

2017 yılında ilk dApp'lerin ortaya çıkmasından günümüze kadar her türlü Blok Zinciri uygulaması çiçek açarken, bu dApp'lerin kullandığı verilerin nereden geldiğini hiç düşündük mü?

2024'te, AI ve Web3 popüler hale geliyor. AI alanında, veri yaşam kaynağı gibidir. Bitkilerin güneş ve suya ihtiyacı olduğu gibi, AI sistemleri de sürekli öğrenme ve evrimleşme için büyük miktarda veriye bağımlıdır. Veri olmadan, en karmaşık AI algoritmaları bile beklenen zekayı sergileyemez.

Bu makale, blok zinciri verilerinin erişilebilirliği açısından, sektör gelişimi sürecinde veri indeksinin evrimini derinlemesine analiz edecek ve köklü indeks protokolü The Graph ile yeni ortaya çıkan Chainbase ve Space and Time'ı karşılaştırarak, bu iki AI teknolojisini birleştiren yeni protokolün veri hizmetleri ve ürün mimarisi açısından benzerlik ve farklılıklarını tartışacaktır.

2 Veritabanı İndekslemesinin Karmaşıklığı ve Basitliği: Blok Zinciri Düğümlerinden Tüm Zincir Veritabanına

2.1 Veri Kaynağı: Blok Zinciri Düğümü

Blok Zinciri, merkeziyetsiz bir defter olarak görülmektedir. Düğüm, Blok Zinciri ağının temelini oluşturur ve tüm zincir üzerindeki işlem verilerini kaydetme, depolama ve yayma sorumluluğuna sahiptir. Her düğümün, ağın merkeziyetsiz özelliğini koruyan tam bir Blok Zinciri veri kopyası vardır. Ancak, sıradan kullanıcılar için düğüm kurmak ve sürdürmek kolay değildir. Bu yalnızca uzmanlık gerektirmekle kalmaz, aynı zamanda yüksek donanım ve bant genişliği maliyetleri de gerektirir. Sıradan düğümlerin sorgulama kapasitesi de sınırlıdır ve geliştiricilerin ihtiyaç duyduğu formatta veri alamazlar. Bu nedenle, teorik olarak herkes düğüm çalıştırabilirken, pratikte kullanıcılar genellikle üçüncü taraf hizmetlerine bağımlıdır.

Bu sorunu çözmek için, RPC düğüm sağlayıcıları ortaya çıktı. Düğümün maliyetleri ve yönetiminden sorumludurlar, verileri RPC uç noktaları aracılığıyla sağlarlar. Kullanıcıların kendi düğümlerini kurmalarına gerek kalmadan blok zinciri verilerine erişebilirler. Kamu RPC uç noktaları ücretsizdir ancak hız sınırlamaları vardır, bu da dApp deneyimini etkileyebilir. Özel RPC uç noktaları daha iyi performansa sahiptir, ancak basit veri alma işlemleri de büyük miktarda iletişim gerektirir, bu da verimsiz ve ölçeklenmesi zor hale getirir. Ancak, düğüm sağlayıcılarının standartlaşmış API arayüzleri, veri erişim engelini düşürerek, sonraki veri ayrıştırma ve uygulama için bir temel oluşturur.

2.2 Veri Analizi: Prototip Veriden Kullanılabilir Veriye

Blok zinciri düğümünün sağladığı ham veriler genellikle şifrelenir ve kodlanır, bu da bütünlüğü ve güvenliği garanti eder, ancak aynı zamanda çözümleme zorluğunu artırır. Sıradan kullanıcılar veya geliştiriciler için, bu verileri doğrudan işlemek büyük miktarda teknik bilgi ve hesaplama kaynağı gerektirir.

Veri analiz süreci bu nedenle son derece önemlidir. Karmaşık prototip verilerini anlaşılır ve işlemeye uygun bir formata dönüştürerek, kullanıcılar bu verileri daha sezgisel bir şekilde kullanabilirler. Analizin başarısı ya da başarısızlığı, Blok Zinciri veri uygulamalarının verimliliğini doğrudan etkiler ve tüm indeksleme sürecindeki kritik bir adımdır.

2.3 Veri Gösterici'nin Evrimi

Blok zinciri veri miktarının artmasıyla birlikte, indeksleyici talebi giderek artmaktadır. İndeksleyiciler, zincir üzerindeki verileri düzenler ve bunları sorgulama amacıyla veritabanına gönderir. Onlar blok zinciri verilerini indeksler ve sınıf SQL sorgu dili ( gibi GraphQL API ) aracılığıyla verilerin her zaman kullanılabilir olmasını sağlar. İndeksleyiciler, geliştiricilerin standartlaştırılmış dille hızlı ve doğru bir şekilde bilgi alabilmelerini sağlayan birleşik sorgu arayüzü sunar, bu da süreci büyük ölçüde basitleştirir.

Farklı türdeki indeksleyicilerin veri alma yöntemleri çeşitlilik göstermektedir:

1. Tam Düğüm Göstergesi: Tam Blok Zinciri düğümünü çalıştırarak verileri doğrudan çıkarır, tam ve doğru olmasını sağlar, ancak büyük miktarda depolama ve işleme gücü gerektirir.
2. Hafif İndeksleyici: Tam düğümlerin belirli verileri ihtiyaç duydukça almasına bağımlıdır, depolama gereksinimlerini azaltır ama sorgulama süresini artırabilir.
3. Özel İndeksleyici: Belirli veri türleri veya blok zinciri için optimizasyon yaparak arama, örneğin NFT verileri veya DeFi işlemleri.
4. Birleştirilmiş İndeksleyici: Birden fazla blok zincirinden ve kaynaktan veri çıkarır, zincir dışı bilgileri de kapsar, çok zincirli dApp'ler için birleşik bir sorgulama arayüzü sunar.

Şu anda, Ethereum arşiv düğümleri Geth istemcisinde yaklaşık 13.5TB depolama alanı kaplamakta, Erigon istemcisinde ise yaklaşık 3TB. Blok zinciri büyüdükçe, depolama talepleri de sürekli artmaktadır. Büyük veri miktarıyla karşı karşıya olan ana akım indeks protokolleri, çoklu zincir indekslemesini desteklemekte ve farklı uygulama gereksinimlerine göre veri ayrıştırma çerçevelerini özelleştirmektedir, örneğin The Graph'ın "alt grafik" çerçevesi.

İndeksleyici, veri indeksleme ve sorgulama verimliliğini önemli ölçüde artırır. Geleneksel RPC uç noktalarına kıyasla, indeksleyici büyük miktarda veriyi verimli bir şekilde indeksleyebilir ve yüksek hızlı sorgulamayı destekler. Kullanıcılar karmaşık sorgular gerçekleştirebilir, verileri kolayca filtreleyebilir ve analiz edebilir. Bazı indeksleyiciler, çoklu zincir veri kaynaklarını birleştirmeyi destekler, bu da çoklu zincir dApp'lerin birden fazla API dağıtmasını önler. Dağıtık çalışma, daha güçlü güvenlik ve performans sağlar, merkezi RPC sağlayıcılarının neden olabileceği kesinti riskini azaltır.

İndeksleyici, kullanıcıların karmaşık alt veriyle uğraşmadan doğrudan ihtiyaç duydukları bilgilere erişmelerini sağlayan ön tanımlı bir sorgu dili aracılığıyla çalışır. Bu, veri sorgulama verimliliğini ve güvenilirliğini büyük ölçüde artırır ve Blok Zinciri veri erişimi için önemli bir yeniliktir.

2.4 Tüm Zincir Veritabanı: Akışa Öncelik Verme

İndeks düğümlerini kullanarak veri sorgulamak genellikle API'nin zincir üzerindeki verileri işleme konusunda tek yol haline geldiğini ifade eder. Ancak, projeler genişleme aşamasına girdiğinde, genellikle daha esnek veri kaynaklarına ihtiyaç duyulur ve standart API'ler bunu karşılamakta zorlanır. Uygulama talepleri karmaşıklaştıkça, temel indeksleyiciler ve standartlaştırılmış indeks formatları, arama, çapraz zincir erişimi veya zincir dışı veri eşlemesi gibi çeşitli sorgu ihtiyaçlarını karşılamada giderek daha zor hale gelir.

Modern veri boru hattı mimarisinde, "akış öncelikli" yaklaşım, geleneksel toplu işleme sınırlamalarını aşmanın bir yolu haline geldi ve gerçek zamanlı veri alma, işleme ve analizini sağladı. Bu paradigma değişimi, organizasyonların gelen veriye hemen yanıt vermesine, neredeyse gerçek zamanlı olarak içgörüler elde etmesine ve kararlar almasına olanak tanıdı. Benzer şekilde, Blok Zinciri veri hizmeti sağlayıcıları da veri akışları oluşturma yönünde gelişiyor, geleneksel indeks sağlayıcıları gerçek zamanlı Blok Zinciri veri akışı ürünleri sunmaya başladı, örneğin The Graph'ın Substreams'i, Goldsky'nin Mirror'ı ve Chainbase ile SubSquid gibi Blok Zinciri tabanlı veri akışlarına sahip gerçek zamanlı veri gölleri.

Bu hizmetler, gerçek zamanlı blok zinciri işlemlerini çözmek ve kapsamlı sorgulama yetenekleri sağlama ihtiyacını karşılamak amacıyla tasarlanmıştır. "Akış öncelikli" mimarinin gecikmeyi azaltarak ve yanıt verme yeteneğini artırarak geleneksel veri işleme yöntemlerini yenilemesi gibi, bu blok zinciri veri akış sağlayıcıları da daha gelişmiş ve olgun veri kaynakları ile daha fazla uygulama geliştirilmesini desteklemeyi ve zincir üzerindeki veri analizine yardımcı olmayı ummaktadır.

Modern veri boru hattı perspektifinden zincir üstü veri zorluklarını yeniden ele alarak, veri yönetimi, depolama ve sağlama potansiyelini yeni bir açıdan görebiliyoruz. Alt grafikler ve Ethereum ETL gibi indeksleyicileri nihai çıktıdan ziyade veri akışı olarak gördüğümüzde, her iş durumu için özel olarak tasarlanmış yüksek performanslı veri setlerinin olduğu bir dünya hayal edebiliriz.

3 AI + Veritabanı? The Graph, Chainbase, Space and Time'ı Derinlemesine Karşılaştırma

3.1 The Graph

The Graph ağı, merkeziyetsiz düğüm ağı aracılığıyla çoklu zincir veri indeksleme ve sorgulama hizmetleri sunarak geliştiricilerin blok zinciri verilerini indekslemesini ve uygulamalar oluşturmasını kolaylaştırır. Ana ürün modeli veri sorgulama yürütme pazarı ve veri indeksleme önbellek pazarıdır; her ikisi de kullanıcıların sorgulama ihtiyaçlarına hizmet eder. Sorgulama yürütme pazarı, tüketicinin ihtiyaç duyduğu veriler için uygun indeks düğümünü seçerek ödeme yaptığı yerdir, indeks önbellek pazarı ise indeks düğümlerinin alt grafiklerin geçmiş popülaritesine, sorgulama ücretlerine ve küratörlük taleplerine göre kaynakları ayarladığı yerdir.

Alt grafik, The Graph ağı için temel veri yapısıdır ve verilerin blok zincirinden nasıl çıkarılacağını ve sorgulanabilir bir formata dönüştürüleceğini tanımlar. Herkes alt grafik oluşturabilir, birden fazla uygulama tekrar kullanılabilir, veri yeniden kullanılabilirliğini ve kullanım verimliliğini artırır.

The Graph ağı, dört rol olan indeksleyiciler, küratörler, vekiller ve geliştiricilerden oluşmaktadır ve web3 uygulama veri ihtiyaçlarını birlikte destekler. Her rolün sorumlulukları şöyledir:

• İndeksleyici: Ağ düğümü işletmecisi, GRT'yi teminat göstererek ağa katılır, indeksleme ve sorgu işleme hizmeti sunar.
• Yetkili: GRT'yi indeks düğümüne teminat olarak vermek, atanan düğümden kısmi ödül kazanmak.
• Küratör: Ağaçta hangi alt grafiklerin öncelikli olarak indekslenmesi gerektiğinden sorumludur, değerli alt grafiklerin işlenmesini sağlar.
• Geliştiriciler: The Graph'ın ana kullanıcıları, alt grafikler oluşturur ve ağa gönderir, veri taleplerinin karşılanmasını bekler.

Şu anda The Graph, tamamen merkeziyetsiz alt grafik barındırma hizmetine geçmiştir, katılımcılar arasında ekonomik teşvikler sistemin çalışmasını sağlamak için bulunmaktadır:

• Düğümler, sorgulama ücretleri ve kısmi GRT blok ödüllerini sorgulayarak gelir elde eder.
• Yetkili, desteklenen indeks düğümlerinden kısmi ödül alır.
• Küratör, sinyalin değerli bir alt grafiği varsa, sorgulama ücretlerinden bir kısmını ödül olarak alabilir.

The Graph ürünleri AI dalgasında hızla gelişiyor. Semiotic Labs, temel geliştirme ekiplerinden biri olarak, AI teknolojisini indeks fiyatlandırmasını ve kullanıcı sorgu deneyimini optimize etmek için kullanmaya adanmıştır. Şu anda geliştirilen AutoAgora, Allocation Optimizer ve AgentC araçları, ekosistem performansını birçok açıdan artırmıştır:

• AutoAgora, sorgu hacmine ve kaynak kullanımına göre fiyatları gerçek zamanlı olarak ayarlayan dinamik bir fiyatlandırma mekanizması getiriyor, fiyatlandırma stratejisini optimize ediyor ve indeksleyicilerin rekabet gücünü ve gelirini maksimize ediyor.
• Allocation Optimizer, alt grafik kaynak dağıtım sorununu çözer, indeksleyicilerin en iyi yapılandırmayı gerçekleştirmesine yardımcı olur ve gelir ile performansı artırır.
• AgentC, kullanıcıların doğal dil aracılığıyla blok zinciri verilerine erişmesine olanak tanır, kullanıcı deneyimini artırır.

Bu araçların kullanımı, The Graph'ın AI ile birleşerek sistemin zekasını ve kullanıcı dostluğunu daha da artırmasını sağladı.

3.2 Chainbase

Chainbase, tüm blok zinciri verilerini tek bir platformda bir araya getiren bir tam zincir veri ağıdır ve geliştiricilerin uygulama oluşturmasını ve bakımını kolaylaştırır. Kendine özgü özellikleri arasında şunlar bulunmaktadır:

• Gerçek Zamanlı Veri Gölü: Blockchain veri akışları için özel olarak tasarlanmış gerçek zamanlı veri gölü sunarak, verilerin oluşturulmasının hemen ardından erişilebilir olmasını sağlar.
• İki Zincirli Mimari: Eigenlayer AVS tabanlı bir yürütme katmanı ile CometBFT konsensüs algoritması arasında paralel iki zincirli bir mimari oluşturur. Bu tasarım, çapraz zincir veri programlanabilirliğini ve birleştirilebilirliğini artırır, yüksek işlem hacmi, düşük gecikme ve nihaiği destekler ve çift teminat ile ağ güvenliğini artırır.
• Yenilikçi veri formatı standardı: Kripto endüstrisinin veri yapılandırmasını ve kullanımını optimize etmek için "manuscripts" adlı yeni veri formatı standardı getirildi.
• Kripto Dünya Modeli: AI model teknolojisini birleştirerek, devasa Blok Zinciri veri kaynaklarını kullanarak, Blok Zinciri işlemlerini etkin bir şekilde anlayabilen, tahmin edebilen ve bununla etkileşimde bulunabilen AI modelleri geliştirmek. Şu anda halka açık olarak kullanılabilen temel model Theia'yı tanıttık.

Bu özellikler, Chainbase'i indeks protokolünde öne çıkarıyor; özellikle gerçek zamanlı veri erişimine, yenilikçi veri formatlarına ve zincir üstü ile zincir altı verilerin birleştirilmesiyle daha akıllı modeller oluşturulmasına odaklanarak içgörüleri artırıyor.

Chainbase'in AI modeli Theia, onu diğer veri hizmeti protokollerinden ayıran anahtar bir unsurdur. Theia, NVIDIA tarafından geliştirilen DORA modeline dayanıyor, zincir üzerindeki ve zincir dışındaki verileri zaman ve mekân etkinlikleriyle birleştirerek, kripto desenlerini öğreniyor ve analiz ediyor, neden-sonuç çıkarımı yaparak yanıt veriyor, zincir üzerindeki verilerin potansiyel değerini ve düzenlerini derinlemesine keşfediyor, kullanıcılara daha akıllı veri hizmetleri sunuyor.

AI destekli veri hizmetleri, Chainbase'i sadece bir Blok Zinciri veri hizmetleri platformu değil, aynı zamanda rekabetçi bir akıllı veri hizmet sağlayıcısı haline getiriyor. Güçlü veri kaynakları ve AI'nın proaktif analizleri sayesinde, Chainbase daha geniş veri içgörüleri sunabiliyor ve kullanıcı veri işleme sürecini optimize edebiliyor.

3.3 Uzay ve Zaman

Uzay ve Zaman (SxT), merkeziyetsiz veri ambarı üzerinde sıfır bilgi kanıtlarını genişleterek doğrulanabilir bir hesaplama katmanı oluşturmayı hedefliyor. Akıllı sözleşmeler, büyük dil modelleri ve işletmelere güvenilir veri işleme sağlıyor. Şu anda Framework Ventures, Lightspeed Faction, Arrington Capital ve Hivemind Capital'in liderliğinde 20 milyon dolarlık A serisi finansman aldı.

Veri indeksleme ve doğrulama alanında, Space and Time yenilikçi bir teknoloji yolu getiriyor - Proof of SQL. Bu, SxT tarafından geliştirilen sıfır bilgi kanıtı teknolojisidir ve merkeziyetsiz veri deposunda gerçekleştirilen SQL sorgularının değiştirilemez ve doğrulanabilir olmasını sağlar. Sorgu çalıştırıldığında, Proof of SQL şifreli bir kanıt üretir ve sorgu sonuçlarının bütünlüğünü ve doğruluğunu doğrular. Kanıt sonuçlara eklenir, herhangi bir doğrulayıcı ( gibi akıllı sözleşmeler ) verilerin işleme sürecinin değiştirilmediğini bağımsız olarak doğrulayabilir. Geleneksel blok zinciri ağları genellikle veri doğruluğunu doğrulamak için konsensüs mekanizmalarına dayanırken, Proof of SQL daha verimli bir veri doğrulama yöntemi sağlar. SxT sisteminde, bir düğüm veri ediniminden sorumludur, diğer düğümler zk teknolojisi ile verilerin doğruluğunu doğrular. Bu, konsensüs mekanizması altında çoklu düğümlerin veri indekslemesi için kaynak israfını azaltır ve sistemin genel performansını artırır. Teknolojinin olgunlaşmasıyla birlikte, veri güvenilirliğine değer verenler için bir fırsat sunmaktadır.