- Chủ đề
63k Phổ biến
39k Phổ biến
13k Phổ biến
4k Phổ biến
3k Phổ biến
30k Phổ biến
16k Phổ biến
23k Phổ biến
13k Phổ biến
3k Phổ biến
- Ghim
63k Phổ biến
39k Phổ biến
13k Phổ biến
4k Phổ biến
3k Phổ biến
30k Phổ biến
16k Phổ biến
23k Phổ biến
13k Phổ biến
3k Phổ biến
Blockchain dữ liệu dịch vụ tiến hóa: từ Nút đến AI trao quyền toàn chuỗi
Sự tiến hóa của công nghệ chỉ mục dữ liệu Blockchain: từ Nút đến dịch vụ toàn chuỗi được hỗ trợ bởi AI
1. Giới thiệu
Trong những năm gần đây, ứng dụng phi tập trung (dApp) đã phát triển mạnh mẽ trong lĩnh vực blockchain, từ những ứng dụng tài chính, trò chơi và xã hội ban đầu, đến sự phát triển đa dạng của hệ sinh thái đa chuỗi hiện nay. Trong quá trình này, nguồn dữ liệu và cách truy cập mà dApp dựa vào cũng đang không ngừng tiến hóa.
Năm 2024, trí tuệ nhân tạo (AI) và Web3 trở thành chủ đề nóng. Hệ thống AI cần một lượng dữ liệu khổng lồ để liên tục học hỏi và tiến hóa, giống như thực vật cần ánh sáng mặt trời và độ ẩm để phát triển mạnh mẽ. Nếu không có dữ liệu hỗ trợ, ngay cả những thuật toán AI tiên tiến nhất cũng khó phát huy trí tuệ và hiệu quả của nó.
Bài viết này sẽ phân tích sâu về quá trình phát triển của chỉ mục dữ liệu blockchain từ góc độ khả năng truy cập dữ liệu blockchain. Chúng tôi cũng sẽ so sánh giao thức chỉ mục dữ liệu truyền thống The Graph với các giao thức dịch vụ dữ liệu blockchain mới nổi Chainbase và Space and Time, thảo luận về sự khác biệt và tương đồng của những giao thức mới kết hợp công nghệ AI này trong dịch vụ dữ liệu và kiến trúc sản phẩm.
2. Sự phức tạp và đơn giản của chỉ mục dữ liệu: từ Nút Blockchain đến cơ sở dữ liệu toàn chuỗi
2.1 Nguồn dữ liệu: Nút Blockchain
Cơ sở của Blockchain là mạng phi tập trung được tạo thành từ nhiều Nút, mỗi Nút đều lưu trữ một bản sao hoàn chỉnh của dữ liệu Blockchain. Tuy nhiên, đối với người dùng thông thường, việc tự xây dựng và duy trì Nút không phải là điều dễ dàng, không chỉ cần kỹ năng chuyên môn mà còn phải đối mặt với chi phí phần cứng và băng thông cao. Đồng thời, khả năng truy vấn của Nút thông thường cũng hạn chế, khó có thể đáp ứng nhu cầu của các nhà phát triển.
Để giải quyết vấn đề này, nhà cung cấp nút RPC ( đã ra đời. Những dịch vụ này chịu trách nhiệm về việc vận hành và quản lý các nút, cung cấp dịch vụ truy cập dữ liệu cho người dùng thông qua các điểm cuối RPC. Mặc dù các điểm cuối RPC công cộng miễn phí, nhưng có giới hạn tốc độ, điều này có thể ảnh hưởng đến trải nghiệm người dùng của dApp. Các điểm cuối RPC riêng tư mặc dù có hiệu suất tốt hơn, nhưng vẫn thể hiện hiệu quả kém đối với các truy vấn phức tạp và khó mở rộng qua các mạng. Tuy nhiên, giao diện API tiêu chuẩn hóa của nhà cung cấp nút đã giảm bớt rào cản cho người dùng truy cập dữ liệu trên chuỗi, đặt nền tảng cho việc phân tích và ứng dụng dữ liệu sau này.
) 2.2 Phân tích dữ liệu: từ dữ liệu nguyên mẫu đến dữ liệu có thể sử dụng
Dữ liệu gốc do Nút Blockchain cung cấp thường được mã hóa và xử lý, việc sử dụng trực tiếp các dữ liệu này đối với người dùng thông thường và các nhà phát triển là khá khó khăn. Quá trình phân tích dữ liệu chuyển đổi dữ liệu nguyên mẫu phức tạp thành định dạng dễ hiểu và thao tác hơn, là khâu quan trọng trong toàn bộ quy trình lập chỉ mục dữ liệu.
2.3 Sự tiến hóa của bộ chỉ mục dữ liệu
Khi khối lượng dữ liệu Blockchain tăng vọt, nhu cầu về bộ chỉ mục ngày càng nổi bật. Bộ chỉ mục có khả năng tổ chức dữ liệu trên chuỗi và lưu trữ nó trong cơ sở dữ liệu, thuận tiện cho việc truy vấn. Chúng thông qua việc chỉ mục dữ liệu Blockchain và cung cấp các ngôn ngữ truy vấn giống như SQL ### như giao diện GraphQL (, giúp dữ liệu luôn sẵn có. Bộ chỉ mục cung cấp cho các nhà phát triển một ngôn ngữ truy vấn chuẩn hóa, đơn giản hóa đáng kể quy trình truy xuất dữ liệu.
Các loại bộ chỉ mục khác nhau có những đặc điểm riêng:
Hiện tại, nhu cầu lưu trữ của nút hồ sơ Ethereum trên các khách hàng khác nhau dao động từ 3TB đến 13.5TB, và với sự gia tăng liên tục của blockchain, khối lượng dữ liệu này vẫn đang tăng lên. Đối mặt với khối lượng dữ liệu khổng lồ như vậy, các giao thức lập chỉ mục chính không chỉ hỗ trợ lập chỉ mục đa chuỗi, mà còn tùy chỉnh khung phân tích dữ liệu cho các nhu cầu dữ liệu khác nhau của ứng dụng.
So với các điểm cuối RPC truyền thống, các bộ chỉ mục có ưu thế rõ rệt về hiệu suất chỉ mục và truy vấn dữ liệu. Chúng có khả năng chỉ mục hiệu quả một lượng lớn dữ liệu, hỗ trợ truy vấn phức tạp và lọc dữ liệu, đồng thời thực hiện phân tích sau khi trích xuất. Một số bộ chỉ mục còn hỗ trợ tổng hợp nhiều nguồn dữ liệu từ các khối chuỗi khác nhau, tránh vấn đề các ứng dụng dApp đa chuỗi cần triển khai nhiều API. Thông qua việc vận hành phân tán, các bộ chỉ mục cung cấp tính bảo mật và hiệu suất mạnh mẽ hơn, đồng thời giảm thiểu rủi ro gián đoạn có thể xảy ra từ các nhà cung cấp RPC tập trung.
![Đọc, chỉ mục đến phân tích, tóm tắt lĩnh vực chỉ mục dữ liệu Web3])https://img-cdn.gateio.im/webp-social/moments-694cb5f2be61475195e2e559567dee89.webp(
) 2.4 Cơ sở dữ liệu toàn chuỗi: Căn chỉnh ưu tiên theo dòng chảy
Khi nhu cầu ứng dụng ngày càng trở nên phức tạp, định dạng chỉ mục API tiêu chuẩn dần trở nên khó đáp ứng nhu cầu truy vấn đa dạng, chẳng hạn như truy cập chuỗi chéo hoặc ánh xạ dữ liệu ngoài chuỗi. Trong kiến trúc đường ống dữ liệu hiện đại, phương pháp "ưu tiên luồng" đã trở thành giải pháp để khắc phục những hạn chế của xử lý theo lô truyền thống, nhằm thực hiện xử lý và phân tích dữ liệu theo thời gian thực.
Các nhà cung cấp dịch vụ dữ liệu Blockchain cũng đang phát triển theo hướng xây dựng luồng dữ liệu Blockchain. Các nhà cung cấp dịch vụ lập chỉ mục truyền thống đồng loạt ra mắt các sản phẩm thu thập dữ liệu Blockchain theo cách luồng dữ liệu thời gian thực, như Substreams của The Graph và Mirror của Goldsky. Đồng thời, cũng xuất hiện các dịch vụ hồ dữ liệu thời gian thực như Chainbase và SubSquid dựa trên luồng dữ liệu được tạo ra từ Blockchain.
Các dịch vụ này nhằm giải quyết nhu cầu phân tích giao dịch blockchain theo thời gian thực và cung cấp khả năng truy vấn toàn diện hơn. Bằng cách định nghĩa lại thách thức của dữ liệu trên chuỗi từ góc độ của các ống dẫn dữ liệu hiện đại, chúng ta có thể hình dung một thế giới khả thi có khả năng tùy chỉnh các tập dữ liệu hiệu suất cao cho bất kỳ trường hợp sử dụng nào.
![Đọc, chỉ mục đến phân tích, tóm tắt lĩnh vực chỉ mục dữ liệu Web3]###https://img-cdn.gateio.im/webp-social/moments-587ce87f6dbedee4acec7d939fed6980.webp(
3. AI + Cơ sở dữ liệu? So sánh sâu sắc The Graph, Chainbase, Space và Time
) 3.1 The Graph
Mạng The Graph cung cấp dịch vụ chỉ mục và truy vấn dữ liệu đa chuỗi thông qua mạng nút phi tập trung, giúp các nhà phát triển chỉ mục dữ liệu blockchain và xây dựng ứng dụng phi tập trung. Mô hình sản phẩm chính của nó bao gồm thị trường thực hiện truy vấn dữ liệu và thị trường bộ nhớ cache chỉ mục dữ liệu, phục vụ nhu cầu truy vấn sản phẩm của người dùng.
Subgraphs ### là cấu trúc dữ liệu cơ bản của mạng The Graph, định nghĩa cách thức trích xuất và chuyển đổi dữ liệu từ Blockchain thành định dạng có thể truy vấn. Bất kỳ ai cũng có thể tạo subgraph, nhiều ứng dụng có thể tái sử dụng các subgraph này, nâng cao khả năng tái sử dụng dữ liệu và hiệu quả sử dụng.
Mạng The Graph được cấu thành từ bốn vai trò chính: Người lập chỉ mục, Người tổ chức, Người ủy thác và Nhà phát triển. Người lập chỉ mục cung cấp dịch vụ lập chỉ mục và xử lý truy vấn; Người ủy thác đặt cược token để hỗ trợ hoạt động của nút lập chỉ mục; Người tổ chức chịu trách nhiệm tín hiệu cho những subgraph nào nên được mạng lập chỉ mục; Nhà phát triển tạo và gửi subgraph với tư cách là bên có nhu cầu.
Sản phẩm của The Graph cũng đang phát triển nhanh chóng trong làn sóng AI. Các công cụ AutoAgora, Allocation Optimizer và AgentC do Semiotic Labs phát triển đã nâng cao hiệu suất của hệ sinh thái ở nhiều khía cạnh, chẳng hạn như cơ chế định giá động, phân bổ tài nguyên tối ưu và truy vấn ngôn ngữ tự nhiên.
( 3.2 Chainbase
Chainbase là một mạng dữ liệu toàn chuỗi, tích hợp tất cả dữ liệu blockchain vào một nền tảng. Các chức năng độc đáo của nó bao gồm:
Mô hình AI Theia của Chainbase là điểm nổi bật chính, dựa trên mô hình DORA của NVIDIA, kết hợp dữ liệu trên chuỗi và ngoài chuỗi cùng với hoạt động thời gian và không gian, học hỏi và phân tích các mẫu mã hóa, đưa ra phản ứng thông qua suy luận nguyên nhân.
![Đọc, chỉ số đến phân tích, tóm tắt lĩnh vực chỉ số dữ liệu Web3])https://img-cdn.gateio.im/webp-social/moments-b343cab5112c1a3d52f4e72122ae0df2.webp###
( 3.3 Không gian và Thời gian
Space and Time )SxT### cam kết xây dựng một lớp tính toán có thể xác minh, mở rộng bằng chứng không kiến thức trên kho dữ liệu phi tập trung. Công nghệ đổi mới Proof of SQL là một công nghệ bằng chứng không kiến thức, đảm bảo rằng các truy vấn SQL được thực hiện trên kho dữ liệu phi tập trung là không thể bị giả mạo và có thể xác minh.
SxT hợp tác với phòng thí nghiệm đổi mới AI của Microsoft để phát triển công cụ AI tạo sinh, giúp người dùng xử lý dữ liệu blockchain thông qua ngôn ngữ tự nhiên. Tại Space and Time Studio, người dùng có thể nhập truy vấn bằng ngôn ngữ tự nhiên, AI sẽ tự động chuyển đổi thành SQL và thực hiện truy vấn.
Kết luận và triển vọng
Công nghệ chỉ mục dữ liệu blockchain đã trải qua một quá trình hoàn thiện dần dần, từ nguồn dữ liệu nút ban đầu, thông qua sự phát triển của phân tích dữ liệu và bộ chỉ mục, cuối cùng tiến hóa thành dịch vụ dữ liệu toàn chuỗi được hỗ trợ bởi AI. Sự tiến hóa không ngừng của những công nghệ này không chỉ nâng cao hiệu quả và độ chính xác trong việc truy cập dữ liệu, mà còn mang đến trải nghiệm thông minh cho người dùng.
Trong tương lai, với sự phát triển không ngừng của các công nghệ mới như AI và chứng minh không kiến thức, dịch vụ dữ liệu Blockchain sẽ ngày càng thông minh và an toàn hơn. Là một cơ sở hạ tầng, dịch vụ dữ liệu Blockchain sẽ tiếp tục cung cấp hỗ trợ mạnh mẽ cho sự tiến bộ và đổi mới của ngành.