Sự tiến hóa của truy cập dữ liệu Blockchain: Giới thiệu về bộ chỉ mục và các dự án liên quan
Dữ liệu là cốt lõi của công nghệ Blockchain, là nền tảng để phát triển các ứng dụng phi tập trung. Hiện tại, các cuộc thảo luận chủ yếu tập trung vào khả năng truy cập dữ liệu (DA), tức là đảm bảo rằng các tham gia mạng có thể truy cập dữ liệu giao dịch mới nhất để xác thực. Tuy nhiên, khía cạnh quan trọng không kém của khả năng truy cập dữ liệu thường bị bỏ qua.
Trong kỷ nguyên blockchain mô-đun, giải pháp DA đã trở thành điều cần thiết. Chúng đảm bảo rằng tất cả người tham gia đều có thể sử dụng dữ liệu giao dịch, thực hiện xác minh theo thời gian thực và duy trì tính toàn vẹn của mạng. Tuy nhiên, lớp DA giống như một biển quảng cáo hơn là một cơ sở dữ liệu, dữ liệu sẽ không được lưu trữ vô thời hạn và sẽ bị xóa theo thời gian.
So với trước đây, khả năng truy cập dữ liệu tập trung vào khả năng truy xuất dữ liệu lịch sử, điều này rất quan trọng để phát triển dApp và thực hiện phân tích blockchain. Mặc dù ít được thảo luận hơn, nhưng nó quan trọng không kém khả năng sẵn có của dữ liệu. Cả hai đều đóng vai trò bổ sung trong hệ sinh thái blockchain, việc quản lý dữ liệu toàn diện phải giải quyết cả hai vấn đề này cùng một lúc để hỗ trợ các ứng dụng blockchain mạnh mẽ và hiệu quả.
Blockchain kể từ khi ra đời đã hoàn toàn thay đổi cơ sở hạ tầng, thúc đẩy việc tạo ra các dApp trong các lĩnh vực như game, tài chính và mạng xã hội. Tuy nhiên, việc xây dựng những dApp này cần truy cập vào một lượng lớn dữ liệu blockchain, điều này vừa khó khăn vừa tốn kém.
Đối với các lập trình viên dApp, một lựa chọn là lưu trữ và vận hành nút RPC lưu trữ của riêng họ. Những nút này lưu trữ tất cả dữ liệu blockchain lịch sử, cho phép truy cập hoàn toàn. Tuy nhiên, chi phí bảo trì cao, khả năng truy vấn hạn chế. Vận hành nút rẻ hơn là một lựa chọn khác, nhưng khả năng truy xuất dữ liệu hạn chế, có thể cản trở hoạt động của dApp.
Một phương pháp khác là sử dụng nhà cung cấp nút RPC thương mại. Họ chịu trách nhiệm về chi phí và quản lý nút, cung cấp dữ liệu qua các điểm cuối RPC. Các điểm cuối RPC công cộng miễn phí nhưng có giới hạn tốc độ, điều này có thể ảnh hưởng đến trải nghiệm người dùng. Các điểm cuối RPC riêng tư có hiệu suất tốt hơn, nhưng ngay cả việc truy xuất dữ liệu đơn giản cũng cần nhiều giao tiếp, kém hiệu quả và khó mở rộng.
Bộ chỉ mục blockchain đóng vai trò quan trọng trong việc tổ chức dữ liệu trên chuỗi và lưu trữ vào cơ sở dữ liệu để truy vấn, do đó được gọi là "Google của blockchain". Chúng chỉ mục dữ liệu blockchain, làm cho dữ liệu khả dụng thông qua ngôn ngữ truy vấn tương tự như SQL. Bộ chỉ mục cung cấp giao diện thống nhất, cho phép các nhà phát triển nhanh chóng và chính xác truy xuất thông tin bằng ngôn ngữ truy vấn chuẩn hóa, làm đơn giản hóa quy trình rất nhiều.
Các loại bộ chỉ mục khác nhau tối ưu hóa việc truy xuất dữ liệu:
Bộ chỉ mục nút hoàn chỉnh: Chạy nút blockchain hoàn chỉnh để trích xuất dữ liệu trực tiếp, đảm bảo đầy đủ và chính xác, nhưng cần nhiều dung lượng lưu trữ và khả năng xử lý.
Trình chỉ mục nhẹ: dựa vào nút hoàn chỉnh để lấy dữ liệu cụ thể theo nhu cầu, giảm yêu cầu lưu trữ nhưng có thể tăng thời gian truy vấn.
Bộ chỉ mục chuyên dụng: Tối ưu hóa truy xuất cho các trường hợp sử dụng cụ thể đối với dữ liệu hoặc blockchain loại nhất định, chẳng hạn như dữ liệu NFT hoặc giao dịch DeFi.
Bộ chỉ mục tổng hợp: Trích xuất dữ liệu từ nhiều Blockchain và nguồn, bao gồm thông tin ngoại tuyến, cung cấp giao diện truy vấn thống nhất, đặc biệt hữu ích cho các dApp đa chuỗi.
Chỉ riêng Ethereum đã cần 3TB không gian lưu trữ và vẫn đang tiếp tục tăng. Giao thức bộ chỉ mục triển khai nhiều bộ chỉ mục, cho phép chỉ mục hiệu quả và truy vấn tốc độ cao khối lượng dữ liệu lớn, điều này là RPC không thể thực hiện.
Bộ chỉ mục còn cho phép truy vấn phức tạp, dễ dàng lọc dữ liệu và phân tích sau khi trích xuất. Một số bộ chỉ mục có thể tổng hợp dữ liệu từ nhiều nguồn, tránh việc triển khai nhiều API cho dApp nhiều chuỗi. Thông qua việc phân bố trên nhiều nút, bộ chỉ mục cung cấp độ bảo mật và hiệu suất được nâng cao, trong khi các nhà cung cấp RPC có thể gặp sự cố do tính chất tập trung.
Tổng thể, so với nhà cung cấp nút RPC, bộ chỉ mục đã nâng cao hiệu quả và độ tin cậy của việc truy xuất dữ liệu, đồng thời giảm chi phí triển khai một nút đơn lẻ. Điều này khiến giao thức bộ chỉ mục Blockchain trở thành lựa chọn hàng đầu cho các nhà phát triển dApp.
Xây dựng dApp cần phải truy xuất và đọc dữ liệu blockchain để hoạt động dịch vụ. Điều này bao gồm DeFi, nền tảng NFT, trò chơi và thậm chí mạng xã hội, vì những nền tảng này cần đọc dữ liệu trước khi thực hiện các giao dịch khác.
Các giao thức DeFi cần thông tin khác nhau để báo giá, tỷ lệ, phí cho người dùng. AMM cần thông tin về giá cả và thanh khoản để tính toán tỷ lệ hoán đổi, trong khi các giao thức cho vay cần tỷ lệ sử dụng để xác định tỷ lệ cho vay và tỷ lệ thanh lý nợ. Trước khi tính toán tỷ lệ thực hiện của người dùng, việc nhập thông tin vào dApp là rất cần thiết.
GameFi cần chỉ mục và truy cập dữ liệu nhanh chóng, đảm bảo người dùng chơi game mượt mà. Chỉ thông qua việc truy xuất và thực thi dữ liệu nhanh chóng, game Web3 mới có thể cạnh tranh về hiệu suất với game Web2, thu hút nhiều người dùng hơn. Những trò chơi này cần dữ liệu như quyền sở hữu đất, số dư token, các thao tác trong game, v.v. Sử dụng bộ chỉ mục có thể đảm bảo dòng dữ liệu ổn định và thời gian hoạt động bình thường, đảm bảo trải nghiệm chơi game hoàn hảo.
Thị trường NFT và nền tảng cho vay cần chỉ mục dữ liệu truy cập nhiều thông tin khác nhau, chẳng hạn như siêu dữ liệu NFT, thông tin quyền sở hữu và chuyển nhượng, thông tin bản quyền, v.v. Việc chỉ mục nhanh chóng các dữ liệu này có thể tránh việc duyệt từng NFT để tìm kiếm thông tin quyền sở hữu hoặc thuộc tính.
Dù là DeFi AMM cần thông tin về giá cả và tính thanh khoản, hay ứng dụng SocialFi cần cập nhật bài viết của người dùng mới, việc truy xuất dữ liệu nhanh chóng là rất quan trọng cho hoạt động bình thường của dApp. Nhờ có bộ chỉ mục, chúng có thể truy xuất dữ liệu một cách hiệu quả và chính xác, mang lại trải nghiệm người dùng mượt mà.
Trình chỉ mục cung cấp một phương pháp để trích xuất dữ liệu cụ thể từ dữ liệu Blockchain gốc ( bao gồm các sự kiện hợp đồng thông minh trong mỗi khối ), tạo cơ hội cho phân tích dữ liệu cụ thể hơn, từ đó cung cấp cái nhìn tổng thể.
Ví dụ, giao thức giao dịch vĩnh viễn có thể xác định những token nào có khối lượng giao dịch lớn và tạo ra chi phí, từ đó quyết định có đưa chúng lên hợp đồng vĩnh viễn hay không. Các nhà phát triển DEX có thể tạo ra bảng điều khiển để hiểu sâu hơn về những pool có tỷ lệ sinh lời cao nhất hoặc thanh khoản mạnh nhất. Họ cũng có thể tạo bảng điều khiển công cộng, cho phép các nhà phát triển tự do linh hoạt truy vấn bất kỳ loại dữ liệu nào để hiển thị trên biểu đồ.
Do có nhiều bộ chỉ mục Blockchain có sẵn, việc nhận diện sự khác biệt giữa các giao thức chỉ mục là rất quan trọng để đảm bảo các nhà phát triển chọn được bộ chỉ mục phù hợp nhất với nhu cầu.
The Graph là giao thức lập chỉ mục đầu tiên được khởi động trên Ethereum, cho phép truy vấn dễ dàng dữ liệu giao dịch trước đây khó tiếp cận. Nó sử dụng định nghĩa và lọc subgraph để tập hợp một tập hợp con dữ liệu từ Blockchain, chẳng hạn như tất cả giao dịch liên quan đến một pool giao dịch.
Sử dụng chứng minh chỉ mục, người chỉ mục đặt cược token GRT cho dịch vụ chỉ mục và truy vấn, người ủy quyền có thể chọn token đặt cược. Người biên tập có thể truy cập các biểu đồ con chất lượng cao, giúp người chỉ mục xác định dữ liệu nào cần biên soạn cho các biểu đồ con để kiếm phí truy vấn tốt nhất. The Graph đang chuyển sang phi tập trung hơn, cuối cùng sẽ ngừng dịch vụ lưu trữ, yêu cầu nâng cấp biểu đồ con lên mạng của mình.
Hạ tầng của nó giúp cho mỗi triệu truy vấn có chi phí trung bình đạt 40 đô la, thấp hơn nhiều so với chi phí của các nút tự quản. Nó cũng hỗ trợ việc lập chỉ mục song song cho dữ liệu trên chuỗi và ngoài chuỗi, đạt được hiệu quả truy xuất dữ liệu cao.
Phần thưởng cho bộ chỉ mục của The Graph đã tăng trưởng ổn định trong vài quý qua, một phần do khối lượng truy vấn tăng lên, cũng như do sự tăng giá của token, vì họ có kế hoạch tích hợp truy vấn hỗ trợ AI trong tương lai.
Subsquid là một hồ dữ liệu phi tập trung, có thể mở rộng theo chiều ngang và điểm-điểm, cho phép tổng hợp hiệu quả một lượng lớn dữ liệu trên chuỗi và ngoài chuỗi, đồng thời được bảo vệ bằng chứng không kiến thức. Là một mạng lưới công cụ phi tập trung, mỗi nút chịu trách nhiệm lưu trữ một tập hợp con dữ liệu của các khối cụ thể, giúp tăng tốc quá trình truy xuất thông qua việc nhận diện nhanh chóng các nút lưu trữ dữ liệu cần thiết.
Subsquid hỗ trợ lập chỉ mục thời gian thực, cho phép lập chỉ mục trước khi khối được xác nhận cuối cùng. Nó cũng hỗ trợ lưu trữ dữ liệu ở định dạng mà nhà phát triển chọn, thuận tiện cho việc phân tích bằng các công cụ như BigQuery, Parquet hoặc CSV. Các subgraph có thể được triển khai trên mạng Subsquid mà không cần di chuyển sang Squid SDK, thực hiện triển khai không cần mã.
Mặc dù vẫn đang trong giai đoạn thử nghiệm, Subsquid đã đạt được những số liệu ấn tượng với hơn 80.000 người dùng mạng thử nghiệm, triển khai hơn 60.000 trình chỉ mục Squid, và có hơn 20.000 nhà phát triển xác thực trên mạng. Vào ngày 3 tháng 6, Subsquid đã khởi động mạng chính của hồ dữ liệu của mình.
Ngoài chỉ mục, hồ dữ liệu Subsquid Network còn có thể thay thế RPC trong các trường hợp sử dụng như phân tích, bộ đồng xử lý ZK/TEE, đại lý AI và Oracle.
SubQuery là mạng lưới cơ sở hạ tầng trung gian phi tập trung, cung cấp dịch vụ RPC và dữ liệu chỉ mục. Ban đầu hỗ trợ mạng Polkadot và Substrate, hiện đã mở rộng đến hơn 200 chuỗi. Cách hoạt động của nó tương tự như The Graph sử dụng bằng chứng chỉ mục, nơi các chỉ mục viên chỉ mục dữ liệu và cung cấp yêu cầu truy vấn, người ủy quyền sẽ giữ cổ phần của mình để đảm bảo cho chỉ mục viên. Tuy nhiên, nó giới thiệu việc người tiêu dùng gửi đơn đặt hàng mua, cho thấy thu nhập của chỉ mục viên được đảm bảo, chứ không phải từ quản lý.
Nó sẽ giới thiệu các nút dữ liệu SubQuery hỗ trợ phân đoạn, ngăn chặn việc đồng bộ hóa dữ liệu mới giữa các nút, tối ưu hóa hiệu suất truy vấn, đồng thời tiến tới phi tập trung lớn hơn. Người dùng có thể chọn trả khoảng 1 SQT token phí tính toán cho mỗi 1000 yêu cầu, hoặc thiết lập phí tùy chỉnh cho bộ chỉ mục thông qua giao thức.
Mặc dù SubQuery chỉ mới ra mắt token vào đầu năm nay, nhưng phần thưởng phát hành cho nút và người ủy thác cũng đã tăng theo giá trị USD, đại diện cho số lượng dịch vụ truy vấn được cung cấp trên nền tảng của họ không ngừng gia tăng. Kể từ TGE, tổng số SQT đã được staking đã tăng từ 6 triệu lên 125 triệu, nhấn mạnh sự gia tăng mức độ tham gia mạng.
Covalent là mạng lưới chỉ mục phi tập trung, được tạo ra bởi các nhà sản xuất mẫu khối (BSP) thông qua các nút mạng xuất khẩu hàng loạt để tạo bản sao dữ liệu blockchain, và công bố chứng chỉ trên blockchain Covalent L1. Dữ liệu này sau đó được các nhà sản xuất kết quả khối (BRP) tinh chỉnh theo các quy tắc đã xác định, lọc ra các dữ liệu phù hợp với yêu cầu.
Thông qua API thống nhất, các nhà phát triển có thể dễ dàng trích xuất dữ liệu Blockchain liên quan với định dạng yêu cầu và phản hồi nhất quán, mà không cần viết các truy vấn phức tạp tùy chỉnh để truy cập dữ liệu. Có thể sử dụng token CQT được thanh toán trên Moonbeam như một phương tiện thanh toán để trích xuất các tập dữ liệu được cấu hình trước từ các nhà điều hành mạng.
Phần thưởng của Covalent từ quý 1 năm 23 đến quý 1 năm 24 dường như có xu hướng tăng trưởng tổng thể, một phần là do giá token Covalent CQT tăng.
Khi chọn bộ chỉ mục, cần xem xét các yếu tố sau:
Khả năng tùy chỉnh dữ liệu: Một số bộ chỉ mục ( như Covalent ) là bộ chỉ mục chung, chỉ cung cấp tập dữ liệu cấu hình sẵn tiêu chuẩn qua API. Mặc dù nhanh chóng, nhưng không thể cung cấp tính linh hoạt cho các nhà phát triển cần tập dữ liệu tùy chỉnh. Sử dụng khung chỉ mục cho phép xử lý dữ liệu tùy chỉnh nhiều hơn để đáp ứng nhu cầu ứng dụng cụ thể.
An toàn: Dữ liệu chỉ mục phải an toàn, nếu không các dApp được xây dựng dựa trên các chỉ mục này cũng dễ bị tấn công. Ví dụ, nếu giao dịch và số dư ví có thể bị thao túng, dApp có thể mất tính thanh khoản, ảnh hưởng đến người dùng. Tất cả các chỉ mục đều áp dụng một hình thức an toàn nào đó thông qua việc đặt cọc token, nhưng các giải pháp khác có thể sử dụng chứng minh để nâng cao thêm tính an toàn.
Subsquid cung cấp tùy chọn sử dụng chứng minh lạc quan và chứng minh không kiến thức, Covalent phát hành chứng minh chứa giá trị băm khối. Graph cung cấp thời gian thách thức tranh chấp cho truy vấn của bộ chỉ mục trong khoảng thời gian thách thức lạc quan, SubQuery tạo ra chứng minh Merkle Mountain cho mỗi khối, tính toán giá trị băm của từng khối trong tất cả dữ liệu được lưu trữ trong cơ sở dữ liệu của nó.
Tốc độ và khả năng mở rộng: Khi blockchain phát triển, khối lượng giao dịch tăng lên, việc lập chỉ mục một lượng lớn dữ liệu trở nên phức tạp hơn, cần nhiều khả năng xử lý và không gian lưu trữ hơn. Giữ cho hiệu suất trở nên khó khăn hơn, nhưng giao thức lập chỉ mục giới thiệu các giải pháp đáp ứng những nhu cầu này.
Subsquid thông qua việc thêm nhiều nút lưu trữ dữ liệu để đạt được khả năng mở rộng theo chiều ngang, có thể mở rộng với sự cải tiến phần cứng. Graph cung cấp dữ liệu dòng song song để đồng bộ nhanh hơn, SubQuery giới thiệu phân mảnh nút để tăng tốc quá trình đồng bộ.
Mạng hỗ trợ: Mặc dù hầu hết các hoạt động blockchain vẫn diễn ra trên Ethereum, nhưng các blockchain khác đang ngày càng trở nên phổ biến. Layer 2s, Solana, blockchain Move và chuỗi hệ sinh thái Bitcoin đều có các nhà phát triển và hoạt động ngày càng tăng, cũng cần dịch vụ lập chỉ mục.
Hỗ trợ cho một số chuỗi không được các giao thức lập chỉ mục khác hỗ trợ có thể thu được hơn thị phần chi phí. Mạng lập chỉ mục dữ liệu dày đặc ( như Solana ) không phải là điều dễ dàng, hiện tại chỉ có Subsquid thành công cung cấp hỗ trợ lập chỉ mục cho chúng.
Mặc dù bộ chỉ mục được sử dụng rộng rãi trong phát triển dApp, nhưng tiềm năng của nó vẫn còn rất lớn, đặc biệt là trong trường hợp tích hợp AI. Khi AI trở nên phổ biến trong Web2 và Web3, khả năng cải thiện của nó phụ thuộc vào việc truy cập dữ liệu liên quan để đào tạo mô hình và phát triển các đại lý AI. Đảm bảo tính toàn vẹn của dữ liệu là rất quan trọng đối với các ứng dụng AI, có thể ngăn chặn mô hình bị nhập thông tin thiên lệch hoặc không chính xác.
Trang này có thể chứa nội dung của bên thứ ba, được cung cấp chỉ nhằm mục đích thông tin (không phải là tuyên bố/bảo đảm) và không được coi là sự chứng thực cho quan điểm của Gate hoặc là lời khuyên về tài chính hoặc chuyên môn. Xem Tuyên bố từ chối trách nhiệm để biết chi tiết.
16 thích
Phần thưởng
16
5
Chia sẻ
Bình luận
0/400
ForkTongue
· 22giờ trước
Có thể cho một db nhanh chóng lên chuỗi không?
Xem bản gốcTrả lời0
GlueGuy
· 08-01 04:48
Quản lý dữ liệu này phức tạp quá.
Xem bản gốcTrả lời0
LayerZeroHero
· 07-31 09:16
DA thế hệ này thật sự không ổn
Xem bản gốcTrả lời0
PumpDoctrine
· 07-31 09:07
Không hiểu đang nói gì, có ai hiểu không?
Xem bản gốcTrả lời0
rekt_but_resilient
· 07-31 08:58
Chịu không nổi, công nghệ này sao mà phức tạp thế.
Blockchain chỉ mục: Hạ tầng cơ bản quan trọng để xây dựng dApp hiệu quả
Sự tiến hóa của truy cập dữ liệu Blockchain: Giới thiệu về bộ chỉ mục và các dự án liên quan
Dữ liệu là cốt lõi của công nghệ Blockchain, là nền tảng để phát triển các ứng dụng phi tập trung. Hiện tại, các cuộc thảo luận chủ yếu tập trung vào khả năng truy cập dữ liệu (DA), tức là đảm bảo rằng các tham gia mạng có thể truy cập dữ liệu giao dịch mới nhất để xác thực. Tuy nhiên, khía cạnh quan trọng không kém của khả năng truy cập dữ liệu thường bị bỏ qua.
Trong kỷ nguyên blockchain mô-đun, giải pháp DA đã trở thành điều cần thiết. Chúng đảm bảo rằng tất cả người tham gia đều có thể sử dụng dữ liệu giao dịch, thực hiện xác minh theo thời gian thực và duy trì tính toàn vẹn của mạng. Tuy nhiên, lớp DA giống như một biển quảng cáo hơn là một cơ sở dữ liệu, dữ liệu sẽ không được lưu trữ vô thời hạn và sẽ bị xóa theo thời gian.
So với trước đây, khả năng truy cập dữ liệu tập trung vào khả năng truy xuất dữ liệu lịch sử, điều này rất quan trọng để phát triển dApp và thực hiện phân tích blockchain. Mặc dù ít được thảo luận hơn, nhưng nó quan trọng không kém khả năng sẵn có của dữ liệu. Cả hai đều đóng vai trò bổ sung trong hệ sinh thái blockchain, việc quản lý dữ liệu toàn diện phải giải quyết cả hai vấn đề này cùng một lúc để hỗ trợ các ứng dụng blockchain mạnh mẽ và hiệu quả.
Blockchain kể từ khi ra đời đã hoàn toàn thay đổi cơ sở hạ tầng, thúc đẩy việc tạo ra các dApp trong các lĩnh vực như game, tài chính và mạng xã hội. Tuy nhiên, việc xây dựng những dApp này cần truy cập vào một lượng lớn dữ liệu blockchain, điều này vừa khó khăn vừa tốn kém.
Đối với các lập trình viên dApp, một lựa chọn là lưu trữ và vận hành nút RPC lưu trữ của riêng họ. Những nút này lưu trữ tất cả dữ liệu blockchain lịch sử, cho phép truy cập hoàn toàn. Tuy nhiên, chi phí bảo trì cao, khả năng truy vấn hạn chế. Vận hành nút rẻ hơn là một lựa chọn khác, nhưng khả năng truy xuất dữ liệu hạn chế, có thể cản trở hoạt động của dApp.
Một phương pháp khác là sử dụng nhà cung cấp nút RPC thương mại. Họ chịu trách nhiệm về chi phí và quản lý nút, cung cấp dữ liệu qua các điểm cuối RPC. Các điểm cuối RPC công cộng miễn phí nhưng có giới hạn tốc độ, điều này có thể ảnh hưởng đến trải nghiệm người dùng. Các điểm cuối RPC riêng tư có hiệu suất tốt hơn, nhưng ngay cả việc truy xuất dữ liệu đơn giản cũng cần nhiều giao tiếp, kém hiệu quả và khó mở rộng.
Bộ chỉ mục blockchain đóng vai trò quan trọng trong việc tổ chức dữ liệu trên chuỗi và lưu trữ vào cơ sở dữ liệu để truy vấn, do đó được gọi là "Google của blockchain". Chúng chỉ mục dữ liệu blockchain, làm cho dữ liệu khả dụng thông qua ngôn ngữ truy vấn tương tự như SQL. Bộ chỉ mục cung cấp giao diện thống nhất, cho phép các nhà phát triển nhanh chóng và chính xác truy xuất thông tin bằng ngôn ngữ truy vấn chuẩn hóa, làm đơn giản hóa quy trình rất nhiều.
Các loại bộ chỉ mục khác nhau tối ưu hóa việc truy xuất dữ liệu:
Bộ chỉ mục nút hoàn chỉnh: Chạy nút blockchain hoàn chỉnh để trích xuất dữ liệu trực tiếp, đảm bảo đầy đủ và chính xác, nhưng cần nhiều dung lượng lưu trữ và khả năng xử lý.
Trình chỉ mục nhẹ: dựa vào nút hoàn chỉnh để lấy dữ liệu cụ thể theo nhu cầu, giảm yêu cầu lưu trữ nhưng có thể tăng thời gian truy vấn.
Bộ chỉ mục chuyên dụng: Tối ưu hóa truy xuất cho các trường hợp sử dụng cụ thể đối với dữ liệu hoặc blockchain loại nhất định, chẳng hạn như dữ liệu NFT hoặc giao dịch DeFi.
Bộ chỉ mục tổng hợp: Trích xuất dữ liệu từ nhiều Blockchain và nguồn, bao gồm thông tin ngoại tuyến, cung cấp giao diện truy vấn thống nhất, đặc biệt hữu ích cho các dApp đa chuỗi.
Chỉ riêng Ethereum đã cần 3TB không gian lưu trữ và vẫn đang tiếp tục tăng. Giao thức bộ chỉ mục triển khai nhiều bộ chỉ mục, cho phép chỉ mục hiệu quả và truy vấn tốc độ cao khối lượng dữ liệu lớn, điều này là RPC không thể thực hiện.
Bộ chỉ mục còn cho phép truy vấn phức tạp, dễ dàng lọc dữ liệu và phân tích sau khi trích xuất. Một số bộ chỉ mục có thể tổng hợp dữ liệu từ nhiều nguồn, tránh việc triển khai nhiều API cho dApp nhiều chuỗi. Thông qua việc phân bố trên nhiều nút, bộ chỉ mục cung cấp độ bảo mật và hiệu suất được nâng cao, trong khi các nhà cung cấp RPC có thể gặp sự cố do tính chất tập trung.
Tổng thể, so với nhà cung cấp nút RPC, bộ chỉ mục đã nâng cao hiệu quả và độ tin cậy của việc truy xuất dữ liệu, đồng thời giảm chi phí triển khai một nút đơn lẻ. Điều này khiến giao thức bộ chỉ mục Blockchain trở thành lựa chọn hàng đầu cho các nhà phát triển dApp.
Xây dựng dApp cần phải truy xuất và đọc dữ liệu blockchain để hoạt động dịch vụ. Điều này bao gồm DeFi, nền tảng NFT, trò chơi và thậm chí mạng xã hội, vì những nền tảng này cần đọc dữ liệu trước khi thực hiện các giao dịch khác.
Các giao thức DeFi cần thông tin khác nhau để báo giá, tỷ lệ, phí cho người dùng. AMM cần thông tin về giá cả và thanh khoản để tính toán tỷ lệ hoán đổi, trong khi các giao thức cho vay cần tỷ lệ sử dụng để xác định tỷ lệ cho vay và tỷ lệ thanh lý nợ. Trước khi tính toán tỷ lệ thực hiện của người dùng, việc nhập thông tin vào dApp là rất cần thiết.
GameFi cần chỉ mục và truy cập dữ liệu nhanh chóng, đảm bảo người dùng chơi game mượt mà. Chỉ thông qua việc truy xuất và thực thi dữ liệu nhanh chóng, game Web3 mới có thể cạnh tranh về hiệu suất với game Web2, thu hút nhiều người dùng hơn. Những trò chơi này cần dữ liệu như quyền sở hữu đất, số dư token, các thao tác trong game, v.v. Sử dụng bộ chỉ mục có thể đảm bảo dòng dữ liệu ổn định và thời gian hoạt động bình thường, đảm bảo trải nghiệm chơi game hoàn hảo.
Thị trường NFT và nền tảng cho vay cần chỉ mục dữ liệu truy cập nhiều thông tin khác nhau, chẳng hạn như siêu dữ liệu NFT, thông tin quyền sở hữu và chuyển nhượng, thông tin bản quyền, v.v. Việc chỉ mục nhanh chóng các dữ liệu này có thể tránh việc duyệt từng NFT để tìm kiếm thông tin quyền sở hữu hoặc thuộc tính.
Dù là DeFi AMM cần thông tin về giá cả và tính thanh khoản, hay ứng dụng SocialFi cần cập nhật bài viết của người dùng mới, việc truy xuất dữ liệu nhanh chóng là rất quan trọng cho hoạt động bình thường của dApp. Nhờ có bộ chỉ mục, chúng có thể truy xuất dữ liệu một cách hiệu quả và chính xác, mang lại trải nghiệm người dùng mượt mà.
Trình chỉ mục cung cấp một phương pháp để trích xuất dữ liệu cụ thể từ dữ liệu Blockchain gốc ( bao gồm các sự kiện hợp đồng thông minh trong mỗi khối ), tạo cơ hội cho phân tích dữ liệu cụ thể hơn, từ đó cung cấp cái nhìn tổng thể.
Ví dụ, giao thức giao dịch vĩnh viễn có thể xác định những token nào có khối lượng giao dịch lớn và tạo ra chi phí, từ đó quyết định có đưa chúng lên hợp đồng vĩnh viễn hay không. Các nhà phát triển DEX có thể tạo ra bảng điều khiển để hiểu sâu hơn về những pool có tỷ lệ sinh lời cao nhất hoặc thanh khoản mạnh nhất. Họ cũng có thể tạo bảng điều khiển công cộng, cho phép các nhà phát triển tự do linh hoạt truy vấn bất kỳ loại dữ liệu nào để hiển thị trên biểu đồ.
Do có nhiều bộ chỉ mục Blockchain có sẵn, việc nhận diện sự khác biệt giữa các giao thức chỉ mục là rất quan trọng để đảm bảo các nhà phát triển chọn được bộ chỉ mục phù hợp nhất với nhu cầu.
The Graph là giao thức lập chỉ mục đầu tiên được khởi động trên Ethereum, cho phép truy vấn dễ dàng dữ liệu giao dịch trước đây khó tiếp cận. Nó sử dụng định nghĩa và lọc subgraph để tập hợp một tập hợp con dữ liệu từ Blockchain, chẳng hạn như tất cả giao dịch liên quan đến một pool giao dịch.
Sử dụng chứng minh chỉ mục, người chỉ mục đặt cược token GRT cho dịch vụ chỉ mục và truy vấn, người ủy quyền có thể chọn token đặt cược. Người biên tập có thể truy cập các biểu đồ con chất lượng cao, giúp người chỉ mục xác định dữ liệu nào cần biên soạn cho các biểu đồ con để kiếm phí truy vấn tốt nhất. The Graph đang chuyển sang phi tập trung hơn, cuối cùng sẽ ngừng dịch vụ lưu trữ, yêu cầu nâng cấp biểu đồ con lên mạng của mình.
Hạ tầng của nó giúp cho mỗi triệu truy vấn có chi phí trung bình đạt 40 đô la, thấp hơn nhiều so với chi phí của các nút tự quản. Nó cũng hỗ trợ việc lập chỉ mục song song cho dữ liệu trên chuỗi và ngoài chuỗi, đạt được hiệu quả truy xuất dữ liệu cao.
Phần thưởng cho bộ chỉ mục của The Graph đã tăng trưởng ổn định trong vài quý qua, một phần do khối lượng truy vấn tăng lên, cũng như do sự tăng giá của token, vì họ có kế hoạch tích hợp truy vấn hỗ trợ AI trong tương lai.
Subsquid là một hồ dữ liệu phi tập trung, có thể mở rộng theo chiều ngang và điểm-điểm, cho phép tổng hợp hiệu quả một lượng lớn dữ liệu trên chuỗi và ngoài chuỗi, đồng thời được bảo vệ bằng chứng không kiến thức. Là một mạng lưới công cụ phi tập trung, mỗi nút chịu trách nhiệm lưu trữ một tập hợp con dữ liệu của các khối cụ thể, giúp tăng tốc quá trình truy xuất thông qua việc nhận diện nhanh chóng các nút lưu trữ dữ liệu cần thiết.
Subsquid hỗ trợ lập chỉ mục thời gian thực, cho phép lập chỉ mục trước khi khối được xác nhận cuối cùng. Nó cũng hỗ trợ lưu trữ dữ liệu ở định dạng mà nhà phát triển chọn, thuận tiện cho việc phân tích bằng các công cụ như BigQuery, Parquet hoặc CSV. Các subgraph có thể được triển khai trên mạng Subsquid mà không cần di chuyển sang Squid SDK, thực hiện triển khai không cần mã.
Mặc dù vẫn đang trong giai đoạn thử nghiệm, Subsquid đã đạt được những số liệu ấn tượng với hơn 80.000 người dùng mạng thử nghiệm, triển khai hơn 60.000 trình chỉ mục Squid, và có hơn 20.000 nhà phát triển xác thực trên mạng. Vào ngày 3 tháng 6, Subsquid đã khởi động mạng chính của hồ dữ liệu của mình.
Ngoài chỉ mục, hồ dữ liệu Subsquid Network còn có thể thay thế RPC trong các trường hợp sử dụng như phân tích, bộ đồng xử lý ZK/TEE, đại lý AI và Oracle.
SubQuery là mạng lưới cơ sở hạ tầng trung gian phi tập trung, cung cấp dịch vụ RPC và dữ liệu chỉ mục. Ban đầu hỗ trợ mạng Polkadot và Substrate, hiện đã mở rộng đến hơn 200 chuỗi. Cách hoạt động của nó tương tự như The Graph sử dụng bằng chứng chỉ mục, nơi các chỉ mục viên chỉ mục dữ liệu và cung cấp yêu cầu truy vấn, người ủy quyền sẽ giữ cổ phần của mình để đảm bảo cho chỉ mục viên. Tuy nhiên, nó giới thiệu việc người tiêu dùng gửi đơn đặt hàng mua, cho thấy thu nhập của chỉ mục viên được đảm bảo, chứ không phải từ quản lý.
Nó sẽ giới thiệu các nút dữ liệu SubQuery hỗ trợ phân đoạn, ngăn chặn việc đồng bộ hóa dữ liệu mới giữa các nút, tối ưu hóa hiệu suất truy vấn, đồng thời tiến tới phi tập trung lớn hơn. Người dùng có thể chọn trả khoảng 1 SQT token phí tính toán cho mỗi 1000 yêu cầu, hoặc thiết lập phí tùy chỉnh cho bộ chỉ mục thông qua giao thức.
Mặc dù SubQuery chỉ mới ra mắt token vào đầu năm nay, nhưng phần thưởng phát hành cho nút và người ủy thác cũng đã tăng theo giá trị USD, đại diện cho số lượng dịch vụ truy vấn được cung cấp trên nền tảng của họ không ngừng gia tăng. Kể từ TGE, tổng số SQT đã được staking đã tăng từ 6 triệu lên 125 triệu, nhấn mạnh sự gia tăng mức độ tham gia mạng.
Covalent là mạng lưới chỉ mục phi tập trung, được tạo ra bởi các nhà sản xuất mẫu khối (BSP) thông qua các nút mạng xuất khẩu hàng loạt để tạo bản sao dữ liệu blockchain, và công bố chứng chỉ trên blockchain Covalent L1. Dữ liệu này sau đó được các nhà sản xuất kết quả khối (BRP) tinh chỉnh theo các quy tắc đã xác định, lọc ra các dữ liệu phù hợp với yêu cầu.
Thông qua API thống nhất, các nhà phát triển có thể dễ dàng trích xuất dữ liệu Blockchain liên quan với định dạng yêu cầu và phản hồi nhất quán, mà không cần viết các truy vấn phức tạp tùy chỉnh để truy cập dữ liệu. Có thể sử dụng token CQT được thanh toán trên Moonbeam như một phương tiện thanh toán để trích xuất các tập dữ liệu được cấu hình trước từ các nhà điều hành mạng.
Phần thưởng của Covalent từ quý 1 năm 23 đến quý 1 năm 24 dường như có xu hướng tăng trưởng tổng thể, một phần là do giá token Covalent CQT tăng.
Khi chọn bộ chỉ mục, cần xem xét các yếu tố sau:
Khả năng tùy chỉnh dữ liệu: Một số bộ chỉ mục ( như Covalent ) là bộ chỉ mục chung, chỉ cung cấp tập dữ liệu cấu hình sẵn tiêu chuẩn qua API. Mặc dù nhanh chóng, nhưng không thể cung cấp tính linh hoạt cho các nhà phát triển cần tập dữ liệu tùy chỉnh. Sử dụng khung chỉ mục cho phép xử lý dữ liệu tùy chỉnh nhiều hơn để đáp ứng nhu cầu ứng dụng cụ thể.
An toàn: Dữ liệu chỉ mục phải an toàn, nếu không các dApp được xây dựng dựa trên các chỉ mục này cũng dễ bị tấn công. Ví dụ, nếu giao dịch và số dư ví có thể bị thao túng, dApp có thể mất tính thanh khoản, ảnh hưởng đến người dùng. Tất cả các chỉ mục đều áp dụng một hình thức an toàn nào đó thông qua việc đặt cọc token, nhưng các giải pháp khác có thể sử dụng chứng minh để nâng cao thêm tính an toàn.
Subsquid cung cấp tùy chọn sử dụng chứng minh lạc quan và chứng minh không kiến thức, Covalent phát hành chứng minh chứa giá trị băm khối. Graph cung cấp thời gian thách thức tranh chấp cho truy vấn của bộ chỉ mục trong khoảng thời gian thách thức lạc quan, SubQuery tạo ra chứng minh Merkle Mountain cho mỗi khối, tính toán giá trị băm của từng khối trong tất cả dữ liệu được lưu trữ trong cơ sở dữ liệu của nó.
Tốc độ và khả năng mở rộng: Khi blockchain phát triển, khối lượng giao dịch tăng lên, việc lập chỉ mục một lượng lớn dữ liệu trở nên phức tạp hơn, cần nhiều khả năng xử lý và không gian lưu trữ hơn. Giữ cho hiệu suất trở nên khó khăn hơn, nhưng giao thức lập chỉ mục giới thiệu các giải pháp đáp ứng những nhu cầu này.
Subsquid thông qua việc thêm nhiều nút lưu trữ dữ liệu để đạt được khả năng mở rộng theo chiều ngang, có thể mở rộng với sự cải tiến phần cứng. Graph cung cấp dữ liệu dòng song song để đồng bộ nhanh hơn, SubQuery giới thiệu phân mảnh nút để tăng tốc quá trình đồng bộ.
Mạng hỗ trợ: Mặc dù hầu hết các hoạt động blockchain vẫn diễn ra trên Ethereum, nhưng các blockchain khác đang ngày càng trở nên phổ biến. Layer 2s, Solana, blockchain Move và chuỗi hệ sinh thái Bitcoin đều có các nhà phát triển và hoạt động ngày càng tăng, cũng cần dịch vụ lập chỉ mục.
Hỗ trợ cho một số chuỗi không được các giao thức lập chỉ mục khác hỗ trợ có thể thu được hơn thị phần chi phí. Mạng lập chỉ mục dữ liệu dày đặc ( như Solana ) không phải là điều dễ dàng, hiện tại chỉ có Subsquid thành công cung cấp hỗ trợ lập chỉ mục cho chúng.
Mặc dù bộ chỉ mục được sử dụng rộng rãi trong phát triển dApp, nhưng tiềm năng của nó vẫn còn rất lớn, đặc biệt là trong trường hợp tích hợp AI. Khi AI trở nên phổ biến trong Web2 và Web3, khả năng cải thiện của nó phụ thuộc vào việc truy cập dữ liệu liên quan để đào tạo mô hình và phát triển các đại lý AI. Đảm bảo tính toàn vẹn của dữ liệu là rất quan trọng đối với các ứng dụng AI, có thể ngăn chặn mô hình bị nhập thông tin thiên lệch hoặc không chính xác.
Trong bộ chỉ mục giải