Pentingnya Data Blockchain dan Aplikasi Indexer

Inti dari teknologi Blockchain adalah data. Data tidak hanya merupakan dasar untuk mengembangkan aplikasi terdesentralisasi (dApp), tetapi juga kunci untuk menjaga integritas jaringan. Meskipun saat ini industri lebih fokus pada ketersediaan data (DA), yaitu memastikan bahwa peserta jaringan dapat mengakses data transaksi terbaru untuk melakukan verifikasi, namun aksesibilitas data juga sama pentingnya, meskipun sering diabaikan.

Dalam era blockchain modular, solusi DA telah menjadi bagian yang tak terpisahkan. Solusi ini menjamin bahwa peserta dapat mengakses data transaksi, sehingga memungkinkan verifikasi waktu nyata dan menjaga integritas jaringan. Namun, lapisan DA lebih mirip dengan papan pengumuman sementara, bukan basis data permanen. Data akan dihapus seiring berjalannya waktu, seperti poster di papan iklan yang akhirnya akan digantikan oleh konten baru.

Sebaliknya, aksesibilitas data berfokus pada kemampuan untuk mengambil data historis, yang sangat penting untuk mengembangkan dApp dan melakukan analisis blockchain. Meskipun diskusinya lebih sedikit, aksesibilitas data sama pentingnya dengan ketersediaan data. Keduanya memainkan peran yang berbeda tetapi saling melengkapi dalam ekosistem blockchain, pendekatan manajemen data yang komprehensif harus menangani kedua masalah ini secara bersamaan untuk mendukung aplikasi blockchain yang kuat dan efisien.

Metode tradisional untuk pencarian data Blockchain

Sejak lahir, Blockchain telah mengubah infrastruktur secara menyeluruh, mendorong inovasi dApp di bidang permainan, keuangan, dan jejaring sosial. Namun, membangun dApp ini memerlukan akses ke data Blockchain yang sangat besar, dan proses ini baik sulit maupun mahal.

Bagi pengembang dApp, salah satu pilihan adalah mengelola dan menjalankan node RPC arsip secara mandiri. Node-node ini menyimpan semua data historis Blockchain, memungkinkan akses penuh. Namun, biaya pemeliharaannya sangat tinggi, kemampuan pencarian terbatas, dan sulit memenuhi kebutuhan spesifik pengembang. Meskipun menjalankan node ringan memiliki biaya yang lebih rendah, kemampuan pengambilan data terbatas, yang dapat mempengaruhi operasi normal dApp.

Metode lain adalah menggunakan layanan node RPC komersial. Penyedia ini bertanggung jawab atas biaya dan pengelolaan node, menyediakan data melalui titik akhir RPC. Titik akhir RPC publik dapat digunakan secara gratis, tetapi memiliki batasan kecepatan, yang dapat memengaruhi pengalaman pengguna dApp. Titik akhir RPC pribadi memiliki kinerja yang lebih baik, tetapi bahkan pengambilan data yang sederhana memerlukan komunikasi yang besar, tidak efisien, dan sulit untuk diskalakan. Selain itu, mereka biasanya kekurangan kompatibilitas lintas jaringan.

Solusi yang Lebih Baik: Pengindeks Blockchain

Indexer Blockchain memainkan peran kunci dalam mengorganisir data di rantai dan menyimpannya di database untuk keperluan pencarian, sehingga disebut sebagai "mesin pencari blockchain". Mereka mengindeks data blockchain dan menggunakan bahasa kueri mirip SQL seperti GraphQL API ( agar data selalu tersedia. Indexer menyediakan antarmuka kueri data yang seragam untuk pengembang, yang secara signifikan menyederhanakan proses pengambilan data.

Berbagai jenis pengindeks mengoptimalkan cara pengambilan data dengan cara yang berbeda.

1. Pengindeks Node Lengkap: menjalankan node blockchain lengkap dan mengekstrak data secara langsung, memastikan data lengkap dan akurat, tetapi membutuhkan banyak penyimpanan dan kemampuan pemrosesan.

2. Indeks ringan: bergantung pada node lengkap untuk mendapatkan data tertentu sesuai permintaan, mengurangi kebutuhan penyimpanan tetapi mungkin meningkatkan waktu kueri.

3. Pengindeks Khusus: Dioptimalkan untuk jenis data tertentu atau blockchain tertentu, seperti data NFT atau transaksi DeFi.

4. Pengindeks Agregat: Mengambil data dari berbagai blockchain dan sumber, termasuk informasi off-chain, menyediakan antarmuka pencarian yang seragam, cocok untuk dApp multi-chain.

Hanya Ethereum yang membutuhkan ruang penyimpanan 3TB, dan terus berkembang seiring pertumbuhan blockchain. Protokol pengindeks mengimplementasikan beberapa pengindeks untuk mengindeks dengan efisien dan melakukan query cepat terhadap sejumlah besar data, yang tidak dapat dicapai oleh RPC.

Indexer mendukung kueri kompleks, penyaringan data yang fleksibel, dan analisis setelah ekstraksi. Beberapa indexer juga dapat mengagregasi data dari berbagai sumber, menghindari penerapan beberapa API untuk dApp multi-blockchain. Melalui node terdistribusi, indexer menyediakan keamanan dan kinerja yang ditingkatkan, sementara penyedia RPC terpusat mungkin mengalami gangguan dan downtime.

Secara keseluruhan, dibandingkan dengan layanan node RPC, pengindeks meningkatkan efisiensi dan keandalan pengambilan data, sambil mengurangi biaya penyebaran satu node. Ini menjadikan protokol pengindeks blockchain sebagai solusi pilihan bagi pengembang dApp.

![Perkembangan Akses Data Web3: Pengenalan Indeks dan Proyek Terkait])https://img-cdn.gateio.im/webp-social/moments-16396b955382c2c74010c264affdca46.webp(

Skenario Aplikasi Indeks

Seperti yang disebutkan sebelumnya, membangun dApp memerlukan pengambilan dan pembacaan data Blockchain agar dapat menjalankan layanan. Ini termasuk berbagai jenis dApp, seperti DeFi, platform NFT, game, bahkan jaringan sosial, karena platform-platform ini perlu membaca data terlebih dahulu sebelum melakukan transaksi lainnya.

DeFi

Protokol DeFi memerlukan informasi yang berbeda untuk memberikan harga, rasio, biaya, dan sebagainya kepada pengguna. Automated Market Maker )AMM( memerlukan informasi harga dan likuiditas dari beberapa kumpulan dana untuk menghitung suku bunga swap, sedangkan protokol pinjam memerlukan pemanfaatan untuk menentukan suku bunga pinjam dan rasio utang yang dilikuidasi. Sebelum menghitung suku bunga yang dieksekusi pengguna, sangat penting untuk memasukkan informasi ini ke dalam dApp.

Permainan

GameFi memerlukan pengindeksan dan akses data yang cepat untuk memastikan pengalaman bermain game yang lancar bagi pengguna. Hanya dengan pengambilan dan pelaksanaan data yang sangat cepat, permainan Web3 dapat bersaing dalam hal kinerja dengan permainan Web2, sehingga menarik lebih banyak pengguna. Permainan ini memerlukan kepemilikan tanah, saldo token dalam permainan, dan data operasi dalam permainan. Dengan menggunakan pengindeks, mereka dapat lebih baik memastikan aliran data yang stabil dan waktu operasi yang normal, menjamin pengalaman bermain game yang sempurna.

NFT

Pasar NFT dan platform pinjaman perlu mengindeks data untuk mengakses berbagai informasi, seperti metadata NFT, data kepemilikan dan transfer, informasi royalti, dan lain-lain. Pengindeksan cepat data semacam ini dapat menghindari penelusuran setiap NFT satu per satu untuk menemukan data kepemilikan atau atribut NFT.

Baik itu Automated Market Maker DeFi yang membutuhkan informasi harga dan likuiditas )AMM(, atau aplikasi SocialFi yang perlu memperbarui postingan pengguna baru, kemampuan untuk dengan cepat mengambil data sangat penting untuk operasi normal dApp. Dengan bantuan pengindeks, mereka dapat mengambil data secara efisien dan akurat, sehingga memberikan pengalaman pengguna yang lancar.

Analisis

Indexer menyediakan cara untuk mengekstrak data tertentu dari data blockchain mentah ) yang mencakup peristiwa kontrak pintar dalam setiap blok (. Ini memberikan peluang untuk analisis data yang lebih spesifik, sehingga memberikan wawasan yang komprehensif.

Misalnya, protokol perdagangan berkelanjutan dapat menentukan token mana yang memiliki volume perdagangan tinggi, token mana yang akan menghasilkan biaya, sehingga memutuskan apakah token-token ini akan terdaftar sebagai kontrak berkelanjutan di platform mereka. Pengembang DEX dapat membuat dasbor untuk produk mereka sendiri, untuk memahami secara mendalam kolam dana mana yang memiliki tingkat pengembalian tertinggi atau likuiditas terkuat. Mereka juga dapat membuat dasbor publik, memungkinkan pengembang untuk dengan bebas dan fleksibel menanyakan jenis data apa pun yang ingin ditampilkan di grafik.

Karena ada beberapa pengindeks blockchain yang tersedia, maka mengenali perbedaan antara protokol pengindeks sangat penting untuk memastikan pengembang memilih pengindeks yang paling sesuai dengan kebutuhan mereka.

Overview Indeks Blockchain

The Graph

The Graph adalah protokol pengindeks pertama yang diluncurkan di Ethereum, yang menyederhanakan pencarian data transaksi yang sebelumnya sulit diakses. Ia menggunakan definisi subgraf dan penyaringan untuk mengumpulkan subset data dari Blockchain, seperti semua transaksi yang terkait dengan kumpulan transaksi tertentu.

Dengan menggunakan bukti indeks, penyedia indeks mempertaruhkan token asli GRT untuk layanan indeks dan query, dan delegator dapat memilih untuk mempertaruhkan token mereka di sini. Kurator dapat mengakses subgraf berkualitas tinggi untuk membantu penyedia indeks menentukan subgraf mana yang harus mereka siapkan data untuk mendapatkan biaya query terbaik. Dalam proses transisi menuju desentralisasi yang lebih besar, The Graph pada akhirnya akan menghentikan layanan hostingnya, dan meminta subgraf untuk melakukan upgrade ke jaringan mereka, sambil menyediakan penyedia indeks yang telah ditingkatkan.

Infrastruktur dasarnya membuat biaya rata-rata untuk setiap satu juta kueri mencapai 40 dolar, jauh lebih rendah dibandingkan dengan biaya node yang dihosting sendiri. Dengan menggunakan sumber data file, ia juga mendukung pengindeksan paralel untuk data di on-chain dan off-chain secara bersamaan, untuk mencapai pengambilan data yang efisien.

Hadiah indeks dari The Graph telah meningkat secara stabil dalam beberapa kuartal terakhir. Ini sebagian disebabkan oleh peningkatan jumlah kueri, juga terkait dengan kenaikan harga token, karena mereka berencana untuk mengintegrasikan kueri yang dibantu oleh kecerdasan buatan di masa depan.

![Perkembangan Akses Data Web3: Pengenalan Indeks dan Proyek Terkait])https://img-cdn.gateio.im/webp-social/moments-53dbb4fd659cf6a7184990c886901658.webp(

Subsquid

Subsquid adalah danau data terdesentralisasi yang dapat diskalakan secara horizontal dan peer-to-peer, yang dapat mengagregasi sejumlah besar data on-chain dan off-chain dengan efisien, dan dilindungi melalui bukti nol-pengetahuan. Sebagai jaringan pekerja terdesentralisasi, setiap node bertanggung jawab untuk menyimpan data dari subset blok tertentu, dengan mempercepat proses pengambilan data melalui identifikasi cepat node yang menyimpan data yang diperlukan.

Subsquid mendukung pengindeksan waktu nyata, memungkinkan pengindeksan sebelum blok dipastikan. Ini juga mendukung penyimpanan data dalam format yang dipilih oleh pengembang, memudahkan penggunaan alat seperti BigQuery, Parquet, atau CSV untuk analisis. Selain itu, subgraf dapat diterapkan tanpa kode di jaringan Subsquid, tanpa perlu migrasi ke Squid SDK.

Meskipun masih dalam tahap jaringan uji, Subsquid telah mencapai hasil yang signifikan, dengan lebih dari 80.000 pengguna jaringan uji, telah menerapkan lebih dari 60.000 indeks Squid, dan terdapat lebih dari 20.000 pengembang yang terverifikasi di jaringan. Baru-baru ini, Subsquid meluncurkan jaringan utama untuk danau datanya.

Selain indeks, Danau Data Subsquid Network juga dapat menggantikan RPC dalam kasus penggunaan analisis, ZK/TEE coprocessor, agen AI, dan Oracle.

SubQuery

SubQuery adalah jaringan infrastruktur middleware terdesentralisasi yang menyediakan layanan RPC dan pengindeksan data. Ini awalnya mendukung jaringan Polkadot dan Substrate, dan sekarang telah diperluas untuk mencakup lebih dari 200 rantai. Cara kerjanya mirip dengan The Graph yang menggunakan bukti pengindeksan, di mana pengindeks mengindeks data dan menyediakan permintaan kueri, sementara delegator mempertaruhkan saham mereka kepada pengindeks. Namun, ini memperkenalkan konsumen untuk mengajukan pesanan pembelian, untuk memastikan pendapatan pengindeks terjamin, bukan manajer.

Ini akan memperkenalkan node data SubQuery yang mendukung sharding, untuk mencegah sinkronisasi data baru yang terus menerus antar node, sehingga mengoptimalkan efisiensi kueri, sambil bergerak menuju desentralisasi yang lebih besar. Pengguna dapat memilih untuk membayar biaya komputasi sekitar 1 SQT token per 1000 permintaan, atau mengatur biaya kustom untuk pengindeks melalui protokol.

Meskipun SubQuery baru meluncurkan tokennya lebih awal tahun ini, hadiah penerbitan untuk node dan delegator juga menunjukkan tren pertumbuhan, yang juga mencerminkan peningkatan jumlah layanan kueri yang ditawarkan di platformnya. Sejak TGE, total SQT yang dipertaruhkan telah meningkat dari 6 juta menjadi 125 juta, menyoroti peningkatan keterlibatan jaringan.

Covalent

Covalent adalah jaringan pengindeks terdesentralisasi, yang dibuat oleh produsen contoh blok )BSP( node jaringan melalui cara ekspor massal untuk membuat salinan data blockchain, dan menerbitkan bukti di blockchain Covalent L1. Data ini kemudian dirinci oleh produsen hasil blok )BRP( node sesuai dengan aturan yang ditetapkan untuk menyaring data yang memenuhi syarat.

Dengan API yang terintegrasi, pengembang dapat dengan mudah mengekstrak data Blockchain yang relevan dalam format permintaan dan respons yang konsisten, tanpa perlu menulis kueri kompleks yang disesuaikan untuk mengakses data. Token CQT yang diselesaikan di Moonbeam dapat digunakan sebagai alat pembayaran untuk mengekstrak kumpulan data yang telah dikonfigurasi sebelumnya dari penyedia jaringan.

Hadiah Covalent dari kuartal pertama tahun 23 hingga kuartal pertama tahun 24 tampaknya menunjukkan tren pertumbuhan secara keseluruhan, sebagian disebabkan oleh kenaikan harga token Covalent CQT.

![Perkembangan Akses Data Web3: Pengenalan Indeks dan Proyek Terkait])https://img-cdn.gateio.im/webp-social/moments-52ee29205aa307720198994a5f3de61f.webp(

Faktor Pertimbangan dalam Memilih Indeks

Kustomisasi Data

Beberapa pengindeks ) seperti Covalent ( adalah pengindeks umum, yang hanya menyediakan dataset pra-konfigurasi standar melalui API. Meskipun mereka mungkin cepat, mereka tidak memberikan fleksibilitas untuk pengembang yang membutuhkan dataset kustom. Menggunakan kerangka pengindeks memungkinkan pemrosesan data yang lebih kustom untuk memenuhi kebutuhan spesifik aplikasi.

Keamanan

Data indeks harus aman, jika tidak, dApp yang dibangun berdasarkan pengindeks ini juga rentan terhadap serangan. Misalnya, jika transaksi dan saldo dompet dapat dimanipulasi, dApp berpotensi kehilangan likuiditas, yang berdampak pada penggunanya. Meskipun semua pengindeks mengadopsi bentuk keamanan tertentu melalui penyetoran token pengindeks, solusi pengindeks lainnya mungkin menggunakan bukti untuk meningkatkan keamanan lebih lanjut.

Subsquid menyediakan opsi menggunakan bukti optimis dan bukti tanpa pengetahuan, sementara Covalent juga merilis bukti yang mencakup nilai hash blok. Graph menawarkan periode tantangan sengketa untuk kueri pengindeks dengan cara periode tantangan optimis, sementara SubQuery untuk setiap