Evolusi Teknologi Indeks Data Blockchain: Dari Node Asli ke Layanan Data Seluruh Rantai yang Didukung AI
1. Pendahuluan
Sejak munculnya dApp pertama pada tahun 2017, ekosistem aplikasi blockchain semakin kaya. Ketika membahas aplikasi terdesentralisasi, apakah kita pernah berpikir tentang sumber data yang digunakan oleh dApp ini?
Pada tahun 2024, AI dan Web3 menjadi topik hangat. Dalam bidang kecerdasan buatan, data bagaikan sumber kehidupan, sangat penting bagi pembelajaran dan pemikiran sistem AI. Tanpa dukungan data, bahkan algoritma AI yang paling canggih pun sulit untuk menunjukkan kecerdasannya.
Artikel ini akan membahas secara mendalam perkembangan aksesibilitas data blockchain, menganalisis proses evolusi pengindeksan data, dan membandingkan karakteristik protokol layanan data seperti The Graph, Chainbase, dan Space and Time, dengan fokus khusus pada inovasi dua yang terakhir dalam menggabungkan teknologi AI.
2. Kompleksitas dan Kesederhanaan Indeks Data: Dari Node Blockchain ke Database Seluruh Rantai
2.1 Sumber Data: Node Blockchain
Blockchain dianggap sebagai buku besar terdesentralisasi, Node adalah infrastruktur dasarnya, bertanggung jawab untuk mencatat, menyimpan, dan menyebarkan semua data transaksi di dalam rantai. Namun, pengguna biasa yang membangun dan memelihara Node menghadapi tantangan teknis dan biaya. Meskipun secara teori siapa pun dapat menjalankan Node, pada kenyataannya pengguna lebih bergantung pada layanan pihak ketiga.
Untuk mengatasi masalah ini, penyedia node RPC muncul. Mereka mengelola node dan menyediakan data melalui titik akhir RPC, memungkinkan pengguna untuk mengakses data blockchain tanpa harus membangun node sendiri. Titik akhir RPC publik gratis tetapi memiliki batasan kecepatan, sedangkan titik akhir RPC pribadi memiliki kinerja yang lebih baik tetapi efisiensinya masih perlu ditingkatkan. Antarmuka API standar dari penyedia node mengurangi hambatan akses data, meletakkan dasar untuk analisis dan aplikasi data berikutnya.
2.2 Analisis Data: dari Data Prototipe ke Data yang Dapat Digunakan
Data mentah yang disediakan oleh Node Blockchain biasanya telah dienkripsi dan dikodekan, sehingga meningkatkan kesulitan dalam menganalisis. Bagi pengguna biasa dan pengembang, menangani data ini secara langsung memerlukan banyak pengetahuan teknis dan sumber daya komputasi.
Proses pemrosesan data sangat penting, karena mengubah data prototipe yang kompleks menjadi format yang mudah dipahami dan dioperasikan, sehingga pengguna dapat memanfaatkan data tersebut dengan lebih intuitif. Kualitas pemrosesan secara langsung mempengaruhi efisiensi dan efektivitas aplikasi data, dan merupakan bagian kunci dari seluruh proses pengindeksan.
2.3 Evolusi Pengindeks Data
Seiring dengan meningkatnya jumlah data Blockchain, permintaan akan pengindeks semakin meningkat. Pengindeks mengorganisir data di dalam rantai dan mengirimkannya ke basis data untuk memudahkan pencarian. Mereka mengindeks data Blockchain dan membuatnya tersedia kapan saja melalui bahasa kueri yang mirip SQL ( seperti GraphQL API ), yang secara signifikan menyederhanakan proses pengambilan data.
Berbagai jenis pengindex mengoptimalkan cara pencarian data:
Pengindeks Node Lengkap: Mengambil data langsung dari node blockchain lengkap, memastikan integritas dan akurasi, tetapi memerlukan banyak penyimpanan dan kemampuan pemrosesan.
Indeks ringan: bergantung pada node lengkap untuk mendapatkan data tertentu sesuai permintaan, mengurangi kebutuhan penyimpanan tetapi mungkin meningkatkan waktu kueri.
Pengindeks Khusus: Dioptimalkan untuk jenis data tertentu atau Blockchain, seperti data NFT atau transaksi DeFi.
Pengindeks Agregat: Mengambil data dari berbagai Blockchain dan sumber, termasuk informasi off-chain, memberikan antarmuka pencarian yang terintegrasi, cocok untuk dApp multi-chain.
Saat ini, node arsip Ethereum membutuhkan ruang penyimpanan 3-13,5 TB di berbagai klien, dan meningkat seiring pertumbuhan Blockchain. Menghadapi jumlah data yang besar, protokol pengindeks utama mendukung pengindeksan multi-rantai, dan menyesuaikan kerangka pemrosesan data untuk berbagai kebutuhan aplikasi, seperti kerangka "subgraf" dari The Graph.
Indexer secara signifikan meningkatkan efisiensi indeks dan query data. Dibandingkan dengan endpoint RPC tradisional, indexer mendukung pengindeksan efisien dari sejumlah besar data dan query cepat. Mereka memungkinkan untuk menjalankan query kompleks, memfilter data, dan melakukan analisis. Beberapa indexer juga mendukung agregasi sumber data dari beberapa Blockchain, menghindari masalah penerapan beberapa API pada dApp multi-chain. Melalui operasi terdistribusi, indexer memberikan keamanan dan kinerja yang lebih kuat, mengurangi risiko gangguan yang mungkin ditimbulkan oleh penyedia RPC terpusat.
2.4 Database Blockchain: Menyelaraskan Prioritas Aliran
Menggunakan node indeks untuk mencari data biasanya bergantung pada API sebagai satu-satunya portal data. Namun, ketika proyek berkembang, sering kali diperlukan sumber data yang lebih fleksibel, dan API yang distandarisasi sulit untuk memenuhi kebutuhan tersebut. Seiring dengan kompleksitas kebutuhan aplikasi, pengindeks data awal dan format indeks yang distandarisasi sulit untuk memenuhi kebutuhan pencarian yang beragam, seperti pencarian, akses lintas blok, atau pemetaan data di luar blok.
Dalam arsitektur saluran data modern, pendekatan "prioritas aliran" menjadi solusi untuk mengatasi keterbatasan pemrosesan batch tradisional, mewujudkan pengambilan, pemrosesan, dan analisis data secara real-time. Penyedia layanan data blockchain juga berkembang menuju pembangunan aliran data, seperti Substreams dari The Graph, Mirror dari Goldsky, serta danau data real-time dari Chainbase dan SubSquid.
Layanan ini bertujuan untuk memenuhi kebutuhan analisis transaksi real-time dan menyediakan kemampuan pencarian yang komprehensif. Mereka mendukung pengembangan aplikasi dan membantu analisis data on-chain melalui sumber data yang lebih canggih dan matang.
Dari perspektif saluran data modern, tantangan data on-chain didefinisikan ulang, kita dapat melihat potensi pengelolaan, penyimpanan, dan penyediaan data dari sudut pandang yang baru. Dengan menganggap subgraf dan pengindeks seperti ETL Ethereum sebagai aliran data alih-alih output akhir, kita dapat membayangkan kemungkinan untuk menyesuaikan kumpulan data berkinerja tinggi untuk setiap kasus penggunaan bisnis.
3. AI + Database? Perbandingan Mendalam The Graph, Chainbase, Space and Time
3.1 The Graph
Jaringan The Graph menyediakan layanan indeks dan kueri data multirantai melalui jaringan node terdesentralisasi, memudahkan pengembang untuk mengindeks data blockchain dan membangun aplikasi terdesentralisasi. Model produk utamanya termasuk pasar eksekusi kueri data dan pasar cache indeks data, yang melayani kebutuhan kueri produk pengguna.
Subgraf adalah struktur data dasar dari jaringan The Graph, yang mendefinisikan bagaimana mengekstrak dan mengubah data dari Blockchain ke dalam format yang dapat dicari. Siapa pun dapat membuat subgraf, beberapa aplikasi dapat digunakan kembali, meningkatkan keterpakgunaan dan efisiensi data.
Jaringan The Graph terdiri dari empat peran kunci: pengindeks, kurator, delegator, dan pengembang, yang bersama-sama menyediakan dukungan data untuk aplikasi web3.
The Graph telah beralih ke layanan pengelolaan subgraf yang sepenuhnya terdesentralisasi, dengan insentif ekonomi antara berbagai pihak untuk memastikan sistem berfungsi.
Alat AutoAgora, Allocation Optimizer, dan AgentC yang dikembangkan oleh Semiotic Labs meningkatkan kinerja ekosistem dalam berbagai aspek, seperti penetapan harga dinamis, alokasi sumber daya yang optimal, dan kueri bahasa alami. Penggunaan alat ini memungkinkan The Graph untuk menggabungkan AI dan lebih meningkatkan kecerdasan sistem serta kenyamanan pengguna.
3.2 Chainbase
Chainbase adalah jaringan data seluruh blockchain, mengintegrasikan semua data blockchain ke dalam satu platform, memudahkan pengembang untuk membangun dan memelihara aplikasi. Ciri-cirinya meliputi:
Danau data waktu nyata: menyediakan danau data waktu nyata yang khusus untuk aliran data blockchain, mendukung akses data instan.
Arsitektur dual chain: dibangun di atas lapisan eksekusi Eigenlayer AVS, membentuk arsitektur dual chain paralel dengan algoritma konsensus CometBFT, meningkatkan pemrograman dan komposabilitas data lintas rantai.
Standar format data inovatif: memperkenalkan standar format data "manuscripts", mengoptimalkan struktur data dan pemanfaatan di industri kripto.
Model dunia kripto: Menggabungkan teknologi model AI, menciptakan model AI yang dapat memahami, memprediksi transaksi blockchain dan berinteraksi dengannya, seperti model versi dasar Theia.
Model AI Chainbase Theia didasarkan pada model DORA dari NVIDIA, menggabungkan data on-chain dan off-chain serta aktivitas spasial dan temporal, menganalisis pola kripto dan membuat respons melalui penalaran kausal, menggali nilai potensial data on-chain.
Pemberdayaan AI menjadikan Chainbase sebagai penyedia layanan data cerdas yang lebih kompetitif, mampu memberikan wawasan data yang lebih luas dan mengoptimalkan proses pengolahan data.
3.3 Ruang dan Waktu
Space and Time (SxT) bertujuan untuk menciptakan lapisan komputasi yang dapat diverifikasi, memperluas bukti nol-pengetahuan di atas gudang data terdesentralisasi, untuk menyediakan pengolahan data yang dapat dipercaya bagi kontrak pintar, model bahasa besar, dan perusahaan.
SxT memperkenalkan teknologi Proof of SQL, yang merupakan teknologi bukti tanpa pengetahuan inovatif, memastikan bahwa kueri SQL yang dijalankan di gudang data terdesentralisasi dapat terjamin tidak dapat diubah dan diverifikasi. Proof of SQL menghasilkan bukti kriptografis, memverifikasi integritas dan akurasi hasil kueri, sehingga setiap validator dapat secara independen mengonfirmasi bahwa data tidak telah diubah.
SxT bekerja sama dengan Laboratorium Inovasi AI Microsoft untuk mengembangkan alat AI generatif, memungkinkan pengguna untuk memproses data blockchain melalui pemrosesan bahasa alami. Space and Time Studio memungkinkan pengguna untuk memasukkan kueri dalam bahasa alami, AI secara otomatis mengubahnya menjadi SQL dan menjalankan kueri, menampilkan hasil akhir.
Kesimpulan dan Harapan
Teknologi indeks data blockchain telah berkembang dari sumber data node awal, melalui analisis data dan pengembang indeks, menjadi layanan data seluruh rantai yang diberdayakan AI, mengalami proses penyempurnaan yang bertahap. Teknologi ini terus berkembang, meningkatkan efisiensi dan akurasi akses data, memberikan pengalaman cerdas bagi pengguna.
Di masa depan, seiring dengan perkembangan teknologi baru seperti teknologi AI dan bukti tanpa pengetahuan, layanan data Blockchain akan semakin cerdas dan aman. Layanan data Blockchain sebagai infrastruktur akan terus memainkan peran penting, memberikan dukungan untuk kemajuan dan inovasi industri.
Lihat Asli
Halaman ini mungkin berisi konten pihak ketiga, yang disediakan untuk tujuan informasi saja (bukan pernyataan/jaminan) dan tidak boleh dianggap sebagai dukungan terhadap pandangannya oleh Gate, atau sebagai nasihat keuangan atau profesional. Lihat Penafian untuk detailnya.
Evolusi Indeks Data Blockchain: Dari Node ke Layanan Rantai Penuh AI
Evolusi Teknologi Indeks Data Blockchain: Dari Node Asli ke Layanan Data Seluruh Rantai yang Didukung AI
1. Pendahuluan
Sejak munculnya dApp pertama pada tahun 2017, ekosistem aplikasi blockchain semakin kaya. Ketika membahas aplikasi terdesentralisasi, apakah kita pernah berpikir tentang sumber data yang digunakan oleh dApp ini?
Pada tahun 2024, AI dan Web3 menjadi topik hangat. Dalam bidang kecerdasan buatan, data bagaikan sumber kehidupan, sangat penting bagi pembelajaran dan pemikiran sistem AI. Tanpa dukungan data, bahkan algoritma AI yang paling canggih pun sulit untuk menunjukkan kecerdasannya.
Artikel ini akan membahas secara mendalam perkembangan aksesibilitas data blockchain, menganalisis proses evolusi pengindeksan data, dan membandingkan karakteristik protokol layanan data seperti The Graph, Chainbase, dan Space and Time, dengan fokus khusus pada inovasi dua yang terakhir dalam menggabungkan teknologi AI.
2. Kompleksitas dan Kesederhanaan Indeks Data: Dari Node Blockchain ke Database Seluruh Rantai
2.1 Sumber Data: Node Blockchain
Blockchain dianggap sebagai buku besar terdesentralisasi, Node adalah infrastruktur dasarnya, bertanggung jawab untuk mencatat, menyimpan, dan menyebarkan semua data transaksi di dalam rantai. Namun, pengguna biasa yang membangun dan memelihara Node menghadapi tantangan teknis dan biaya. Meskipun secara teori siapa pun dapat menjalankan Node, pada kenyataannya pengguna lebih bergantung pada layanan pihak ketiga.
Untuk mengatasi masalah ini, penyedia node RPC muncul. Mereka mengelola node dan menyediakan data melalui titik akhir RPC, memungkinkan pengguna untuk mengakses data blockchain tanpa harus membangun node sendiri. Titik akhir RPC publik gratis tetapi memiliki batasan kecepatan, sedangkan titik akhir RPC pribadi memiliki kinerja yang lebih baik tetapi efisiensinya masih perlu ditingkatkan. Antarmuka API standar dari penyedia node mengurangi hambatan akses data, meletakkan dasar untuk analisis dan aplikasi data berikutnya.
2.2 Analisis Data: dari Data Prototipe ke Data yang Dapat Digunakan
Data mentah yang disediakan oleh Node Blockchain biasanya telah dienkripsi dan dikodekan, sehingga meningkatkan kesulitan dalam menganalisis. Bagi pengguna biasa dan pengembang, menangani data ini secara langsung memerlukan banyak pengetahuan teknis dan sumber daya komputasi.
Proses pemrosesan data sangat penting, karena mengubah data prototipe yang kompleks menjadi format yang mudah dipahami dan dioperasikan, sehingga pengguna dapat memanfaatkan data tersebut dengan lebih intuitif. Kualitas pemrosesan secara langsung mempengaruhi efisiensi dan efektivitas aplikasi data, dan merupakan bagian kunci dari seluruh proses pengindeksan.
2.3 Evolusi Pengindeks Data
Seiring dengan meningkatnya jumlah data Blockchain, permintaan akan pengindeks semakin meningkat. Pengindeks mengorganisir data di dalam rantai dan mengirimkannya ke basis data untuk memudahkan pencarian. Mereka mengindeks data Blockchain dan membuatnya tersedia kapan saja melalui bahasa kueri yang mirip SQL ( seperti GraphQL API ), yang secara signifikan menyederhanakan proses pengambilan data.
Berbagai jenis pengindex mengoptimalkan cara pencarian data:
Saat ini, node arsip Ethereum membutuhkan ruang penyimpanan 3-13,5 TB di berbagai klien, dan meningkat seiring pertumbuhan Blockchain. Menghadapi jumlah data yang besar, protokol pengindeks utama mendukung pengindeksan multi-rantai, dan menyesuaikan kerangka pemrosesan data untuk berbagai kebutuhan aplikasi, seperti kerangka "subgraf" dari The Graph.
Indexer secara signifikan meningkatkan efisiensi indeks dan query data. Dibandingkan dengan endpoint RPC tradisional, indexer mendukung pengindeksan efisien dari sejumlah besar data dan query cepat. Mereka memungkinkan untuk menjalankan query kompleks, memfilter data, dan melakukan analisis. Beberapa indexer juga mendukung agregasi sumber data dari beberapa Blockchain, menghindari masalah penerapan beberapa API pada dApp multi-chain. Melalui operasi terdistribusi, indexer memberikan keamanan dan kinerja yang lebih kuat, mengurangi risiko gangguan yang mungkin ditimbulkan oleh penyedia RPC terpusat.
2.4 Database Blockchain: Menyelaraskan Prioritas Aliran
Menggunakan node indeks untuk mencari data biasanya bergantung pada API sebagai satu-satunya portal data. Namun, ketika proyek berkembang, sering kali diperlukan sumber data yang lebih fleksibel, dan API yang distandarisasi sulit untuk memenuhi kebutuhan tersebut. Seiring dengan kompleksitas kebutuhan aplikasi, pengindeks data awal dan format indeks yang distandarisasi sulit untuk memenuhi kebutuhan pencarian yang beragam, seperti pencarian, akses lintas blok, atau pemetaan data di luar blok.
Dalam arsitektur saluran data modern, pendekatan "prioritas aliran" menjadi solusi untuk mengatasi keterbatasan pemrosesan batch tradisional, mewujudkan pengambilan, pemrosesan, dan analisis data secara real-time. Penyedia layanan data blockchain juga berkembang menuju pembangunan aliran data, seperti Substreams dari The Graph, Mirror dari Goldsky, serta danau data real-time dari Chainbase dan SubSquid.
Layanan ini bertujuan untuk memenuhi kebutuhan analisis transaksi real-time dan menyediakan kemampuan pencarian yang komprehensif. Mereka mendukung pengembangan aplikasi dan membantu analisis data on-chain melalui sumber data yang lebih canggih dan matang.
Dari perspektif saluran data modern, tantangan data on-chain didefinisikan ulang, kita dapat melihat potensi pengelolaan, penyimpanan, dan penyediaan data dari sudut pandang yang baru. Dengan menganggap subgraf dan pengindeks seperti ETL Ethereum sebagai aliran data alih-alih output akhir, kita dapat membayangkan kemungkinan untuk menyesuaikan kumpulan data berkinerja tinggi untuk setiap kasus penggunaan bisnis.
3. AI + Database? Perbandingan Mendalam The Graph, Chainbase, Space and Time
3.1 The Graph
Jaringan The Graph menyediakan layanan indeks dan kueri data multirantai melalui jaringan node terdesentralisasi, memudahkan pengembang untuk mengindeks data blockchain dan membangun aplikasi terdesentralisasi. Model produk utamanya termasuk pasar eksekusi kueri data dan pasar cache indeks data, yang melayani kebutuhan kueri produk pengguna.
Subgraf adalah struktur data dasar dari jaringan The Graph, yang mendefinisikan bagaimana mengekstrak dan mengubah data dari Blockchain ke dalam format yang dapat dicari. Siapa pun dapat membuat subgraf, beberapa aplikasi dapat digunakan kembali, meningkatkan keterpakgunaan dan efisiensi data.
Jaringan The Graph terdiri dari empat peran kunci: pengindeks, kurator, delegator, dan pengembang, yang bersama-sama menyediakan dukungan data untuk aplikasi web3.
The Graph telah beralih ke layanan pengelolaan subgraf yang sepenuhnya terdesentralisasi, dengan insentif ekonomi antara berbagai pihak untuk memastikan sistem berfungsi.
Alat AutoAgora, Allocation Optimizer, dan AgentC yang dikembangkan oleh Semiotic Labs meningkatkan kinerja ekosistem dalam berbagai aspek, seperti penetapan harga dinamis, alokasi sumber daya yang optimal, dan kueri bahasa alami. Penggunaan alat ini memungkinkan The Graph untuk menggabungkan AI dan lebih meningkatkan kecerdasan sistem serta kenyamanan pengguna.
3.2 Chainbase
Chainbase adalah jaringan data seluruh blockchain, mengintegrasikan semua data blockchain ke dalam satu platform, memudahkan pengembang untuk membangun dan memelihara aplikasi. Ciri-cirinya meliputi:
Model AI Chainbase Theia didasarkan pada model DORA dari NVIDIA, menggabungkan data on-chain dan off-chain serta aktivitas spasial dan temporal, menganalisis pola kripto dan membuat respons melalui penalaran kausal, menggali nilai potensial data on-chain.
Pemberdayaan AI menjadikan Chainbase sebagai penyedia layanan data cerdas yang lebih kompetitif, mampu memberikan wawasan data yang lebih luas dan mengoptimalkan proses pengolahan data.
3.3 Ruang dan Waktu
Space and Time (SxT) bertujuan untuk menciptakan lapisan komputasi yang dapat diverifikasi, memperluas bukti nol-pengetahuan di atas gudang data terdesentralisasi, untuk menyediakan pengolahan data yang dapat dipercaya bagi kontrak pintar, model bahasa besar, dan perusahaan.
SxT memperkenalkan teknologi Proof of SQL, yang merupakan teknologi bukti tanpa pengetahuan inovatif, memastikan bahwa kueri SQL yang dijalankan di gudang data terdesentralisasi dapat terjamin tidak dapat diubah dan diverifikasi. Proof of SQL menghasilkan bukti kriptografis, memverifikasi integritas dan akurasi hasil kueri, sehingga setiap validator dapat secara independen mengonfirmasi bahwa data tidak telah diubah.
SxT bekerja sama dengan Laboratorium Inovasi AI Microsoft untuk mengembangkan alat AI generatif, memungkinkan pengguna untuk memproses data blockchain melalui pemrosesan bahasa alami. Space and Time Studio memungkinkan pengguna untuk memasukkan kueri dalam bahasa alami, AI secara otomatis mengubahnya menjadi SQL dan menjalankan kueri, menampilkan hasil akhir.
Kesimpulan dan Harapan
Teknologi indeks data blockchain telah berkembang dari sumber data node awal, melalui analisis data dan pengembang indeks, menjadi layanan data seluruh rantai yang diberdayakan AI, mengalami proses penyempurnaan yang bertahap. Teknologi ini terus berkembang, meningkatkan efisiensi dan akurasi akses data, memberikan pengalaman cerdas bagi pengguna.
Di masa depan, seiring dengan perkembangan teknologi baru seperti teknologi AI dan bukti tanpa pengetahuan, layanan data Blockchain akan semakin cerdas dan aman. Layanan data Blockchain sebagai infrastruktur akan terus memainkan peran penting, memberikan dukungan untuk kemajuan dan inovasi industri.