Metrik yang digunakan untuk mengukur hasil bisa menyesatkan saat mengevaluasi kinerja blockchain. Seiring munculnya lebih banyak jaringan blockchain, publik memerlukan metrik yang jelas dan berfokus pada efisiensi, bukan klaim yang berlebihan, untuk membedakan di antara mereka.
Dalam percakapan dengan BeInCrypto, Co-Founder Taraxa Steven Pu menjelaskan bahwa semakin sulit untuk membandingkan kinerja blockchain secara akurat karena banyak metrik yang dilaporkan bergantung pada asumsi yang terlalu optimistis daripada hasil berbasis bukti. Untuk melawan gelombang misrepresentasi ini, Pu mengusulkan metrik baru yang dia sebut TPS/US$.
Mengapa Industri Kekurangan Tolok Ukur yang Andal?
Kebutuhan akan diferensiasi yang jelas semakin meningkat dengan bertambahnya jumlah jaringan blockchain layer-1. Seiring berbagai pengembang mempromosikan kecepatan dan efisiensi blockchain mereka, bergantung pada metrik yang membedakan kinerja mereka menjadi sangat penting.
Namun, industri ini masih kekurangan tolok ukur yang andal untuk efisiensi dunia nyata, dan lebih mengandalkan gelombang sentimen sporadis dari popularitas yang didorong oleh hype. Menurut Pu, angka kinerja yang menyesatkan saat ini memenuhi pasar, mengaburkan kemampuan sebenarnya.
“Mudah bagi oportunis untuk memanfaatkan dengan meningkatkan narasi yang terlalu disederhanakan dan dibesar-besarkan untuk keuntungan mereka sendiri. Setiap konsep teknis dan metrik yang dapat dibayangkan pada suatu waktu atau lainnya telah digunakan untuk membesar-besarkan banyak proyek yang sebenarnya tidak pantas mendapatkannya: TPS, latensi finalitas, modularitas, jumlah node jaringan, kecepatan eksekusi, paralelisasi, pemanfaatan bandwidth, kompatibilitas EVM, inkompatibilitas EVM, dll.,” ujar Pu kepada BeInCrypto.
Pu menyoroti bagaimana beberapa proyek memanfaatkan metrik TPS, menggunakannya sebagai taktik pemasaran untuk membuat kinerja blockchain terdengar lebih menarik daripada kondisi dunia nyata.
Mengulas Sifat Menyesatkan dari TPS
Transaksi per detik, yang lebih dikenal sebagai TPS, adalah metrik yang merujuk pada rata-rata atau jumlah transaksi yang berkelanjutan yang dapat diproses dan diselesaikan oleh jaringan blockchain per detik dalam kondisi operasi normal.
Namun, sering kali metrik ini menyesatkan proyek, memberikan pandangan yang menyimpang tentang kinerja keseluruhan.
“Jaringan terdesentralisasi adalah sistem yang kompleks yang perlu dipertimbangkan secara keseluruhan, dan dalam konteks kasus penggunaannya. Namun pasar memiliki kebiasaan buruk untuk menyederhanakan dan menjual berlebihan satu metrik atau aspek spesifik dari sebuah proyek, sambil mengabaikan keseluruhan. Mungkin jaringan yang sangat terpusat dengan TPS tinggi memang memiliki kegunaan dalam skenario yang tepat dengan model kepercayaan tertentu, namun pasar benar-benar tidak memiliki selera untuk deskripsi yang begitu bernuansa,” terang Pu.
Pu menunjukkan bahwa proyek blockchain dengan klaim ekstrem pada metrik tunggal seperti TPS mungkin telah mengorbankan desentralisasi, keamanan, dan akurasi.
“Ambil TPS, misalnya. Satu metrik ini menyembunyikan banyak aspek lain dari jaringan, misalnya, bagaimana TPS dicapai? Apa yang dikorbankan dalam prosesnya? Jika saya memiliki 1 node, menjalankan WASM JIT VM, menyebutnya sebagai jaringan, itu memberi Anda beberapa ratus ribu TPS langsung. Kemudian saya membuat 1.000 salinan dari mesin itu dan menyebutnya sharding, sekarang Anda mulai mendapatkan ratusan juta ‘TPS’. Tambahkan asumsi yang tidak realistis seperti non-konflik, dan Anda berasumsi dapat memparalelkan semua transaksi, maka Anda bisa mendapatkan “TPS” ke dalam miliaran. Bukan berarti TPS adalah metrik yang buruk, Anda hanya tidak bisa melihat metrik apa pun secara terpisah karena ada banyak informasi tersembunyi di balik angka-angka tersebut,” tambahnya.
Co-Founder Taraxa mengungkapkan sejauh mana metrik yang dibesar-besarkan ini dalam laporan terbaru.
Perbedaan Signifikan Antara TPS Teoretis dan Dunia Nyata
Pu berusaha membuktikan pendapatnya dengan menentukan perbedaan antara TPS historis maksimum yang direalisasikan di mainnet blockchain dan TPS teoretis maksimum.
Dari 22 jaringan permissionless dan single-shard yang diamati, Pu menemukan bahwa, rata-rata, ada kesenjangan 20 kali lipat antara teori dan kenyataan. Dengan kata lain, metrik teoretis 20 kali lebih tinggi daripada TPS mainnet maksimum yang diamati.
“Perkiraan metrik yang berlebihan (seperti dalam kasus TPS) adalah respons terhadap pasar kripto yang sangat spekulatif dan didorong oleh narasi. Semua orang ingin memposisikan proyek dan teknologi mereka dalam cahaya terbaik, jadi mereka membuat perkiraan teoretis, atau melakukan tes dengan asumsi yang sangat tidak realistis, untuk mencapai metrik yang dibesar-besarkan. Ini adalah iklan yang tidak jujur. Tidak lebih, tidak kurang,” ucap Pu kepada BeInCrypto.
Untuk melawan metrik yang dibesar-besarkan ini, Pu mengembangkan ukuran kinerja sendiri.
Memperkenalkan TPS/US$: Metode Pengukuran yang Lebih Seimbang?
Pu dan timnya mengembangkan: TPS yang direalisasikan di mainnet / biaya bulanan US$ dari satu node validator, atau TPS/US$ untuk singkatnya, guna memenuhi kebutuhan akan metrik kinerja yang lebih baik.
Metrik ini menilai kinerja berdasarkan TPS yang dapat diverifikasi yang dicapai di mainnet langsung suatu jaringan sambil juga mempertimbangkan efisiensi perangkat keras.
Perbedaan signifikan 20 kali lipat antara throughput teoretis dan aktual meyakinkan Pu untuk mengecualikan metrik yang hanya didasarkan pada asumsi atau kondisi laboratorium. Dia juga ingin menggambarkan bagaimana beberapa proyek blockchain membesar-besarkan metrik kinerja dengan mengandalkan infrastruktur yang mahal.
“Klaim kinerja jaringan yang dipublikasikan sering kali dibesar-besarkan oleh perangkat keras yang sangat mahal. Hal ini terutama berlaku untuk jaringan dengan mekanisme konsensus yang sangat terpusat, di mana hambatan throughput bergeser dari latensi jaringan ke kinerja perangkat keras satu mesin. Memerlukan perangkat keras yang sangat mahal untuk validator tidak hanya mengkhianati algoritma konsensus terpusat dan rekayasa yang tidak efisien, tetapi juga mencegah sebagian besar dunia untuk berpartisipasi dalam konsensus dengan menghalangi mereka,” terang Pu.
Tim Pu menemukan persyaratan perangkat keras validator minimum untuk setiap jaringan guna menentukan biaya per node validator. Mereka kemudian memperkirakan biaya bulanan mereka, dengan memperhatikan ukuran relatif mereka saat digunakan untuk menghitung rasio TPS per dolar.
“Jadi metrik TPS/$ mencoba memperbaiki dua kategori misinformasi yang mungkin paling parah, dengan memaksa kinerja TPS berada di mainnet, dan mengungkapkan tradeoff yang melekat dari perangkat keras yang sangat mahal,” tambah Pu.
Pu menekankan pentingnya mempertimbangkan dua karakteristik sederhana yang dapat diidentifikasi: apakah jaringan tersebut permissionless dan single-sharded.
Jaringan Permissioned vs. Permissionless: Mana yang Mendukung Desentralisasi?
Tingkat keamanan blockchain dapat diungkapkan dengan apakah ia beroperasi di bawah jaringan permissioned atau permissionless.
Blockchain permissioned merujuk pada jaringan tertutup di mana akses dan partisipasi dibatasi untuk sekelompok pengguna yang telah ditentukan, memerlukan izin dari otoritas pusat atau kelompok tepercaya untuk bergabung. Dalam blockchain permissionless, siapa pun diizinkan untuk berpartisipasi.
Menurut Pu, model yang pertama bertentangan dengan filosofi desentralisasi.
“Jaringan permissioned, di mana keanggotaan validasi jaringan dikendalikan oleh satu entitas, atau jika hanya ada satu entitas (setiap layer-2), adalah metrik yang sangat baik. Ini memberi tahu Anda apakah jaringan tersebut benar-benar terdesentralisasi. Ciri khas desentralisasi adalah kemampuannya untuk menjembatani kesenjangan kepercayaan. Jika desentralisasi dihilangkan, maka jaringan tersebut tidak lebih dari sekadar layanan cloud,” ujar Pu kepada BeInCrypto.
Perhatian terhadap metrik ini akan terbukti penting seiring waktu, karena jaringan dengan otoritas terpusat cenderung lebih rentan terhadap kelemahan tertentu.
“Dalam jangka panjang, yang benar-benar kita butuhkan adalah serangkaian vektor serangan standar untuk infrastruktur L1 yang dapat membantu mengungkap kelemahan dan tradeoff untuk desain arsitektur tertentu. Banyak masalah dalam L1 arus utama saat ini adalah bahwa mereka membuat pengorbanan yang tidak masuk akal dalam hal keamanan dan desentralisasi. Karakteristik ini tidak terlihat dan sangat sulit diamati, sampai bencana terjadi. Harapan saya adalah bahwa seiring industri ini matang, serangkaian tes ini akan mulai muncul secara organik menjadi standar industri yang luas,” tambah Pu.
Sementara itu, memahami apakah jaringan menggunakan state-sharding atau mempertahankan satu state yang terpecah mengungkapkan seberapa terpadu manajemen datanya.
State-Sharding vs. Single-State: Memahami Kesatuan Data
Dalam kinerja blockchain, latensi merujuk pada penundaan waktu antara pengiriman transaksi ke jaringan, konfirmasinya, dan penyertaannya dalam blok di blockchain. Ini mengukur berapa lama waktu yang dibutuhkan agar transaksi diproses dan menjadi bagian permanen dari buku besar terdistribusi.
Mengidentifikasi apakah jaringan menggunakan state-sharding atau satu state yang terpecah dapat mengungkapkan banyak hal tentang efisiensi latensinya.
Jaringan state-sharded membagi data blockchain menjadi beberapa bagian independen yang disebut shard. Setiap shard beroperasi secara independen dan tidak memiliki akses langsung dan real-time ke seluruh state jaringan.
Sebaliknya, jaringan non-state-sharded memiliki satu state yang dibagikan di seluruh jaringan. Dalam hal ini, semua node dapat mengakses dan memproses set data lengkap yang sama.
Pu mencatat bahwa jaringan state-sharded bertujuan untuk meningkatkan kapasitas penyimpanan dan transaksi. Namun, mereka sering menghadapi latensi finalitas yang lebih lama karena perlu memproses transaksi di beberapa shard independen.
Dia menambahkan bahwa banyak proyek yang mengadopsi pendekatan sharding membesar-besarkan throughput dengan hanya mereplikasi jaringan mereka daripada membangun arsitektur yang benar-benar terintegrasi dan skalabel.
“Jaringan state-sharded yang tidak berbagi state, hanya membuat salinan jaringan yang tidak terhubung. Jika saya mengambil jaringan L1 dan hanya membuat 1.000 salinan yang berjalan secara independen, jelas tidak jujur untuk mengklaim bahwa saya dapat menjumlahkan semua throughput di seluruh salinan tersebut dan mewakilinya sebagai satu jaringan. Ada arsitektur yang benar-benar menyinkronkan state serta mengacak validator di seluruh shard, tetapi lebih sering daripada tidak, proyek yang membuat klaim berlebihan tentang throughput hanya membuat salinan independen,” ucap Pu.
Berdasarkan penelitiannya tentang efisiensi metrik blockchain, Pu menyoroti perlunya perubahan mendasar dalam cara proyek dievaluasi, didanai, dan akhirnya berhasil.
Perubahan Fundamental Apa yang Dibutuhkan Evaluasi Blockchain?
Wawasan Pu menghadirkan alternatif yang signifikan di ruang blockchain layer-1 di mana metrik kinerja yang menyesatkan semakin bersaing untuk mendapatkan perhatian. Tolok ukur yang andal dan efektif sangat penting untuk melawan representasi palsu ini.
“Anda hanya tahu apa yang dapat Anda ukur, dan saat ini dalam kripto, angka-angka tersebut lebih mirip narasi hype daripada pengukuran objektif. Memiliki pengukuran yang standar dan transparan memungkinkan perbandingan sederhana di seluruh opsi produk sehingga pengembang dan pengguna memahami apa yang mereka gunakan, dan tradeoff apa yang mereka buat. Ini adalah ciri khas dari industri yang matang, dan kita masih memiliki jalan panjang dalam kripto,” Pu menyimpulkan.
Mengadopsi tolok ukur yang standar dan transparan akan mendorong pengambilan keputusan yang lebih baik dan memajukan kemajuan nyata, bukan sekadar klaim promosi seiring dengan kematangan industri.
Penyangkalan
Seluruh informasi yang terkandung dalam situs kami dipublikasikan dengan niat baik dan bertujuan memberikan informasi umum semata. Tindakan apa pun yang dilakukan oleh para pembaca atas informasi dari situs kami merupakan tanggung jawab mereka pribadi.
Selain itu, sebagian artikel di situs ini merupakan hasil terjemahan AI dari versi asli BeInCrypto yang berbahasa Inggris.
