Geekbench melalui Primate Labs menegaskan akan memberi penanda khusus pada hasil benchmark untuk prosesor Intel Arrow Lake Plus yang memakai Binary Optimization Tool atau BOT. Langkah ini diambil karena hasil pengujian dari tool tersebut dinilai “tidak dapat dibandingkan dengan run standar” meski alat itu diklaim dapat menaikkan skor Geekbench 6 hingga 8 persen.
BOT hanya berjalan pada chip Intel terbaru tertentu, termasuk Arrow Lake Plus dan Panther Lake. Primate Labs mengatakan ada beberapa beban kerja yang bisa terdorong lebih tinggi bahkan sampai 40 persen, sehingga hasilnya berpotensi berbeda jauh dari pengujian biasa.
Mengapa Geekbench memberi peringatan
Primate Labs menjelaskan bahwa BOT mengubah benchmark, sementara cara perubahan itu terjadi tidak sepenuhnya jelas bagi pihaknya maupun publik. Karena itu, hasil yang dibuat dengan tool tersebut dianggap tidak sebanding dengan hasil yang dibuat tanpa tool.
Perusahaan juga menyebut belum memiliki cara untuk mendeteksi apakah sebuah skor Geekbench 6 dijalankan dengan Binary Optimization Tool atau tidak. Akibatnya, semua hasil untuk CPU Intel baru itu akan diberi peringatan seragam agar pembaca data benchmark tidak keliru membaca angka performa.
Peringatan yang akan muncul berbunyi: “This benchmark result may be invalid due to binary modification tools that can run on this system.” Kalimat itu menunjukkan bahwa Geekbench ingin menjaga agar basis data hasil pengujian tetap dipercaya.
Cara kerja BOT dan mengapa memicu perdebatan
Intel menggambarkan BOT sebagai alat yang menyusun instruksi secara lebih optimal untuk arsitektur mikro di balik Arrow Lake Plus. Secara sederhana, tool ini tidak mengurangi pekerjaan komputasi, melainkan mencoba menata ulang instruksi agar pipeline prosesor bekerja lebih efisien.
Secara teknis, hal ini tidak sama dengan manipulasi hasil mentah secara langsung. Geekbench sendiri adalah binary yang terhubung secara dinamis, sehingga instruksi yang dijalankan memang bisa berbeda tergantung kombinasi CPU dan sistem operasi.
Namun, persoalannya ada pada representasi data. Jika skor yang muncul bergantung pada BOT, maka angka itu tidak lagi menunjukkan performa default prosesor saat digunakan tanpa alat tambahan.
Berikut inti alasan mengapa hasil BOT tetap ditandai:
- BOT memodifikasi cara benchmark dijalankan.
- Perubahan itu tidak transparan bagi publik.
- Geekbench belum bisa membedakan hasil dengan atau tanpa BOT.
- Skor BOT bisa membuat performa tampak lebih tinggi dari kondisi standar.
Dampak bagi pembaca hasil benchmark
Bagi penggemar hardware, atau pengguna yang membandingkan prosesor sebelum membeli, penanda seperti ini penting. Hasil benchmark yang tercampur antara mode standar dan mode BOT bisa menyesatkan, terutama jika dipakai untuk membandingkan antarplatform.
Di sisi lain, ada juga argumen bahwa semua CPU memang bekerja dengan cara yang berbeda di dalamnya. Banyak pengamat menilai BOT hanya membantu menyusun instruksi agar lebih sesuai dengan arsitektur Intel, bukan “mengakali” benchmark dalam arti sempit.
Meski begitu, Geekbench memilih bersikap hati-hati. Selama tool itu tidak bisa dideteksi secara pasti pada hasil akhir, semua skor yang mungkin dipengaruhi BOT akan tetap dianggap berisiko.
Konteks yang lebih luas dalam industri benchmark
Keputusan ini juga mengingatkan pada riwayat panjang perdebatan soal optimisasi vendor terhadap hasil uji performa. Primate Labs menyinggung bahwa SPEC pernah membatalkan hasil benchmark Intel pada bagian tertentu karena optimisasi yang dinilai tidak adil.
Ada pula kasus lama ketika ICC milik Intel dilaporkan menurunkan performa pada CPU AMD dengan menghilangkan optimisasi untuk arsitektur pesaing. Riwayat seperti ini membuat perusahaan benchmark cenderung ekstra waspada saat vendor memperkenalkan teknik optimisasi baru.
Dalam praktiknya, bagian tersulit adalah membedakan peningkatan performa yang sah dari hasil yang terlalu bergantung pada kondisi khusus pengujian. Jika sebuah tool hanya bekerja pada software tertentu dan tidak aktif secara luas, maka angka performanya bisa sulit dijadikan patokan umum.
Intel sendiri disebut memiliki daftar CPU yang didukung BOT di halaman resminya, dan daftar itu diperkirakan akan berubah mengikuti waktu. Primate Labs menyatakan penanda di Geekbench Browser juga akan diperbarui sesuai perkembangan dukungan tersebut, sehingga hasil yang tampil tetap memberi konteks yang jelas bagi pembaca data benchmark.
-
-
-
-
