Cloudflare Punya “Senjata” untuk Blokir Bot AI di Web

virprom.com – Cloudflare, sebuah perusahaan yang menyediakan layanan untuk membuat infrastruktur Internet untuk sistem keamanan situs web, telah merilis alat baru yang mencegah bot kecerdasan buatan (AI) mengambil data dari situs web, untuk melatih model AI.

Alat gratis ini secara khusus memblokir bot dari situs web yang dihosting di platform Cloudflare.

Cloudflare sendiri merupakan layanan yang menjadi jembatan antara pengunjung website atau aplikasi dengan hosting. Cloudflare bertanggung jawab untuk mengamankan dan meningkatkan kecepatan transfer data antar server.

Baca juga: Cloudflare Apa Penyebab Layanan Internet Drop Hari Ini?

Sejumlah vendor AI, termasuk Google, OpenAI, dan Apple, mengizinkan pemilik situs web memblokir bot yang mereka gunakan untuk mengumpulkan data dan melatih model AI mereka dengan mengubah robot.txt situs.

Robot.txt adalah file teks yang akan memberi tahu robot situs atau halaman mana yang dapat mereka kunjungi di sebuah website.

Menurut Cloudflare, tidak semua pemilik website, khususnya pelanggan Cloudflare, bersedia dikunjungi bot.

“Pelanggan tidak ingin bot AI melintasi situs mereka, terutama yang melakukannya secara diam-diam,” kata Cloudflare dalam blog resminya.

Perusahaan AS juga khawatir sejumlah perusahaan AI berusaha menghindari praktik deteksi bot. Oleh karena itu, ia menyediakan alat pemblokiran bot.

Sebelum meluncurkan alat tersebut, Cloudflare menganalisis lalu lintas bot AI dan perayapnya, yaitu program yang mencari atau merayapi semua informasi yang tersedia berdasarkan permintaan tertentu, untuk melatih teknologi/model yang akan mendeteksi bot secara otomatis.

Model tersebut akan mempertimbangkan apakah bot AI mencoba menghindari deteksi dengan menyamar sebagai seseorang yang menggunakan browser web.

“Saat pelaku mencoba memindai situs dalam skala besar, mereka biasanya menggunakan alat dan kerangka kerja yang dapat kami rekam,” kata Cloudflare.

Dari catatan ini, model Cloudflare mendeteksi lalu lintas bot AI yang mencoba menghindari pengawasan.

Baca juga: Cloudflare: Lalu lintas Internet global meningkat 25%.

Cloudflare juga mengklaim telah menyiapkan formulir bagi pelanggan untuk melaporkan dugaan bot dan crawler AI. Seiring waktu, mereka secara manual menambahkan bot AI yang teridentifikasi ke daftar hitam.

Bot AI benar-benar meningkat dengan banyaknya penggunaan AI generatif seperti ChatGPT di Copilot. Jadi, banyak situs web yang semakin waspada terhadap model pelatihan AI dari perusahaan teknologi yang menggunakan materi di situs mereka tanpa pemberitahuan atau kompensasi.

Sebuah penelitian juga menunjukkan bahwa sekitar 26% dari 1000 situs teratas di Internet telah memblokir bot OpenAI. Sekitar 600 penerbit berita juga telah memblokir bot tersebut, yang dihimpun KompasTekno dari TechCrunch pada Minggu (7/7/2024). Dengarkan berita terkini dan berita pilihan kami langsung di ponsel Anda. Pilih saluran berita favorit Anda untuk mengakses Saluran WhatsApp virprom.com: https://www.whatsapp.com/channel/0029VaFPbedBPzjZrk13HO3D. Pastikan Anda telah menginstal aplikasi WhatsApp.

Tinggalkan Balasan

Alamat email Anda tidak akan dipublikasikan. Ruas yang wajib ditandai *

Back To Top