Cloudflare akan Rilis Marketplace untuk Menagih Bot AI yang Melakukan Scraping

Rahmat Jiwandono
Minggu 06 Oktober 2024, 17:15 WIB
Cloudfare AI Audit. (Sumber: cloudfare)

Cloudfare AI Audit. (Sumber: cloudfare)

Techverse.asia - Cloudflare mengumumkan rencana untuk meluncurkan marketplace pada 2025, tempat pemilik situs web yang dapat menjual akses kepada penyedia model AI untuk mengikis konten situs mereka.

Marketplace tersebut merupakan langkah terakhir dari rencana mereka yang lebih besar untuk memberi penerbit kontrol yang lebih besar atas bagaimana dan kapan bot AI mengikis situs web mereka.

"Jika Anda tidak memberi kompensasi kepada kreator dengan satu atau lain cara, maka mereka akan berhenti berkarya, dan itulah bagian yang harus diselesaikan," kata CEO Cloudflare Matthew Prince dilansir dari Techcrunch.

Sebagai langkah pertama dalam rencana barunya, Cloudflare meluncurkan alat observabilitas gratis untuk pelanggan, yang disebut Audit AI. Pemilik situs web akan mendapatkan dasbor untuk melihat analitik tentang mengapa, kapan, dan seberapa sering model AI merayapi situs mereka untuk mendapatkan informasi.

Baca Juga: 5 Risiko Ancaman Bencana dari Kecerdasan Buatan

Cloudflare juga akan memungkinkan pelanggan memblokir bot AI dari situs mereka dengan mengklik tombol. Pemilik situs web dapat memblokir semua web scraper menggunakan Audit AI, atau membiarkan web scraper tertentu masuk jika mereka memiliki kesepakatan atau menganggap pengikisan mereka bermanfaat.

Demo Audit AI menunjukkan bagaimana pemilik situs web dapat menggunakan alat tersebut, yang dapat melihat dari mana setiap scraper yang mengunjungi situs mereka berasal, dan menawarkan jendela selektif untuk melihat berapa kali scraper dari OpenAI, Meta, Amazon, dan penyedia model AI lainnya mengunjungi situs seseorang.

Cloudflare mencoba mengatasi masalah yang membayangi industri AI yakni bagaimana publisher yang lebih kecil dapat bertahan hidup di era AI jika orang-orang membuka ChatGPT alih-alih situs web mereka? Saat ini, penyedia model AI mengikis ribuan situs web kecil untuk mendapatkan informasi yang mendukung LLM mereka.

Sementara beberapa publisher yang lebih besar telah membuat kesepakatan dengan OpenAI untuk melisensikan konten, sebagian besar situs web tidak mendapatkan apapun, tetapi konten mereka masih dimasukkan ke dalam model AI populer setiap hari.

Baca Juga: Keunikan Cita Rasa Coklat Khas Kampung Merasa Kalimantan Timur

Itu dapat merusak model bisnis bagi banyak situs web, mengurangi lalu lintas yang sangat mereka butuhkan.

Awal tahun ini, perusahaan rintisan pencarian bertenaga AI, Perplexity dituduh mengikis situs web yang secara sengaja menunjukkan bahwa mereka tidak ingin dirayapi menggunakan Robots Exclusion Protocol.

Tak lama kemudian, Cloudflare merilis tombol untuk memastikan pelanggan dapat memblokir semua bot AI dengan satu klik. "Itu karena rasa frustrasi yang kami dengar, di mana orang-orang merasa konten mereka dicuri," ujarnya.

Beberapa pemilik situs web memberi tahu Business Insider bahwa bot AI begitu sering mengikis situs web mereka, sehingga terasa seperti serangan DDoS yang melumpuhkan server mereka. Situs web yang dikikis tidak hanya menjengkelkan, tetapi juga dapat benar-benar menghabiskan tagihan cloud dan memengaruhi layanan.

Baca Juga: Banyak Perusahaan Kini Pakai API, Cloudflare Sebut Lebih Banyak Ancaman Online

Tetapi bagaimana jika pengguna ingin memblokir bot Perplexity, tetapi tidak bot OpenAI? Prince menerangkan bahwa pelanggan Cloudflare meminta alat yang memungkinkan mereka memilih model AI mana yang memiliki akses ke situs mereka.

Alat baru Cloudflare yang diluncurkan itu akan memungkinkan pelanggan untuk memblokir beberapa perayap AI, sementara membiarkan yang lain masuk.

Bahkan media besar yang telah mencapai kesepakatan lisensi dengan OpenAI - seperti Time, Condé Nast, dan The Atlantic — memiliki wawasan yang relatif sedikit tentang seberapa banyak ChatGPT mengikis situs web mereka.

Banyak dari mereka harus menerima apa yang dikatakan OpenAI kepada mereka, tetapi jawabannya menentukan apakah penerbit mendapatkan kesepakatan lisensi yang bagus atau tidak. Namun, marketplace Cloudflare, yang akan diluncurkan tahun depan, bertujuan untuk memungkinkan penerbit kecil untuk membuat kesepakatan dengan penyedia model AI juga.

Baca Juga: OpenAI merilis Advanced Voice Mode

“Mari kita berikan Anda semua kemampuan untuk melakukan apa yang sebelumnya hanya dilakukan oleh Reddit, Quora, dan penerbit besar di dunia. Bagaimana jika kami mengizinkan Anda menetapkan, secara efektif, harga untuk mengakses dan mengambil konten Anda untuk diserap ke dalam sistem ini,” katanya.

Follow Berita Techverse.Asia di Google News
Berita Terkait Berita Terkini
Lifestyle28 Agustus 2026, 15:17 WIB

Pertamina Eco RunFest 2026: Hadirkan 7 Inisiatif Keberlanjutan Lingkungan

Ajang yang memasuki tahun ke-13 pelaksanaannya ini menargetkan 14 ribu pelari dan 10 ribu pengunjung.
Pertamina Eco Run Fest 2026. (Sumber: istimewa)
Techno28 Agustus 2026, 15:16 WIB

Ditenagai Ryzen Z2 Extreme, ASUS ROG Xbox Ally 20 Bisa Dipesan Sekarang

Mennyambut hari jadi ke-20, ASUS ROG umumkan Xbox Ally X20 dengan performa AMD Ryzen AI Z2 Extreme dan dukungan kacamata Xreal R1.
ROG XBOX Ally X20. (Sumber: ASUS)
Startup28 Agustus 2026, 13:26 WIB

Asosiasi Blockchain Indonesia Gandeng Privy Perkuat Kepercayaan Digital

ABI bekerja sama dengan Privy untuk meningkatkan infrastruktur digital trust dan keamanan verifikasi identitas di industri blockchain Indonesia.
Asosiasi Blockchain Indonesia x Privy. (Sumber: ist)
Techno28 Agustus 2026, 13:23 WIB

SailPoint Hilangkan Blind Spot dengan Perlindungan Terpadu Identitas Manusia, non-human, dan AI agent

Solusi keamanan identitas yang dirancang untuk melindungi, mengelola, dan mendukung konvergensi tenaga kerja masa depan
SailPoint Identity Security. (Sumber: null)
Travel28 Agustus 2026, 11:58 WIB

Dragon Ball Z Bakal Punya Taman Hiburan Raksasa di Prancis, Gokunya Bisa Jadi Nyata!

Intip lokasi, konsep, dan detail lengkapnya di sini!
Taman hiburan bertemakan Dragon Ball Z. (Sumber: null)
Techno28 Agustus 2026, 11:57 WIB

Sony Meluncurkan Xperia 10 VIII dengan Fokus pada Peningkatan Kemudahan Penggunaan Sehari-hari

Handset ini menawarkan sedikit peningkatan dengan harga yang jauh lebih mahal.
Sony Xperia 10 VIII. (Sumber: Sony)
Automotive28 Agustus 2026, 09:40 WIB

Pendiri VeilSide Hironao Yokomaku akan Meriahkan Gelaran IMX 2026

Jangan lewatkan kesempatan langka bertemu sang legenda tuning dunia!
Pendiri VeilSide Hironao Yokomaku. (Sumber: istimewa)
Techno28 Agustus 2026, 09:40 WIB

Spesifikasi dan Harga Garmin Fenix 9 Series, Daya Tahannya Bisa Capai 57 Hari

Model Pro yang tangguh namun elegan ini menghadirkan casing jam tangan titanium pertama dan layar AMOLED terbesar pada seri Fenix.
Garmin Fenix 9 dan Fenix 9 Pro. (Sumber: Garmin)
Techno27 Agustus 2026, 14:49 WIB

Shokz OpenFit Air 2: Earbud Open-Ear Terringan dengan Hook yang Hampir Tak Terasa

Perangkat ini dirancang untuk kenyamanan ekstra tanpa menutup saluran telinga.
Shokz OpenFit Air 2. (Sumber: Shokz)
Techno27 Agustus 2026, 14:47 WIB

ASUS Hadirkan 2 Mouse Gaming yang Dapat Diskutomisasi

Mouse ROG Gladius IV Ace dan ROG Spatha X memadukan kontrol presisi dengan beragam opsi kustomisasi mendalam.
ROG Gladius IV Ace. (Sumber: ASUS)