Bot AI Meta Menguras Server Bisnis Kecil, Ini Risiko dan Solusinya
Aktivitas bot perayap AI milik Meta dilaporkan melumpuhkan situs web usaha kecil dan memicu lonjakan tagihan server.
Gambar buatan AI, bukan foto asli (FLUX.1 schnell via Cloudflare Workers AI)
Poin penting
- Bot AI Meta melumpuhkan situs usaha kecil lewat ratusan ribu permintaan otomatis.
- Trafik bot Meta menguras kuota server hingga 97,6 persen dan memicu biaya tambahan.
- Pemilik situs perlu memblokir bot via file htaccess karena robots.txt kerap terlambat.
Lonjakan aktivitas perayap kecerdasan buatan atau AI crawler milik Meta Platforms dilaporkan mulai mengancam operasional toko online dan situs web bisnis kecil. Bot perayap, yakni perangkat lunak otomatis yang menyisir internet untuk mengumpulkan data, menyedot sumber daya server hingga membuat situs web lumpuh.
Menurut laporan Fast Company, seniman asal California, Chelsea Paulus, mengalami gangguan saat bot Meta-ExternalAgent terjebak dalam fungsi keranjang belanja situsnya. Bot pelatih AI itu memicu 550.000 permintaan dan menaikkan beban prosesor server hingga 80 persen. Dua hari setelah diblokir, bot Meta-WebIndexer datang hingga beban prosesor menyentuh 100 persen dan menumbangkan situs.
Berdasarkan data penyedia jaringan Cloudflare, trafik bot menyumbang sekitar 55,1 persen dari total lalu lintas web di Amerika Serikat dalam empat pekan terakhir. Fenomena ini menunjukkan bahwa separuh aktivitas internet kini didorong oleh mesin otomatis.
Lonjakan Tagihan Server dan Siklus Bot
Dampak finansial juga dirasakan Robyn Gough, pemilik bisnis desain grafis digital di Australia. Server miliknya mencatat pengiriman data sebesar 2,45 terabita dalam sebulan, dengan 97,6 persen trafik diserap oleh bot milik Meta.
Bot Meta mengunduh otomatis 94.154 dokumen grafis milik Gough hingga memicu galat saat pelanggan asli bertransaksi. Akibat melampaui batas kuota server virtual, Gough harus membayar biaya kelebihan kapasitas kepada penyedia hosting.
Juru bicara Meta menyatakan kepada Fast Company bahwa perusahaan menyediakan panduan publik untuk mengelola aturan bot melalui file robots.txt. Namun, Paulus dan Gough melaporkan bahwa pembaruan robots.txt tidak langsung menghentikan serbuan bot.
Bisnis mikro seperti kami tidak memiliki pengembang atau tim keamanan, dan kami baru tahu harus memblokir bot setelah tagihan membengkak atau situs mati.
Akses bot baru benar-benar terhenti setelah pemilik situs menyisipkan kode pemblokiran langsung di dalam file .htaccess, yaitu file konfigurasi server web untuk mengatur izin akses. Upaya manual ini menuntut penanganan berkala karena pemblokiran satu jenis bot kerap langsung disusul kedatangan bot pengindeks lain.
Apa Artinya bagi Pelaku Usaha
Bagi pelaku usaha, insiden ini membuktikan bahwa pelatihan model AI skala global kini membebankan biaya infrastruktur langsung ke pundak pemilik situs web mandiri. Ketika lalu lintas server melonjak drastis, risiko situs mengalami galat atau down meningkat, yang langsung memicu hilangnya potensi penjualan pelanggan nyata.
Pemilik usaha di Indonesia disarankan tidak hanya mengandalkan aturan dasar pada robots.txt untuk melindungi aset digital. Pemilik bisnis perlu meminta bantuan penyedia hosting untuk menerapkan aturan pemblokiran level server melalui file .htaccess atau memasang penyaring bot di tingkat firewall.
Lakukan audit konsumsi kapasitas data server secara rutin setiap bulan guna mendeteksi aktivitas perayap tidak wajar sedini mungkin. Langkah proaktif ini mencegah timbulnya biaya tak terduga serta menjaga agar fungsi transaksi toko online tetap dapat diakses pelanggan tanpa hambatan.
- Fast Company: Meta’s web crawlers are making life hell for owners of small business websites
Lihat hasil pemeriksaan (9 klaim)
| Klaim | Putusan | Dasar di sumber |
|---|---|---|
| Bot perayap AI Meta dilaporkan melumpuhkan situs web usaha kecil dan memicu lonjakan tagihan server. | Didukung | “Situations like this could force small business owners to keep their websites offline if they reach usage capacity or pay for added service out of their own pockets.” Fast Company melaporkan dampak crawler Meta terhadap situs bisnis kecil hingga crash dan biaya tambahan. |
| Bot Meta-ExternalAgent terjebak dalam fungsi keranjang belanja situs Chelsea Paulus, menghasilkan 550.000 permintaan dan menaikkan beban prosesor server hingga 80 persen. | Didukung | “A bot called Meta-ExternalAgent got stuck in a loop on Paulus’s website’s “remove from cart” function. It created more than a hundred hits per minute, growing to about 550,000 hits over the next few days.” Fast Company mencatat insiden bot Meta-ExternalAgent pada situs Chelsea Paulus. |
| Dua hari setelah Meta-ExternalAgent diblokir, bot Meta-WebIndexer muncul hingga CPU menyentuh 100 persen dan melumpuhkan situs Paulus. | Didukung | “Paulus blocked Meta’s bot, but two days later, another bot, this one called Meta-WebIndexer, showed up. It brought her CPU to 100% and crashed her website.” Fast Company melaporkan kedatangan bot Meta-WebIndexer setelah bot pertama diblokir. |
| Menurut Cloudflare, trafik bot menyumbang sekitar 55,1 persen lalu lintas web di Amerika Serikat dalam empat pekan terakhir. | Didukung | “According to Cloudflare, bots made up 55.1% of U.S. web traffic over the last four weeks.” Fast Company mengutip data statistik Cloudflare terkait lalu lintas bot di AS. |
| Server Robyn Gough mencatat pengiriman data sebesar 2,45 terabita dalam sebulan, dengan 97,6 persen di antaranya diserap oleh bot Meta. | Didukung | “Between September 30 and October 28, her servers logged 2.45 TB of data delivered—97.6% of which went to Meta’s crawlers.” Fast Company memaparkan data log server Robyn Gough. |
| Bot Meta mengunduh otomatis 94.154 dokumen grafis milik Robyn Gough hingga memicu galat transaksi bagi pelanggan asli. | Didukung | “with 94,154 recorded automatic downloads of her digital graphics’ zip files and small PDFs.” Fast Company melaporkan jumlah unduhan otomatis oleh bot Meta pada situs Gough. |
| Gough harus membayar biaya kelebihan kapasitas server kepada penyedia hosting. | Didukung | “Gough had to pay $10.51 to her host in August, after exceeding the 2 TB limit for her virtual private server (VPS) with 2.57 TB.” Fast Company menyebut Gough membayar biaya tambahan kepada penyedia VPS hosting. |
| Juru bicara Meta menyatakan perusahaan menyediakan panduan publik untuk mengelola aturan bot melalui file robots.txt. | Didukung | “We provide publicly-available guidance on ways to manage robots.txt for our crawlers, and we respect the preferences site owners set.” Fast Company mengutip pernyataan juru bicara Meta. |
| Pembaruan robots.txt tidak langsung menghentikan serbuan bot, dan akses baru terhenti setelah pemilik situs memasang kode di file .htaccess. | Didukung | “The bots only stopped gaining access when her host gave Paulus code for the website’s .htaccess, files that let you change how your website functions.” Fast Company menjelaskan pemblokiran baru efektif setelah penyesuaian file .htaccess. |
Video AI terbaru
Your Spark, Your Story: Yannik Marek | NVIDIA RTX Spark
