Berlangganan untuk menerima pemberitahuan posting baru:

Simpan log Cloudflare Anda di R2

2021-12-07

3 menit dibaca
Postingan ini juga tersedia dalam bahasa English, Français, Deutsch, 日本語, 한국어, ไทย, dan 简体中文.

Kami senang mengumumkan bahwa pelanggan akan segera dapat menyimpan log Cloudflare mereka di penyimpanan Cloudflare R2. Menyimpan log Anda di Cloudflare akan memberi kesempatan kepada CIO dan Tim Keamanan untuk mengonsolidasikan infrastruktur mereka; menciptakan kesederhanaan, penghematan, dan keamanan tambahan.

Cloudflare melindungi aplikasi Anda dari traffic berbahaya, mempercepat koneksi, dan menjauhkan pelaku jahat dari jaringan Anda. Log yang dihasilkan dari produk kami membantu pelanggan menjawab pertanyaan seperti:

  • Mengapa permintaan diblokir oleh aturan Firewall yang telah saya siapkan?

  • Mengapa pengguna saya terputus dari aplikasi saya yang menggunakan Spectrum?

  • Mengapa saya melihat lonjakan permintaan Gateway Cloudflare ke aplikasi tertentu?

Penyimpanan di R2 meramaikan rangkaian produk pencatatan kami yang sudah ada. Menyimpan log di R2 mengisi kekosongan yang diminta oleh pelanggan kami: solusi hemat biaya dalam menyimpan log untuk setiap produk kami kapan saja.

Selamat tinggal pencatatan kuno

Mari kita mundur ke awal tahun 2000-an. Sebagian besar organisasi menjalankan infrastruktur mandiri mereka sendiri: perangkat jaringan, firewall, server, dan semua perangkat lunak terkait. Setiap perusahaan harus mengelola log yang berasal dari ratusan sumber di tumpukan TI. Dengan penyimpanan khusus yang diperlukan untuk menyimpan volume log yang tak terbatas, tim khusus diperlukan untuk membangun saluran ETL dan menjadikan data dapat ditindaklanjuti.

Sekarang kita maju ke 2010-an. Organisasi sedang bertransisi menggunakan layanan terkelola untuk fungsi TI mereka. Sebagai akibat pergeseran ini, cara pelanggan mengumpulkan log untuk semua layanan mereka juga berubah. Dengan layanan terkelola, sebagian besar beban pencatatan dialihkan dari pelanggan.

Tantangannya sekarang: mengumpulkan log dari kombinasi layanan terkelola, yang masing-masing memiliki keunikannya sendiri. Log dapat dikirim pada berbagai latensi, dalam format yang berbeda, serta beberapa terlalu detail, sementara yang lain tidak cukup detail. Untuk mendapatkan tampilan satu panel infrastruktur TI mereka, perusahaan perlu membangun atau membeli solusi SIEM.

Logging changes over the years

Logging changes over the years

Perubahan pencatatan dari tahun ke tahun

Cloudflare menggantikan set layanan terkelola ini. Saat pelanggan bergabung ke Cloudflare, kami memudahkan pendapatan visibilitas traffic mereka yang mencapai jaringan kami. Kami telah membangun analitik untuk banyak produk kami, seperti CDN, Firewall, Magic Transit, dan Spectrum untuk melihat tren tingkat tinggi dan menggali pola dengan membagi dan memerinci data.

Analytics adalah cara yang bagus untuk melihat data pada tingkat agregat, tetapi kami tahu bahwa raw log juga penting bagi pelanggan, jadi kami telah membuat serangkaian produk pencatatan.

Pencatatan masa kini

Selama Speed Week , kami mengumumkan Log Instan untuk menunjukkan traffic pelanggan saat mencapai domain mereka. Log Instan sangat cocok untuk debugging langsung dan kasus penggunaan triase. Pantau traffic Anda, buat perubahan konfigurasi, dan lihat dampaknya secara instan. Jika Anda perlu memeriksa log secara retroaktif, kami memiliki Logpush.

Kami telah membangun alur pencatatan hebat untuk mendapatkan data dari 250+ kota yang menaungi pusat data kami kepada pelanggan kami dalam waktu kurang dari satu menit menggunakan Logpush. Jika organisasi Anda memiliki praktik yang ada untuk mendapatkan data di seluruh tumpukan Anda ke satu tempat, kami mendukung Logpush ke berbagai penyimpanan cloud atau tujuan SIEM. Kami juga bermitra dengan platform SIEM utama untuk memunculkan data Cloudflare dengan cara yang berarti bagi pelanggan kami.

Terakhir namun tidak kalah pentingnya adalah Logpull. Dengan Logpull, pelanggan dapat mengakses log permintaan HTTP menggunakan REST API kami. Pelanggan kami menyukai Logpull karena mudah dikonfigurasikan, mereka tidak perlu khawatir untuk menyimpan log di pihak ketiga, dan Anda dapat menarik data khusus hingga tujuh hari.

Mengapa penyimpanan Cloudflare?

Empat permintaan teratas yang kami dengar dari pelanggan terkait log adalah:

  • Anggaran saya terbatas dan membutuhkan penyimpanan log dengan biaya rendah.

  • Mereka harus mudah diatur dan dipelihara.

  • Saya harus dapat menyimpan log selama yang saya butuhkan.

  • Saya ingin mengakses log saya di Cloudflare untuk produk apa pun.

Bagi sebagian besar pelanggan kami, Cloudflare adalah salah satu sumber data terpenting, serta menghasilkan lebih banyak data daripada aplikasi lain di tumpukan TI mereka. R2 secara signifikan lebih murah daripada penyedia cloud lainnya, jadi pelanggan kami tidak perlu berkompromi dengan mengambil sampel atau mengabaikan log dari produk secara bersamaan untuk mengurangi biaya.

Seperti halnya kesederhanaan Logpull, penyimpanan log di R2 juga cepat dan mudah. Dengan pengaturan satu klik, kami akan menyimpan log Anda, dan Anda tidak perlu mengkhawatirkan detail konfigurasi apa pun. Penyimpanan sepenuhnya berada dalam kendali pelanggan kami untuk menyesuaikan dengan kebutuhan keamanan dan kepatuhan bisnis mereka. Dengan R2, Anda juga dapat menyimpan log untuk produk apa pun yang kami catat untuk hari ini (dan kami selalu menambahkan lebih banyak seiring berkembangnya lini produk kami).

Penyimpanan log; kami baru saja mulai

Dengan penyimpanan log di Cloudflare, kami membuat blok bangunan untuk memungkinkan pelanggan melakukan analisis log dan kemampuan forensik langsung di Cloudflare. Apakah melakukan penyelidikan, menanggapi permintaan dukungan, atau menangani insiden, menggunakan analitik untuk pandangan keseluruhan dan memeriksa log untuk menentukan akar penyebab adalah kombinasi yang kuat.

Jika Anda tertarik untuk mendapatkan kabar seputar kapan Anda dapat menyimpan log di Cloudflare, daftar melalui formulir ini.

Kami selalu mencari teknisi berbakat untuk menghadapi tantangan menangani data dalam skala luar biasa. Jika Anda tertarik, lamar di sini.

Kami melindungi seluruh jaringan perusahaan, membantu pelanggan membuat aplikasi berskala Internet dengan efisien, mempercepat setiap situs web atau aplikasi Internet, mencegah serangan DDoS, menghalangi masuknya peretas, dan mendukung Anda dalam perjalanan menuju Zero Trust.

Buka 1.1.1.1 dari perangkat apa pun untuk mulai menggunakan aplikasi gratis kami yang akan mempercepat dan meningkatkan keamanan Internet Anda.

Untuk mempelajari selengkapnya tentang misi kami dalam mendukung pengembangan Internet yang lebih baik, mulai di sini. Jika Anda sedang mencari arah karier baru, lihat lowongan kerja kami.
CIO WeekLogsKeamananBerita ProdukStorageR2 Storage

Ikuti di X

Tanushree Sharma|@_tanushreeeee
Cloudflare|@cloudflare

Posting terkait

26 November 2024 pukul 16.00

Cloudflare incident on November 14, 2024, resulting in lost logs

On November 14, 2024, Cloudflare experienced a Cloudflare Logs outage, impacting the majority of customers using these products. During the ~3.5 hours that these services were impacted, about 55% of the logs we normally send to customers were not sent and were lost. The details of what went wrong and why are interesting both for customers and practitioners....

24 Oktober 2024 pukul 13.00

Durable Objects aren't just durable, they're fast: a 10x speedup for Cloudflare Queues

Learn how we built Cloudflare Queues using our own Developer Platform and how it evolved to a geographically-distributed, horizontally-scalable architecture built on Durable Objects. Our new architecture supports over 10x more throughput and over 3x lower latency compared to the previous version....