jhao104 Proxy Pool: Setup IP Gratisan

Kalau kamu butuh rotasi IP buat scraping santai tanpa bayar proksi mahal, repo open-source jhao104/proxy_pool bisa jadi opsi lewat Docker dan Redis. Sistem ini otomatis nyedot IP gratisan dari publik, ngetes kelayakannya berkala, dan nyediain endpoint HTTP lokal buat script kamu. Tapi ingat, success rate IP gratisan cuma di kisaran 10% sampai 20%, jadi jangan dipakai buat data penting. Cocoknya cuma buat scraping data publik atau tugas latihan.

Mengenal Layanan & Gambaran Teknis

Proxy pool adalah sistem pengumpul alamat IP perantara (proxy) secara otomatis agar bot scraping kamu tidak gampang diblokir atau kena rate limit (pembatasan request). Repositori jhao104/proxy_pool bertindak sebagai manajer otomatis: ia mengambil IP dari situs-situs penyedia proksi gratis, menyaring yang masih hidup ke database Redis, lalu membuang IP yang mati saat diakses.

Panduan Langkah Demi Langkah

1. Langkah 1 — Siapkan VPS atau komputer lokal yang sudah terpasang Docker dan Docker Compose.
2. Langkah 2 — Jalankan database Redis di terminal: docker run -d --name redis -p 127.0.0.1:6379:6379 redis (kunci ke localhost agar tidak dibobol orang asing).
3. Langkah 3 — Jalankan container proxy pool: docker run -d --name proxy_pool -p 5010:5010 --env DB_CONN=redis://redis:6379/0 --link redis:redis jhao104/proxy_pool:latest
4. Langkah 4 — Tes endpoint di browser atau curl ke http://127.0.0.1:5010/get untuk memastikan sistem mengembalikan JSON berisi IP aktif.
5. Langkah 5 — Integrasikan ke script bot scraping kamu; panggil endpoint /get sebelum request dan tembak endpoint /delete?proxy=IP:PORT jika request gagal agar IP bermasalah langsung dihapus dari antrean.

Persyaratan & Kesiapan

• Server Linux (VPS) atau PC lokal dengan spek minimal 1 CPU / 1 GB RAM.
• Docker engine sudah terinstall dan berjalan.
• Koneksi internet tanpa blokir ke situs-situs penyedia proksi gratisan.

Tips Optimalisasi

• Gunakan retry minimal 3-5 kali di script scraper karena 8 dari 10 IP publik sering lambat atau timeout.
• Jalankan scraper saat malam/dini hari waktu Asia karena ketersediaan dan kestabilan IP gratisan biasanya lebih longgar.
• Pasang limit timeout pendek (misalnya 5-8 detik) di HTTP client agar bot tidak nyangkut terlalu lama di proksi mati.

Mitigasi Risiko & Keamanan

• Bahaya Man-in-the-Middle (MITM): Pemilik IP gratisan bisa mengintip traffic unencrypted.
• Port Redis yang terbuka ke publik (0.0.0.0) rentan disusupi bot scanner dan crypto miner.
• Target situs bisa memblokir permanen rentang IP honeypot yang didapat dari daftar gratisan.

Kesimpulan & Catatan Penting

jhao104/proxy_pool adalah solusi gratis paling praktis untuk kebutuhan rotasi IP sederhana selama kamu siap menangani kegagalan request yang sering terjadi. Kalau proyekmu menuntut akurasi data 100% dan minim latensi, beralihlah ke residential proxy berbayar.