Perayap otomatis yang mengumpulkan informasi lowongan kerja dari portal rekrutmen resmi, untuk ditampilkan sebagai ringkasan lowongan beserta tautan ke sumber aslinya.
jobspiderbot/1.0 adalah bot yang kami jalankan untuk memantau pengumuman lowongan di situs rekrutmen resmi perusahaan dan instansi. Bot ini hanya membaca halaman lowongan yang terbuka untuk publik — tidak pernah masuk ke area yang butuh login, dan tidak pernah mendaftar akun.
jobspiderbot/1.0Mozilla/5.0 (compatible; jobspiderbot/1.0; +https://interference-jeremy-filed-seas.trycloudflare.com)jobspiderbotBot ini tidak mengambil, tidak menyimpan, dan tidak memproses data pribadi siapa pun. Termasuk namun tidak terbatas pada: NIK/KTP, Kartu Keluarga, NPWP, nomor rekening, nomor telepon pribadi, alamat email pribadi, alamat rumah, tanggal lahir, paspor, SIM, maupun berkas lamaran (CV, transkrip, sertifikat).
Kami juga tidak mengambil data dari kebocoran data, forum, grup tertutup, atau sumber tidak resmi. Bila sebuah situs ternyata memuat data pribadi, kami menghentikan perayapan situs tersebut.
| Aspek | Komitmen |
|---|---|
| Frekuensi | Dibatasi. Tidak ada perayapan beruntun tanpa jeda. |
| Jeda antar permintaan | Minimal 3–4 detik per permintaan ke host yang sama. |
| Jumlah halaman | Hanya halaman daftar dan halaman detail lowongan. Tidak menyapu seluruh situs. |
| robots.txt | Dibaca dan ditaati, termasuk Crawl-delay dan larangan pada path tertentu. |
| Area terlarang | Tidak memasuki halaman yang butuh login, tidak mendaftar akun, tidak menembus proteksi. |
| Bila diblokir | Kami berhenti. Tidak mengakali 403, Cloudflare challenge, atau mekanisme proteksi lainnya. |
| Beban server | Dijalankan dengan prioritas rendah (nice) dan batas waktu tiap proses. |
Cara paling sederhana: tambahkan aturan pada robots.txt situs Anda.
User-agent: jobspiderbot
Disallow: /
Aturan tersebut langsung dipatuhi pada perayapan berikutnya. Bila ingin memastikan penghentian segera, silakan hubungi kami melalui alamat di bawah — kami akan menambahkan host Anda ke daftar larangan internal.
Permintaan dari bot ini berasal dari satu alamat IP tetap yang kami kendalikan sendiri. Bila Anda ingin memastikan sebuah permintaan benar berasal dari kami, silakan hubungi kami dan sebutkan alamat IP yang tercatat di log Anda — kami akan mengonfirmasi apakah itu milik kami.
Bot ini tidak menyamar sebagai peramban pengguna biasa: setiap permintaan membawa penanda jobspiderbot/1.0 pada User-Agent.
Pertanyaan, keberatan, atau permintaan penghentian:
Email: jobspiderbot@gmail.com
Kami berusaha membalas dalam 3 hari kerja.