Comments on: Web Crawling

By: ferrypey

ferrypey — Thu, 14 Jan 2010 09:34:50 +0000

sip berhasil!!
thanks bro atas tulisannya

happy coding ^_^

By: kohaci

kohaci — Fri, 04 Sep 2009 12:01:20 +0000

Ada beberapa faktor, di antaranya :
- php_curl-nya belum diaktifkan, tinggal setting di php.ini
- koneksi internet memakai proxy atw gak? klw ya, jawabannya seperti pertanyaan mbak vivi di atas.
- kemungkinan terakhir apakah web yang mau dicrawl telah terlindungi dari serangan crawler, klw iya, berarti memang tidak bisa.

untuk langkah awal, coba crawl koneksi lokal (localhost-red.)

By: sugeng

sugeng — Fri, 04 Sep 2009 09:10:19 +0000

saya coba koq g kluar apa2 y?

By: vivi

vivi — Fri, 13 Feb 2009 09:05:26 +0000

aq coba kode nya untuk site lokal si bisa, tapi waktu aq coba ke wikipedia kok ga bisa ya? di sini si koneksinya lewat proxy…apa ada hubungannya?? kalo iya gimana cara ngatasinnya y??thx…

Coba tambahkan script ini sebelum curl_exec()

curl_setopt($ch, CURLOPT_PROXY, 'proxy_name_or_ip:proxy_port');
curl_setopt($ch, CURLOPT_PROXYUSERPWD, 'username:password');

By: dholep

dholep — Mon, 19 Jan 2009 07:33:09 +0000

oi…. ini gambarnya mirip sama kaya yang di slidenya pak julio… huehehehehe… master neh..
keren2

Gw ngambil referensinya dari buku Manning.
“Kesamaan nama, lokasi, dan kejadian bukan faktor kesengajaan”