Crawler 



Crawler एक सर्च इंजिनने बनाया हुआ program है जो world wide web पर घूमके सारी जानकारी इक्कट्ठा करके server तक पहुंचाता है।

Crawler को bot, spider भी बोला जाता है।

ये Crawler पुरे इंटरनेट पर फैले हुए है। जब कोई नयी वेबसाइट आती है वो उसे crawl करते है और जो भी जानकारी मिलेगी उसे सर्वर तक पहुंचाते है।

सबसे पहलेवो मैं वेबसाइट को crawl करते है। बाद में उन्हें वेबसाइट के अंदर जो हाइपरलिंक मिल जाती है उन्हें भी क्रॉल कर लेते है। ऐसे करते करते वे पुरे इंटरनेट पे घूमते रहते है।

Join our Newsletter

Get new posts by email

Dont miss

SEO सीखिए

Categories