موتورهای جستجو چگونه از بانک اطلاعاتی اطلاعات میگیرند

سلام
در مورد مباحث سئو این سوال هست که چگونه موتورهای جستجوگر در بانک های اطلاعاتی می چرخند و اطلاعات دریفات می کنند که سایت را ایندکس کنند
یا اصلاً همچین چزی وجود نداره و راه دیگری برای ایندکس کردن صفحات هست؟
ممنون از کسانی که پاسخ میدن