از اواسط دهه ۱۹۹۰ میلادی که نخستین موتورهای جستجو اقدام به فهرست کردن وب اولیه کردند، مسئولان وب سایتها و تولیدکنندگان محتوا، شروع به بهینهسازی سایتها برای موتورهای جستجو نمودند. در ابتدا تمام کارهایی که مسئولان وب سایتها باید انجام میدادند، ارسال آدرس صفحه یا URL به موتورهای مختلفی که یک...