সার্চ ইঞ্জিন মূলত একটি ওয়েব অনসন্ধান ইঞ্জিন বা সফট্‌ওয়্যার প্রোগ্রাম যা তথ্য জমা করে এবং প্রয়োজনের সময় সেই তথ্য প্রদান করে। সার্চ ইঞ্জিন একটি স্প্রিপ্টের মাধ্যমে রান হয় এবং নেট দুনিয়ায় ঘুরে বেড়ায়। এটিকে আপনি একটি মাকড়সার সাথে তুলনা করতে পারেন যা পুরো নেট দুনিয়ায় নিজের জাল ছড়িয়ে রাখে তথ্য সংগ্রহের জন্য। আপনি যখন কোন তথ্যের জন্য সার্চ করেন, তখন এটি নিজের কাছে জমা করে রাখা কোটি কোটি ওয়েব পেইজ থেকে বাছাই করে আপনার দরকারি তথ্যটি খুঁজে দেয়।

সার্চ ইঞ্জিন কিভাবে কাজ করে?

সাধারণত ওয়েব সার্চ ইঞ্জিন একটি স্পাইডার বা ওয়েব ক্রলার পাঠিয়ে সমস্ত লাইভ ওয়েবসাইট থেকে যতটা সম্ভব তথ্য সংগ্রহ করে। যখনই কোন ওয়েবসাইটে নতুন কোন তথ্য অ্যাড করা হয় কিংবা পুরনো তথ্য এডিট করে আফডেট করা হয়, তখনই ওয়েব ক্রলার বা সার্চ ইঞ্জিন বট সেখানে হাজির হয়ে নতুন তথ্যগুলো নিয়ে নেয়।

এমনকি, যদি দীর্ঘদিন ধরে কোন ওয়েবসাইটে নতুন পোস্ট না দেয়া হয় কিংবা পুরনো পোস্ট এডিট করা না হয়, তবুও সার্চ ইঞ্জিন ক্রলার সেই ওয়েবসাইট ভিজিট করা বন্ধ করে দেয় না, বরং নিয়মিতই ভিজিট করতে থাকে। এভাবে, মিনিটে মিনিটে লাখ লাখ ওয়েবসাইট ভিজিট করে সার্চ ইঞ্জিন বটগুলো ওয়েবে থাকা যাবতীয় সব তথ্য সংগ্রহ করে রাখে।সার্চ ইঞ্জিনের সাহায্যকারী আরেকটি প্রোগ্রাম হল ইনডেক্সার যা সেই তথ্যগুলোকে পড়ে নিয়ে স্তরে স্তরে জমা করে রাখে। আবার জমাকৃত এই বিশাল তথ্য থেকে অনেক তথ্যও মুছেও দেয় সার্চ ইঞ্জিন ইনডেক্সার। কোন লেখা ডুপ্লিকেট হলে, মান-সন্মত না হলে কিংবা ব্রোকেন ইউআরএল হলে ওই সব তথ্য মুছে ফেলা হয় সার্চ ইঞ্জিনের তথ্য ভান্ডার থেকে।

জমাকৃত এই সব তথ্য থেকে ডুপ্লিকেট তথ্য ফেলে দেয়া এবং অর্থপূর্ণ আর উপকারি তথ্যগুলোকে আলাদা করার জন্য রয়েছে আরেকটি ফিচার যার নাম, প্রোপার্টি অ্যালগোরিদম। এই ফিচারটির সাহায্যেই আমরা সার্চ করার পর সঠিক, যুক্তিসঙ্গত আর উপকারি রেজাল্টগুলো পেয়ে থাকি।