একটি সফটওয়্যার স্পাইডার কী?

একটি 'সফটওয়্যার স্পাইডার' একটি সার্চ ইঞ্জিন দ্বারা চালিত একটি মানহীন প্রোগ্রাম যা আপনার পছন্দ মতো ওয়েবকেও সার্ফ করে। এটি প্রতিটি ওয়েবসাইট দেখার সাথে সাথে, এটি প্রতিটি সাইটের সমস্ত শব্দ রেকর্ড করে (তার হার্ড ড্রাইভে সংরক্ষণ করে) এবং অন্যান্য সাইটের প্রতিটি লিঙ্ক নোট করে। এরপরে এটি একটি লিঙ্কে 'ক্লিক' করে এবং এটি অন্য ওয়েবসাইটটি পড়ার, সূচীকরণ এবং সঞ্চয় করতে যায়।

সফ্টওয়্যার মাকড়সা প্রায়শই পড়তে এবং তার জন্য অনুসন্ধান করা ইঞ্জিনটির মূল ডাটাবেসে এটি পরিদর্শন করা প্রতিটি ওয়েবসাইটের সম্পূর্ণ পাঠ্যকে সূচীকরণ করে। সম্প্রতি আলতাভিস্তার মতো অনেক ইঞ্জিন কেবল কোনও সাইটের নির্দিষ্ট পৃষ্ঠাগুলিতে প্রায়শই প্রায় 500 টি মোট তালিকা তৈরি করতে শুরু করে এবং তারপরে বন্ধ হয়ে যায়। স্পষ্টতই, কারণ এটি ওয়েব এত বড় হয়ে গেছে যে সমস্ত কিছু সূচকে অনিবার্য। মাকড়সা কত পৃষ্ঠাগুলি সূচক করবে তা সম্পূর্ণ অনুমানযোগ্য নয়। অতএব, আপনার সাইটের প্রতিটি গুরুত্বপূর্ণ পৃষ্ঠা যাতে আপনি সূচীকরণ করতে চান তা বিশেষত জমা দেওয়া ভাল ধারণা, যেমন গুরুত্বপূর্ণ কীওয়ার্ডগুলি রয়েছে those

একটি সফটওয়্যার স্পাইডার একটি বৈদ্যুতিন গ্রন্থাগারের মতো যা বিশ্বের প্রতিটি লাইব্রেরির প্রতিটি বইয়ের সামগ্রীর টেবিলটি কেটে দেয়, এগুলিকে একটি বিশাল মাস্টার সূচীতে সাজিয়ে তোলে এবং তারপরে কোন পাঠ্যগুলিকে রেফারেন্স করে এমন কোনও গ্রন্থাগার তৈরি করে যা অন্যান্য পাঠ্যগুলি উল্লেখ করে। কিছু সফটওয়্যার মাকড়সা দিনে এক মিলিয়ন ডকুমেন্টকে ইনডেক্স করতে পারে! এটি বোঝা গুরুত্বপূর্ণ যে অনুসন্ধান ইঞ্জিনগুলির মাকড়সা দুটি মাত্র কাজ করে:

তারা পাঠ্য সূচী।
তারা লিঙ্কগুলি অনুসরণ করে।

সার্চ ইঞ্জিনওয়াচ ডট কমের একটি সাম্প্রতিক অনুসন্ধান ইঞ্জিন কৌশল সম্মেলনে, অতিথি বক্তাদের একজন, গ্রান্টাস্টিক ডিজাইনের শারি থুরো, এই বিষয়টি তৈরি করেছেন এবং এর তাত্পর্য বর্ণনা করার জন্য কয়েকবার পুনরাবৃত্তি করেছেন: 'অনুসন্ধান ইঞ্জিনগুলি সূচী পাঠ্য এবং লিঙ্কগুলি অনুসরণ করে। তারা পাঠ্য সূচী করে এবং তারা লিঙ্কগুলি অনুসরণ করে। এগুলিই তারা করে। '

অনুসন্ধানের ইঞ্জিনগুলির মাকড়সার প্রকৃতি বোঝার জন্য তার বক্তব্যটি গুরুত্বপূর্ণ এবং কেন্দ্রীয়। যদি আপনার ওয়েবসাইটের পাঠ্য কোনও গ্রাফিকের মধ্যে থাকে তবে অনুসন্ধান ইঞ্জিনগুলি এটি সূচী করতে পারে না। আপনি যে সমস্ত গুরুত্বপূর্ণ কীওয়ার্ডের জন্য র‌্যাঙ্কিং অর্জনের আশা করছেন তার সবগুলি যদি এইচটিএমএল পাঠ্যে নয় গ্রাফিকগুলিতে অন্তর্ভুক্ত থাকে তবে আপনার সাইটটি র‌্যাঙ্কিং অর্জন করবে না। মনে রাখবেন, অনুসন্ধান ইঞ্জিনগুলি ছবিগুলি সূচী করে না বা ছবি পড়ে না, তারা পাঠ্যকে সূচি দেয় এবং লিঙ্কগুলি অনুসরণ করে। এখানেই শেষ. আপনার দেখতে পাতায় কোনও পাঠ্য না থাকলে আপনার কীওয়ার্ড মেটাট্যাগে কোনও পরিমাণ কীওয়ার্ড আপনাকে র‌্যাঙ্কিং অর্জনে সহায়তা করবে না will

আপনার সাইটে মাকড়সা কী দেখবে তা নির্ধারণ করবে যে আপনার সাইটটিকে তার সূচীতে কীভাবে তালিকাভুক্ত করা হয়েছে। অনুসন্ধান ইঞ্জিনগুলি কোনও জটিল স্কোরিং সিস্টেমের ভিত্তিতে কোনও সাইটের প্রাসঙ্গিকতা নির্ধারণ করে যা অনুসন্ধান ইঞ্জিনগুলি গোপন রাখার চেষ্টা করে। এই সিস্টেমে কী কীওয়ার্ডটি পৃষ্ঠায় প্রদর্শিত হয়েছিল, পৃষ্ঠায় কোথায় প্রদর্শিত হয়েছিল এবং মোট কত শব্দ পাওয়া গিয়েছিল তার উপর ভিত্তি করে পয়েন্টগুলি যোগ বা বিয়োগ করে। সর্বাধিক পয়েন্ট অর্জনকারী পৃষ্ঠাগুলি অনুসন্ধান ফলাফলের শীর্ষে ফিরে আসে; বাকী সবাই নীচে সমাধিস্থ হয়, আর কখনও খুঁজে পাওয়া যায় না।

কোনও সফ্টওয়্যার স্পাইডার আপনার সাইটটি পরিদর্শন করার সাথে সাথে এটি অন্য পৃষ্ঠাগুলিতে আপনার পৃষ্ঠায় কোনও লিঙ্ক নোট করে। যে কোনও সার্চ ইঞ্জিনের বিশাল ডাটাবেসে সাইটের মধ্যে সমস্ত লিঙ্ক লিপিবদ্ধ থাকে। অনুসন্ধান ইঞ্জিনটি জানে যে আপনি কোন সাইটগুলিতে লিঙ্ক করেছেন এবং আরও গুরুত্বপূর্ণ, কোনটি আপনার সাথে লিঙ্ক হয়েছে। অনেক ইঞ্জিন এমনকি জনপ্রিয়তার ইঙ্গিত হিসাবে আপনার সাইটে লিঙ্কের সংখ্যা ব্যবহার করবে এবং তারপরে এই ফ্যাক্টরের উপর ভিত্তি করে আপনার র‌্যাঙ্কিংকে বাড়িয়ে তুলবে।