مجله موتورهای جستجو

s_240_200_16777215_00_http___images.hamshahrionline.ir_images_2016_12_position36_16-12-20-19458search-enngines.jpg

 

وقتی جستجویی در یک موتور جستجوگر انجام و نتایج جستجو ارایه می‌شود، کاربران در واقع نتیجه کار بخش‌های متفاوت موتور جستجوگر را می‌بینند.
موتور جستجوگر قبلاً پایگاه داده‌اش را آماده کرده است و این گونه نیست که درست در همان لحظه‌ی جستجو، تمام وب را بگردد.

 

مفاهیم: ادبیات موتورهای جستجو چیست؟
بسیاری از خود می‌پرسند که چگونه ممکن است گوگل در کمتر از یک ثانیه تمام سایت‌های وب را بگردد و میلیون‌ها صفحه را در نتایج جستجوی خود ارایه کند؟

گوگل و هیچ موتور جستجوی دیگری توانایی انجام این کار را ندارند. همه آنها در زمان پاسخ‌گویی به جستجوهای کاربران، تنها در پایگاه داده‌ای که در اختیار دارند به جستجو می‌پردازند و نه در وب! موتور جستجوگر به کمک بخش‌های متفاوت خود، اطلاعات مورد نیاز را قبلاً جمع‌آوری، تجزیه و تحلیل می‌کند، آنرا در پایگاه داده‌اش ذخیره می‌نماید و به هنگام جستجوی کاربر تنها در همین پایگاه داده می‌گردد. بخش‌های مجزای یک موتور جستجوگر عبارتند از:
Spider یا عنکبوت
Crawler یا خزنده
Indexer یا بایگانی کننده
Database یا پایگاه داده
Ranker یا سیستم رتبه‌بندی

الف: Spider (عنکبوت)

اسپایدر یا روبوت (Robot) نرم افزاری است که کار جمع‌آوری اطلاعات مورد نیاز یک موتور جستجو را بر عهده دارد. اسپایدر به صفحات مختلف سر می‌زند، محتوای آنها را می‌خواند، لینک‌ها را دنبال می‌کند، اطلاعات مورد نیاز را جمع‌آوری می‌کند و آنرا در اختیار سایر بخش‌های موتور جستجوگر قرار می‌دهد. کار یک اسپایدر، بسیار شبیه کار کاربران وب است. همانطور که کاربران، صفحات مختلف را بازدید می‌کنند، اسپایدر هم درست این کار را انجام می‌دهد با این تفاوت که اسپایدر کدهای HTML صفحات را می‌بیند اما کاربران نتیجه حاصل از کنار هم قرار گرفتن این کدها را.

اسپایدر، به هنگام مشاهده صفحات، بر روی سرورها رد پا برجای می‌گذارد. شما اگر اجازه دسترسی به آمار دید و بازدیدهای صورت گرفته از یک سایت و اتفاقات انجام شده در آن را داشته باشید، می‌توانید مشخص کنید که اسپایدر کدام یک از موتورهای جستجوگر صفحات سایت را مورد بازدید قرار داده است. یکی از فعالیت‌های اصلی که در SEM انجام می‌شود تحلیل آمار همین دید و بازدیدها است.

اسپایدرها کاربردهای دیگری نیز دارند، به عنوان مثال عده‌ای از آنها به سایت‌های مختلف مراجعه می‌کنند و فقط به بررسی فعال بودن لینک‌های آنها می‌پردازند و یا به دنبال آدرس ایمیل (E-mail) می‌گردند.

ب: Crawler (خزنده)

کراولر، نرم‌افزاری است که به عنوان یک فرمانده برای اسپایدر عمل می‌کند. کراولر مشخص می‌کند که اسپایدر کدام صفحات را مورد بازدید قرار دهد. در واقع کراولر تصمیم می‌گیرد که کدام یک از لینک‌های صفحه‌ای که اسپایدر در حال حاضر در آن قرار دارد، دنبال شود. ممکن است همه آنها را دنبال کند، بعضی‌ها را دنبال کند و یا هیچ کدام را دنبال نکند.

کراولر، ممکن است قبلاً برنامه‌ریزی شده باشد که آدرس‌های خاصی را طبق برنامه در اختیار اسپایدر قرار دهد تا از آنها دیدن کند. دنبال کردن لینک‌های یک صفحه به این بستگی دارد که موتور جستجو چه حجمی از اطلاعات یک سایت را می‌تواند (یا می‌خواهد) در پایگاه داده‌اش ذخیره کند. همچنین ممکن است اجازه دسترسی به بعضی از صفحات به موتورهای جستجوگر داده نشده باشد.

شما به عنوان دارنده سایت، همان طور که دوست دارید موتورهای جستجو اطلاعات سایت شما را با خود ببرند، می‌توانید آنها را از بعضی صفحات سایت‌تان دور کنید و اجازه دسترسی به محتوای آن صفحات را به آنها ندهید. موتور جستجو اگر مودب باشد قبل از ورود به هر سایتی ابتدا قوانین دسترسی به محتوای سایت را (در صورت وجود) در فایلی خاص بررسی می‌کند و از حقوق دسترسی خود اطلاع می‌یابد. تنظیم میزان دسترسی موتورهای جستجو به محتوای یک سایت توسط پروتکل Robots انجام می‌شود. به عمل کراولر، خزش (Crawling) می‌گویند.


بستن

نوشتن دیدگاه


تصویر امنیتی
تصویر امنیتی جدید

نتایج نهایی لیگ بازی های فکری

مطالب محبوب (پربازدید) بخش مطالب خواندنی

گونه جدیدی از یک پستاندار در جنگل های آمازون

IMAGE

دوشنبه, 26 اسفند 1392 گونه جدیدی از یک پستاندار در جنگل‌های آمازون برزیل و کلمبیا زندگی می‌کند کشف شد محققان در این زمینه گفتند که این پستاندار، گونه جدیدی از یک تاپیر (خوک خرطوم دراز ) است که 3/1 متر طول...


ادامه مطلب...

کشف پستاندار گوشتخوار جدید در آمریکای جنوبی

IMAGE

دوشنبه, 26 اسفند 1392 دانشمندان حیات‌وحش از کشف گونه جدید پستاندار گوشتخوار در جنگل‌های مه‌آلود و گرمسیری در آمریکای جنوبی خبر دادند. دانشمندان می‌گویند که چنین کشفی در 30سال اخیر بی‌نظیر بوده است....


ادامه مطلب...

مگسی که قادر به تشخیص سرطان است

IMAGE

دوشنبه, 26 اسفند 1392 تحقیقات اخیر محققان دانشگاه کنستانس آلمان نشان می دهد که مگس میوه به راحتی می‌تواند با استفاده از حس بویایی، سلول سرطانی را از سلول سالم تشخیص دهد.  مگس های میوه مورد استفاده در...


ادامه مطلب...

تشخیص هویت با بوی بدن

IMAGE

دوشنبه, 26 اسفند 1392 امروزه با پیشرفت فناوری از شیوه های مختلفی برای تعیین هویت افراد استفاده می شود از جمله اثر انگشت، اسکن عنبیه و تشخیص چهره اما محققان به تازگی بوی بدن را به عنوان شکل جدیدی از...


ادامه مطلب...

کوچک‌ترین مهره‌دار زنده جهان را بشناسید

IMAGE

دوشنبه, 26 اسفند 1392 دانشمندان گونه‌ای قورباغه ریز را در نزدیکی روستای آموا در پاپوآی گینه نو کشف کردند که لقب «کوچک‌ترین مهره‌دار زنده» را از آن خود کرده است. ریزترین مهره‌دار زنده جهان ایسنا نوشت:...


ادامه مطلب...

آشنایی با نکاتی درباره سیاه‌چاله‌‌ها

IMAGE

دوشنبه, 26 اسفند 1392 در اصول ریاضیات سیاه‌چاله‌ها نشان می‌دهد که ممکن است آنها بتوانند شما را به منطقه دیگری از فضا یا احتمالا به جهانی دیگر منتقل کنند. با این حال ریاضیات همچنین نشان می‌د‌هد که این...


ادامه مطلب...

بخار آب بر روی بزرگ‌ترین سیارک منظومه شمسی

IMAGE

دوشنبه, 26 اسفند 1392 دانشمندان آژانس فضایی اروپا با استفاده از تلسکوپ هرشل برای نخستین بار، بخار آب را روی سیارک سرس (Ceres) کشف کردند. به گزارش ایرنا، این سیارک بزرگ‌ترین و گردترین سیارک منظومه شمسی به...


ادامه مطلب...

مشاهده تک‌شاخ کمیاب آسیایی پس از ۱۵سال

IMAGE

دوشنبه, 26 اسفند 1392 برای نخستین‌بار پس از ۱۵سال تصاویری از یک تک‌شاخ فوق‌العاده کمیاب موسوم به «سائولا» در ویتنام به ثبت رسید. کارشناسان حیات وحش نخستین‌بار در سال ۱۹۹۲میلادی موفق به کشف سائولا در...


ادامه مطلب...

آَشنایی با خورشید گرفتگی (کسوف)

IMAGE

دوشنبه, 26 اسفند 1392 گرفتگی کامل خورشید را باید یکی از منظره‌های زیبا و در عین حال ترسناک طبیعت دانست.در طول تاریخ، این پدیده همواره مورد توجه اقوام و ملل مختلف بوده است. اغلب تمدن‌های کهن خورشید گرفتگی...


ادامه مطلب...

اولین عکس‌های ارسالی فینیکس از مریخ

IMAGE

دوشنبه, 26 اسفند 1392 شبکه تلویزیونی ناسا اعلام کرد که داده‌های فینیکس با موفقیت در حال ارسال به زمین هستند. ساعت 4:26 دوشنبه (6 خرداد) به وقت ایران، فینیکس با موفقیت در محل از پیش تعیین شده در شمال مریخ فرود...


ادامه مطلب...

7 ویژگی دوست واقعی

IMAGE

دوشنبه, 26 اسفند 1392 آیا یافتن دوستان واقعی دشوار است؟ وجود چه مواردی باعث صمیمیت بیشتر میان دوستان می‌شود؟ همه ما دوستانی داریم و طبعا به نوعی از دوستی‌هایمان لذت می‌بریم. بعضی از ما دوستان نزدیک و...


ادامه مطلب...

دریاچه‌ای از آب در قمر مشتری کشف شد

IMAGE

دوشنبه, 26 اسفند 1392 دانشمندان آمریکایی در زیر بخ‌های اروپا، یکی از قمرهای مشتری، دریاچه‌ای بزرگ از آب را یافتند که می‌تواند محلی مناسب برای کشف اشکالی از حیات باشددانشمندان دانشگاه تکزاس و ناسا با...


ادامه مطلب...

تصویری جدید از شش‌ضلعی مرموز زحل

IMAGE

دوشنبه, 26 اسفند 1392 فضاپیمای کاسینی ناسا باری دیگر از ۶ درحین تصویربرداری از چهره سیاره زحل، از سازه ۶ضلعی مرموز این سیاره نیز تصویربرداری کرد. براساس گزارش دیسکاوری، کاسینی در مسیر 2.5 میلیون...


ادامه مطلب...

آبفشان‌های قمر زحل

IMAGE

دوشنبه, 26 اسفند 1392 کاوشگر کاسینی ناسا تصاویری زیبا را از هلال قمر "انسلادوس" در برابر سیاره زحل به ثبت رسانده است به گزارش خبرگزاری مهر، این کاوشگر در تصاویر جدید خود از آبفشان‌های مشهور قمر انسلادوس...


ادامه مطلب...

کشف 6 سیاره مشابه زمین

IMAGE

دوشنبه, 26 اسفند 1392 اخیرا فضا پیمای کپلر ناسا موفق به کشف نخستین سیاره هم اندازه زمین در «منطقه قابل سکونت»، (جایی که احتمال وجود آب به‌صورت مایع در سطح کهکشان می‌رود)، شده است. 5 سیاره از سیارات کشف شده...


ادامه مطلب...

آشنایی با علت چشمک‌ زدن ستاره‌ها

IMAGE

دوشنبه, 26 اسفند 1392 حتما هنگامی به آسمان شب نگاه انداخته‌اید، متوجه شده‌اید که نور ستاره‌ها حالتی نوسانی دارد و به اصطلاح چشمک می‌زند. اما چرا اینگونه است؟ نور ستاره‌ها باید از میان لایه‌های جو...


ادامه مطلب...

آشنایی با لکه‌های ماه‌گرفتگی

IMAGE

دوشنبه, 26 اسفند 1392 ماه‌گرفتگی‌ها لکه‌های پوستی تیره‌ای هستند که در هنگام تولد یا اندکی پس از آن ظاهر می‌شوند. این لکه‌ها در اغلب موارد بی‌ضرر هستند، اما در برخی موارد عوارض وخیمی را بوجود...


ادامه مطلب...

جزئیات حلقه‌های زحل فاش شد

IMAGE

دوشنبه, 26 اسفند 1392 کاوشگر کاسینی ناسا تصاویری با جزئیات بی‌سابقه از حلقه‌های زحل ارائه داده است.گفته می‌شود، قمرهای باشکوه و حلقه‌های زحل کلید درک منشا جهان است و اکنون ناسا موفق به شکار حلقه‌های...


ادامه مطلب...

شواهد تازه برای وجود آب در مریخ

IMAGE

دوشنبه, 26 اسفند 1392 پژوهشگران می‌گویند مواد معدنی در خاک مریخ نشان می‌دهد این سیاره زمانی با دریاچه‌ها، رودخانه‌ها و سایر مجموعه‌های آبی پوشیده بوده است به گزارش خبرگزاری رویترز مریخ‌نشین فینیکس...


ادامه مطلب...

لباس‌های کهنه سوخت هواپیما می‌شوند

IMAGE

سه شنبه, 23 آذر 1395  لباس‌های کهنه سوخت هواپیما می‌شوند.   خط هواپیمایی ژاپن تصمیم دارد تا لباس‌های قدیمی را به سوخت جت تبدیل کند.به گزارش مهر، شرکت هواپیمایی "آل نیپون ایرویز" که دومین شرکت...


ادامه مطلب...

منو مکعب

کتاب های مکعب

رسول خدا صلی الله علیه و آله : أَلدّالُّ عَلَى الْخَيْرِ كَفاعِلِه؛ كسى كه ديگران را به كار نيك راهنمائى كند گـويـا خـود، آن را انـجـام داده اسـت. وسائل الشيعه: ج 11، ص 398

اوقات شرعی

حاضرین در سایت

ما 51 مهمان و بدون عضو آنلاین داریم

ورود به سایت

تصویر تصادفی

40.jpg