پژوهشنامه پردازش و مدیریت اطلاعات، جلد ۳۰، شماره ۱، صفحات ۱۹۹-۲۲۱
عنوان فارسی معیارهای ارزیابی ربط در نظامهای بازیابی اطلاعات: دانسته‌ها و ندانسته‌ها
چکیده فارسی مقاله ارزیابی نظامهای بازیابی اطلاعات یکی از چالشهای بزرگ متخصصان علم اطلاعات است چون تعیین کارآیی یک نظام به قضاوت در مورد ربط مدارک ارائه شده با نیاز اطلاعاتی کاربر بستگی دارد و این موضوع دارای پیچیدگی های خاصی است. از طرفی نظامهای بازیابی وبی، بسیار متفاوت تر از نظامهای بازیابی سنتی هستند. در محیط وب نیز با نظامها با مجموعه های رتبه بندی شده و نظامها با مجمو عه های رتبه بندی نشده مواجه هستیم که هر کدام معیار و مقیاس ارزیابی خود را دارند. به همین دلیل، سنجش ربط بر اساس نوع رتبه بندی نتایج در این نظامها، متفاوت است. در این مقاله، معیارهای سنجش ربط در نظام های بازیابی اطلاعات به تفکیک نظامهای رتبه بندی نشده(شامل دقت، بازیافت، معیار اف ) و نظامهای رتبه بندی شده (شامل منحنی های دقت و بازیافت، دقت افزوده، میانگین دقت افزوده در نقطه 11، میانگین دقت متوسط، دقت در K ، دقتR و منحنی راک و افزایش تجمعی) تشریح شده و ضمن اشاره به مقیاسهای ارزیابی ربط، یک مقیاس ارزیابی دقت 4 درجه ای معرفی گردیده است که با استفاده از آن می توان به ارزیابی غیردودیی دقت در نظام بازیابی اطلاعات وب شامل دقت کامل، برتر، مفید، واقعی و در نهایت دقت متغیر پرداخت.
کلیدواژه‌های فارسی مقاله
عنوان انگلیسی Evaluation Criteria of Information Retrieval Systems: What We Know and What We Do Not Know
چکیده انگلیسی مقاله Evaluation of information retrieval systems is one of the greatest challenges for information science specialists, because determining the performance of a system depends on judgment of the relevance of documents provided by the system to the user's information needs, and it has its own complexities. New retrieval systems due to the dynamic nature of the Web are very different compared with traditional retrieval systems. Web information retrieval systems in terms of ranking results are divided into two groups: The ranked retrieval results and unranked retrieval sets. Each system has a different evaluation criteria and scales. In this paper, criteria for evaluating information retrieval systems is reviewed for the ranked retrieval results (including precision and recall curves, interpolated precision, the 11-point interpolated precision average, Mean Average Precision, precision at K, R-precision, ROC curve cumulative gain and normalized discounted cumulative gain), and the unranked retrieval sets (including precision, recall, F-measure and accuracy) is introduced separately. Finally, alluding to the evaluation metrics, a scale of 4 degrees including best, useful, objective precision and then differential precision is introduced which can be used to evaluate the non-binary precision of web information retrieval systems.
کلیدواژه‌های انگلیسی مقاله
نویسندگان مقاله نجلا حریری | nadjla hariri
islamic azad university
دانشگاه آزاد اسلامیواحد علوم تحقیقات تهران
سازمان اصلی تایید شده: دانشگاه آزاد اسلامی علوم و تحقیقات (Islamic azad university science and research branch)

فهیمه باب الحوایجی | fahime babalhavaeji
islamic azad university
دانشگاه آزاد اسلامیواحد علوم تحقیقات تهران
سازمان اصلی تایید شده: دانشگاه آزاد اسلامی علوم و تحقیقات (Islamic azad university science and research branch)

مهرداد فرزندی پور | mehrdad farzandipour
islamic azad university
دانشگاه آزاد اسلامیواحد علوم تحقیقات تهران
سازمان اصلی تایید شده: دانشگاه آزاد اسلامی علوم و تحقیقات (Islamic azad university science and research branch)

سمیه نادی راوندی | somayyeh nadi ravandi
islamic azad university
دانشگاه آزاد اسلامیواحد علوم تحقیقات تهران
سازمان اصلی تایید شده: دانشگاه آزاد اسلامی علوم و تحقیقات (Islamic azad university science and research branch)

نشانی اینترنتی http://jipm.irandoc.ac.ir/browse.php?a_code=A-10-840-2&slc_lang=fa&sid=fa
فایل مقاله اشکال در دسترسی به فایل - ./files/site1/rds_journals/1504/article-1504-252288.pdf
کد مقاله (doi)
زبان مقاله منتشر شده fa
موضوعات مقاله منتشر شده کتابداری و اطلاع رسانی
نوع مقاله منتشر شده پژوهشی
برگشت به: صفحه اول پایگاه   |   نسخه مرتبط   |   نشریه مرتبط   |   فهرست نشریات