खोज गुणवत्ता कुछ आसानी से मापने योग्य नहीं है।
एक प्रतियोगी प्रासंगिकता को मापने के लिए: प्रासंगिकता को मापने के लिए आप चीजों की जोड़ी की आवश्यकता है। आपके मामले के लिए आपके खोज इंजन का अलग-अलग उदाहरण एक दूसरे के लिए प्रतियोगियों होगा। मेरा मतलब है कि एक खोज इंजन के उदाहरण में मूल एल्गोरिदम चल रहा होगा, दूसरा फ़ज़ी सक्षम होगा, दूसरा फ़ज़ी और बूस्टिंग और अन्य दोनों के साथ होगा।
आपको परिणामों को मैन्युअल रूप से रेट करने की आवश्यकता है। आप लोकप्रिय सहयोगियों के लिए क्वेरी/यूआरएल जोड़े को रेट करने के लिए अपने सहयोगियों से पूछ सकते हैं और फिर छेद के लिए (यानी क्वेरी/यूआरएल जोड़ी रेट नहीं की गई है, तो आप "रैंकिंग सीखना" एल्गोरिदम http://en.wikipedia.org/wiki/Learning_to_rank का उपयोग कर कुछ गतिशील रैंकिंग फ़ंक्शन कर सकते हैं। इसके द्वारा आश्चर्यचकित न हों लेकिन सच (गूगल/बिंग का एक उदाहरण के नीचे पढ़ कृपया) thats।
गूगल और बिंग क्षैतिज खोज बाजार में प्रतियोगी हैं। ये खोज इंजन दुनिया भर के मैनुअल न्यायाधीशों को रोजगार और उन पर लाखों का निवेश, रेट करने के लिए प्रश्नों के लिए उनके परिणाम। इसलिए प्रत्येक क्वेरी/यूआरएल जोड़े के लिए आमतौर पर शीर्ष 3 या शीर्ष 5 परिणाम रेट किए जाते हैं। इन रेटिंग के आधार पर वे एनडीसीजी (सामान्यीकृत डिस्काउंट संचयी लाभ) जैसे मीट्रिक का उपयोग कर सकते हैं, जो बेहतरीन मीट्रिक में से एक है और इनमें से एक सबसे लोकप्रिय एक।
According to wikipedia:
रियायती संचयी लाभ (DCG) एक वेब खोज इंजन> एल्गोरिथ्म या संबंधित अनुप्रयोगों, अक्सर सूचना पुनर्प्राप्ति में इस्तेमाल की प्रभावशीलता का एक उपाय है। एक खोज इंजन परिणाम सेट में दस्तावेजों के एक वर्गीकृत> प्रासंगिकता पैमाने का उपयोग करके, डीसीजी परिणाम सूची में अपनी स्थिति के आधार पर दस्तावेज़ की उपयोगीता,> या लाभ का आकलन करता है। निचले रैंक पर छूट के प्रत्येक परिणाम के लाभ के साथ परिणाम सूची के शीर्ष से नीचे तक लाभ प्राप्त होता है।
विकिपीडिया एनडीसीजी को एक महान तरीके से बताता है। यह एक छोटा सा लेख है, कृपया उस के माध्यम से जाओ।
जैसा कि आपने उल्लेख किया है कि आप दर/डेटा के माध्यम से भी क्लिक कर सकते हैं, जहां आपके पास भीड़ एल्गोरिदम की तरह का ज्ञान है और आप इसके आधार पर प्रासंगिकता को ट्विक करते हैं। यह एक बहुत अच्छा तरीका है लेकिन यह स्पैमिंग को आकर्षित करता है। तो इसे आपकी प्रासंगिकता समस्या को हल करने के लिए एनडीसीजी/एमएपी आदि जैसे कुछ मीट्रिक के साथ मिलना होगा।
यदि आप अभी भी यह जानना चाहते हैं कि आपके मामले के अध्ययन में पूरी चीजें कैसे काम करती हैं, तो मैं इस बारे में अधिक जानकारी प्रदान कर सकता हूं।