अनुशंसा प्रणाली

एक अनुशंसा प्रणाली, या अनुशंसा प्रणाली (कभी-कभी 'सिस्टम' को प्लेटफ़ॉर्म या इंजन जैसे पर्यायवाची के साथ बदल देती है), सूचना फ़िल्टरिंग प्रणाली का उपवर्ग है जो उन वस्तुओं के लिए सुझाव प्रदान करती है जो किसी विशेष उपयोगकर्ता के लिए सबसे प्रासंगिक हैं। समान्यत: सुझाव विभिन्न निर्णय लेने की प्रक्रियाओं को संदर्भित करते हैं, जैसे कि कौन सा उत्पाद खरीदना है, कौन सा संगीत सुनना है, या कौन सा ऑनलाइन समाचार पढ़ना है। अनुशंसा प्रणालियाँ विशेष रूप से तब उपयोगी होती हैं जब किसी व्यक्ति को किसी सेवा द्वारा प्रस्तावित वस्तुओं की संभावित भारी संख्या में से किसी वस्तु को चुनने की आवश्यकता होती है।

अनुशंसा प्रणाली का उपयोग विभिन्न क्षेत्रों में किया जाता है, समान्यत: मान्यता प्राप्त उदाहरणों में वीडियो और संगीत सेवाओं के लिए प्लेलिस्ट जेनरेटर, ऑनलाइन स्टोर के लिए उत्पाद अनुशंसाकर्ता, या सोशल मीडिया प्लेटफ़ॉर्म और ओपन वेब सामग्री अनुशंसाकर्ता के लिए सामग्री अनुशंसाकर्ता सम्मिलित हैं। ये प्रणाली एकल इनपुट, जैसे संगीत, या समाचार, किताबें और खोज क्वेरी जैसे प्लेटफार्मों के अंदर और अनेक इनपुट का उपयोग करके काम कर सकते हैं। रेस्तरां और ऑनलाइन डेटिंग जैसे विशिष्ट विषयों के लिए लोकप्रिय अनुशंसा प्रणालियाँ भी हैं। अनुसंधान लेखों और विशेषज्ञों,, सहयोगी, और वित्तीय सेवाओं का पता लगाने के लिए अनुशंसा प्रणाली भी विकसित की गई है।

अवलोकन
अनुशंसा प्रणालियाँ समान्यत: सहयोगी फ़िल्टरिंग और सामग्री-आधारित फ़िल्टरिंग (जिसे व्यक्तित्व-आधारित दृष्टिकोण के रूप में भी जाना जाता है) में से या दोनों का उपयोग करती हैं। साथ ही अन्य प्रणालियाँ जैसे ज्ञान-आधारित प्रणालियाँ। सहयोगात्मक फ़िल्टरिंग दृष्टिकोण उपयोगकर्ता के पिछले व्यवहार (पहले खरीदी गई या चयनित वस्तुएं और/या उन वस्तुओं को दी गई संख्यात्मक रेटिंग) के साथ-साथ अन्य उपयोगकर्ताओं द्वारा किए गए समान निर्णयों से मॉडल बनाते हैं। इस मॉडल का उपयोग उन वस्तुओं (या वस्तुओं के लिए रेटिंग) की पूर्वानुमान करने के लिए किया जाता है जिनमें उपयोगकर्ता की रुचि हो सकती है। सामग्री-आधारित फ़िल्टरिंग दृष्टिकोण समान गुणों वाले अतिरिक्त आइटम की अनुशंसा करने के लिए किसी आइटम की अलग, पूर्व-टैग की गई विशेषताओं की श्रृंखला का उपयोग करते हैं।

हम दो प्रारंभिक संगीत अनुशंसा प्रणालियों - Last.fm और पंडोरा रेडियो की तुलना करके सहयोगी और सामग्री-आधारित फ़िल्टरिंग के बीच अंतर प्रदर्शित कर सकते हैं।
 * Last.fm यह देखकर अनुशंसित गानों का स्टेशन बनाता है कि उपयोगकर्ता ने नियमित आधार पर कौन से बैंड और व्यक्तिगत ट्रैक सुने हैं और उनकी तुलना अन्य उपयोगकर्ताओं के सुनने के व्यवहार से करता है। Last.fm ऐसे ट्रैक चलाएगा जो उपयोगकर्ता की लाइब्रेरी में दिखाई नहीं देते हैं, किंतु अधिकांशतः समान रुचियों वाले अन्य उपयोगकर्ताओं द्वारा चलाए जाते हैं। चूँकि यह दृष्टिकोण उपयोगकर्ताओं के व्यवहार का लाभ उठाता है, यह सहयोगी फ़िल्टरिंग तकनीक का उदाहरण है।
 * पेंडोरा गीत या कलाकार के गुणों (संगीत जीनोम प्रोजेक्ट द्वारा प्रदान की गई 400 विशेषताओं का उपसमूह) का उपयोग ऐसे स्टेशन को तैयार करने के लिए करता है जो समान गुणों के साथ संगीत बजाता है। उपयोगकर्ता फीडबैक का उपयोग स्टेशन के परिणामों को परिष्कृत करने के लिए किया जाता है, जब उपयोगकर्ता किसी विशेष गीत को नापसंद करता है तो कुछ विशेषताओं पर जोर नहीं दिया जाता है और जब उपयोगकर्ता को कोई गाना पसंद आता है तो अन्य विशेषताओं पर जोर दिया जाता है। यह सामग्री-आधारित दृष्टिकोण का उदाहरण है.

प्रत्येक प्रकार की प्रणाली की अपनी शक्ति और दुर्बलता होती हैं। उपरोक्त उदाहरण में, Last.fm को स्पष्ट अनुशंसाएँ करने के लिए उपयोगकर्ता के बारे में बड़ी मात्रा में जानकारी की आवश्यकता होती है। यह कोल्ड स्टार्ट (अनुशंसित सिस्टम) समस्या का उदाहरण है, और सहयोगी फ़िल्टरिंग प्रणाली में समान्य है।    जबकि पेंडोरा को प्रारंभ करने के लिए बहुत कम जानकारी की आवश्यकता होती है, इसका सीमा कहीं अधिक सीमित है (उदाहरण के लिए, यह केवल वही पक्ष समर्थन कर सकता है जो मूल बीज के समान हैं)।

अनुशंसा प्रणालियाँ खोज एल्गोरिदम का उपयोगी विकल्प हैं क्योंकि वे उपयोगकर्ताओं को उन वस्तुओं को खोजने में सहायता करती हैं जो उन्हें अन्यथा नहीं मिलतीं। ध्यान देने योग्य बात यह है कि अनुशंसा प्रणाली अधिकांशतः गैर-पारंपरिक डेटा को अनुक्रमित करने वाले खोज इंजनों का उपयोग करके कार्यान्वित की जाती है।

अनुशंसा प्रणालियाँ अनेक स्वीकृत पेटेंटों का फोकस रही हैं।

इतिहास
इलेन रिच ने 1979 में ग्रुंडी नामक पहली अनुशंसा प्रणाली बनाई। उसने उपयोगकर्ता को उसकी पसंद की पुस्तक की अनुशंसा करने का विधि खोजा। उनका विचार ऐसी प्रणाली बनाने का था जो उपयोगकर्ता से विशिष्ट प्रश्न पूछती हो और उसके उत्तरों के आधार पर उसे रूढ़ियाँ निर्दिष्ट करती हो। उपयोगकर्ता की रूढ़िवादिता के आधार पर, उसे उस पुस्तक के लिए अनुशंसा मिलेगी जो उसे पसंद आ सकती है।

अनुशंसा प्रणाली का पहला वास्तविक उल्लेख 1990 में कोलंबिया विश्वविद्यालय में जूसी कार्लग्रेन द्वारा डिजिटल बुकशेल्फ़ के रूप में तकनीकी रिपोर्ट में किया गया था। और बड़े मापदंड पर कार्यान्वित किया गया और 1994 से जूसी कार्लग्रेन, फिर एसआईसीएस, द्वारा तकनीकी रिपोर्टों और प्रकाशनों पर काम किया गया। और एमआईटी में पैटी मेस के नेतृत्व में अनुसंधान समूह, बेलकोर में विल हिल, और पॉल रेसनिक, एमआईटी में भी ग्रुपलेंस के साथ जिनके काम को 2010 एसीएम सॉफ्टवेयर प्रणाली पुरस्कार से सम्मानित किया गया था।

मोंटानेर ने बुद्धिमान एजेंट परिप्रेक्ष्य से अनुशंसाकर्ता प्रणालियों का पहला अवलोकन प्रदान किया था। गेडिमिनस एडोमाविसियस ने अनुशंसाकर्ता प्रणालियों का नया, वैकल्पिक अवलोकन प्रदान किया था । हेरलॉकर अनुशंसाकर्ता प्रणालियों के लिए मूल्यांकन तकनीकों का अतिरिक्त अवलोकन प्रदान करता है, और जोरेन बील एट अल ऑफलाइन मूल्यांकन की समस्याओं पर चर्चा की बील एट अल. उपलब्ध शोध पत्र अनुशंसा प्रणाली और उपस्थित चुनौतियों पर साहित्य सर्वेक्षण भी प्रदान किया है।

सहयोगात्मक फ़िल्टरिंग
अनुशंसा प्रणाली के डिज़ाइन के लिए दृष्टिकोण जिसका व्यापक उपयोग होता है, सहयोगात्मक फ़िल्टरिंग है। सहयोगात्मक फ़िल्टरिंग इस धारणा पर आधारित है कि जो लोग अतीत में सहमत थे वे भविष्य में भी सहमत होंगे, और वे उसी प्रकार की वस्तुओं को पसंद करेंगे जैसे वे अतीत में पसंद करते थे। प्रणाली विभिन्न उपयोगकर्ताओं या वस्तुओं के लिए केवल रेटिंग प्रोफाइल के बारे में जानकारी का उपयोग करके पक्ष समर्थन तैयार करता है। वर्तमान उपयोगकर्ता या आइटम के समान रेटिंग इतिहास वाले सहकर्मी उपयोगकर्ताओं/आइटमों का पता लगाकर, वे इस निकट का उपयोग करके अनुशंसाएँ उत्पन्न करते हैं। सहयोगात्मक फ़िल्टरिंग विधियों को मेमोरी-आधारित और मॉडल-आधारित के रूप में वर्गीकृत किया गया है। मेमोरी-आधारित दृष्टिकोण का प्रसिद्ध उदाहरण उपयोगकर्ता-आधारित एल्गोरिदम है, जबकि मॉडल-आधारित दृष्टिकोण आव्यूह फ़ैक्टराइज़ेशन (पक्ष समर्थन प्रणाली) है। सहयोगात्मक फ़िल्टरिंग दृष्टिकोण का प्रमुख लाभ यह है कि यह मशीन विश्लेषण योग्य सामग्री पर निर्भर नहीं करता है और इसलिए यह आइटम की समझ की आवश्यकता के बिना फिल्मों जैसे सम्मिश्र आइटम की स्पष्ट रूप से अनुशंसा करने में सक्षम है। अनुशंसाकर्ता प्रणालियों में उपयोगकर्ता समानता या आइटम समानता को मापने के लिए अनेक एल्गोरिदम का उपयोग किया गया है। उदाहरण के लिए, k-निकटतम पड़ोसी एल्गोरिदम|k-निकटतम समीप (k-NN) दृष्टिकोण और पियर्सन सहसंबंध, जैसा कि पहली बार एलन द्वारा कार्यान्वित किया गया था।

उपयोगकर्ता के व्यवहार से मॉडल बनाते समय, डेटा संग्रह के स्पष्ट और अंतर्निहित डेटा संग्रह रूपों के बीच अधिकांशतः अंतर किया जाता है।

स्पष्ट डेटा संग्रह के उदाहरणों में निम्नलिखित सम्मिलित हैं:
 * किसी उपयोगकर्ता से किसी आइटम को स्लाइडिंग स्केल पर रेट करने के लिए कहना।
 * उपयोगकर्ता को खोजने के लिए कहना।
 * उपयोगकर्ता से वस्तुओं के संग्रह को पसंदीदा से कम से कम पसंदीदा में श्रेणी करने के लिए कहना।
 * किसी उपयोगकर्ता को दो वस्तुएँ प्रस्तुत करना और उनसे उनमें से उत्तम चुनने के लिए कहना।
 * किसी उपयोगकर्ता से उन वस्तुओं की सूची बनाने के लिए कहना जो उसे पसंद हों (रोशियो एल्गोरिथ्म या अन्य समान तकनीकें देखें)।

अंतर्निहित डेटा संग्रह के उदाहरणों में निम्नलिखित सम्मिलित हैं:
 * उन वस्तुओं का अवलोकन करना जिन्हें उपयोगकर्ता किसी ऑनलाइन स्टोर में देखता है।
 * आइटम/उपयोगकर्ता के देखने के समय का विश्लेषण करना।
 * उपयोगकर्ता द्वारा ऑनलाइन खरीदी जाने वाली वस्तुओं का रिकॉर्ड रखना।
 * उन आइटमों की सूची प्राप्त करना जिन्हें उपयोगकर्ता ने अपने कंप्यूटर पर सुना या देखा है।
 * उपयोगकर्ता के सोशल नेटवर्क का विश्लेषण करना और समान पसंद और नापसंद का पता लगाना।

सहयोगात्मक फ़िल्टरिंग दृष्टिकोण अधिकांशतः तीन समस्याओं से ग्रस्त होते हैं: कोल्ड स्टार्ट (कंप्यूटिंग), स्केलेबिलिटी, और विरलता।
 * ठंडी प्रारंभ: किसी नए उपयोगकर्ता या आइटम के लिए, स्पष्ट अनुशंसाएँ करने के लिए पर्याप्त डेटा नहीं है। ध्यान दें: इस समस्या का सामान्य रूप से कार्यान्वित समाधान मल्टी-आर्म्ड बैंडिट एल्गोरिदम है।।
 * स्केलेबिलिटी: अनेक वातावरणों में लाखों उपयोगकर्ता और उत्पाद हैं जिनमें ये प्रणाली पक्ष समर्थन करते हैं। इस प्रकार, अनुशंसाओं की गणना के लिए अधिकांशतः बड़ी मात्रा में गणना शक्ति की आवश्यकता होती है।
 * विरलता: प्रमुख ई-कॉमर्स साइटों पर बेची जाने वाली वस्तुओं की संख्या बहुत बड़ी है। सबसे सक्रिय उपयोगकर्ताओं ने समग्र डेटाबेस का केवल छोटा उपसमूह ही रेट किया होगा। इस प्रकार सबसे लोकप्रिय वस्तुओं की भी रेटिंग बहुत कम है।

सहयोगी फ़िल्टरिंग के सबसे प्रसिद्ध उदाहरणों में से आइटम-टू-आइटम सहयोगी फ़िल्टरिंग है (जो लोग x खरीदते हैं वे y भी खरीदते हैं), Amazon.com की अनुशंसा प्रणाली द्वारा लोकप्रिय एल्गोरिदम। अनेक सामाजिक नेटवर्क मूल रूप से उपयोगकर्ता और उनके दोस्तों के बीच कनेक्शन के नेटवर्क की जांच करके नए दोस्तों, समूहों और अन्य सामाजिक कनेक्शनों की पक्ष समर्थन करने के लिए सहयोगी फ़िल्टरिंग का उपयोग करते थे। सहयोगात्मक फ़िल्टरिंग का उपयोग अभी भी हाइब्रिड प्रणाली के भाग के रूप में किया जाता है।

सामग्री-आधारित फ़िल्टरिंग
अनुशंसा प्रणाली को डिज़ाइन करते समय अन्य सामान्य दृष्टिकोण सामग्री-आधारित फ़िल्टरिंग है। सामग्री-आधारित फ़िल्टरिंग विधियाँ आइटम के विवरण और उपयोगकर्ता की प्राथमिकताओं की प्रोफ़ाइल पर आधारित होती हैं। ये विधियां उन स्थितियों के लिए सबसे उपयुक्त हैं जहां किसी आइटम (नाम, स्थान, विवरण इत्यादि) पर ज्ञात डेटा है, किंतु उपयोगकर्ता पर नहीं है । सामग्री-आधारित अनुशंसाकर्ता अनुशंसा को उपयोगकर्ता-विशिष्ट वर्गीकरण समस्या के रूप में मानते हैं और किसी आइटम की विशेषताओं के आधार पर उपयोगकर्ता की पसंद और नापसंद के लिए वर्गीकरण सीखते हैं।

इस प्रणाली में, आइटम का वर्णन करने के लिए कीवर्ड का उपयोग किया जाता है, और इस उपयोगकर्ता को पसंद आने वाले आइटम के प्रकार को इंगित करने के लिए उपयोगकर्ता प्रोफ़ाइल बनाई जाती है। दूसरे शब्दों में, ये एल्गोरिदम उन वस्तुओं के समान अनुशंसा करने का प्रयास करते हैं जिन्हें उपयोगकर्ता ने अतीत में पसंद किया था या वर्तमान में जांच कर रहा है। यह अधिकांशतः अस्थायी प्रोफ़ाइल उत्पन्न करने के लिए उपयोगकर्ता साइन-इन तंत्र पर निर्भर नहीं होता है। विशेष रूप से, विभिन्न उम्मीदवार वस्तुओं की तुलना उपयोगकर्ता द्वारा पहले से मूल्यांकित वस्तुओं से की जाती है, और सर्वोत्तम मिलान वाली वस्तुओं की पक्ष समर्थन की जाती है। इस दृष्टिकोण की जड़ें सूचना पुनर्प्राप्ति और सूचना फ़िल्टरिंग अनुसंधान में हैं।

उपयोगकर्ता प्रोफ़ाइल बनाने के लिए, प्रणाली अधिकतर दो प्रकार की सूचनाओं पर ध्यान केंद्रित करता है:

1. उपयोगकर्ता की पसंद का मॉडल.

2. अनुशंसाकर्ता प्रणाली के साथ उपयोगकर्ता की इंटरेक्शन का इतिहास।

मूल रूप से, ये विधियाँ प्रणाली के अंदर आइटम की विशेषता बताने वाले आइटम प्रोफ़ाइल (अथार्त, अलग विशेषताओं और सुविधाओं का सेट) का उपयोग करती हैं। प्रणाली में आइटमों की विशेषताओं को अमूर्त करने के लिए, आइटम प्रस्तुति एल्गोरिदम प्रयुक्त किया जाता है। व्यापक रूप से उपयोग किया जाने वाला एल्गोरिदम tf-idf प्रतिनिधित्व (जिसे सदिश स्पेस प्रतिनिधित्व भी कहा जाता है) है। प्रणाली आइटम सुविधाओं के भारित सदिश के आधार पर उपयोगकर्ताओं की सामग्री-आधारित प्रोफ़ाइल बनाता है। वज़न उपयोगकर्ता के लिए प्रत्येक सुविधा के महत्व को दर्शाता है और विभिन्न तकनीकों का उपयोग करके व्यक्तिगत रूप से रेटेड सामग्री वैक्टर से गणना की जा सकती है। सरल दृष्टिकोण रेटेड आइटम सदिश के औसत मूल्यों का उपयोग करते हैं जबकि अन्य परिष्कृत विधि मशीन लर्निंग तकनीकों जैसे नाइव बेयस क्लासिफायरियर, क्लस्टर विश्लेषण, निर्णय पेड़ और कृत्रिम तंत्रिका नेटवर्क का उपयोग करते हैं ताकि संभावना का अनुमान लगाया जा सके कि उपयोगकर्ता आइटम को पसंद करेगा।

सामग्री-आधारित फ़िल्टरिंग के साथ प्रमुख उद्देश्य यह है कि क्या प्रणाली सामग्री स्रोत के संबंध में उपयोगकर्ताओं के कार्यों से उपयोगकर्ता की प्राथमिकताओं को सीख सकता है और उन्हें अन्य सामग्री प्रकारों में उपयोग कर सकता है। जब प्रणाली उसी प्रकार की सामग्री की अनुशंसा करने तक सीमित होता है जिसे उपयोगकर्ता पहले से ही उपयोग कर रहा है, तो अनुशंसा प्रणाली का मूल्य उस समय की तुलना में अधिक कम होता है जब अन्य सेवाओं से अन्य सामग्री प्रकारों की अनुशंसा की जा सकती है। उदाहरण के लिए, समाचार ब्राउज़िंग के आधार पर समाचार लेखों की अनुशंसा करना उपयोगी है। फिर भी, यह तब अधिक उपयोगी होगा जब समाचार ब्राउज़िंग के आधार पर विभिन्न सेवाओं से संगीत, वीडियो, उत्पाद, चर्चा आदि की अनुशंसा की जा सकती है। इसे दूर करने के लिए, अधिकांश सामग्री-आधारित अनुशंसा प्रणालियाँ अब किसी न किसी प्रकार की हाइब्रिड प्रणाली का उपयोग करती हैं।

सामग्री-आधारित अनुशंसा प्रणाली में राय-आधारित अनुशंसा प्रणाली भी सम्मिलित हो सकती है। कुछ स्थिति में, उपयोगकर्ताओं को आइटम पर टेक्स्ट समीक्षा या फीडबैक छोड़ने की अनुमति होती है। ये उपयोगकर्ता-जनित टेक्स्ट अनुशंसाकर्ता प्रणाली के लिए अंतर्निहित डेटा हैं क्योंकि वे आइटम की सुविधा/विधियों और आइटम के लिए उपयोगकर्ताओं के मूल्यांकन/भावना दोनों के संभावित समृद्ध संसाधन हैं। उपयोगकर्ता-जनित समीक्षाओं से निकाली गई सुविधाओं को आइटमों के मेटा डेटा में सुधार किया जाता है, क्योंकि चूंकि वे मेटाडेटा जैसे आइटम के विधियों को भी प्रतिबिंबित करते हैं, इसलिए निकाली गई विशेषताएं उपयोगकर्ताओं द्वारा व्यापक रूप से चिंतित हैं। समीक्षाओं से निकाली गई भावनाओं को संबंधित सुविधाओं पर उपयोगकर्ताओं के रेटिंग स्कोर के रूप में देखा जा सकता है। राय-आधारित अनुशंसा प्रणाली के लोकप्रिय दृष्टिकोण टेक्स्ट खनन, सूचना पुनर्प्राप्ति, भावना विश्लेषण (मल्टीमॉडल भावना विश्लेषण भी देखें) और गहन शिक्षण सहित विभिन्न तकनीकों का उपयोग करते हैं।

हाइब्रिड अनुशंसा दृष्टिकोण
अधिकांश अनुशंसाकर्ता प्रणालियाँ अब सहयोगी फ़िल्टरिंग, सामग्री-आधारित फ़िल्टरिंग और अन्य दृष्टिकोणों को मिलाकर हाइब्रिड दृष्टिकोण का उपयोग करती हैं। ऐसा कोई कारण नहीं है कि ही प्रकार की अनेक अलग-अलग तकनीकों को संकरण न किया जा सकता है। हाइब्रिड दृष्टिकोण को अनेक विधियों से प्रयुक्त किया जा सकता है: सामग्री-आधारित और सहयोगात्मक-आधारित भविष्यवाणियां अलग-अलग करके और फिर उन्हें संयोजित करके; सहयोगात्मक-आधारित दृष्टिकोण में सामग्री-आधारित क्षमताओं को जोड़कर (और इसके विपरीत); या दृष्टिकोणों को मॉडल में एकीकृत करके (देखें)। पक्ष समर्थन प्रणालियों की संपूर्ण समीक्षा के लिए) अनेक अध्ययनों ने अनुभवजन्य रूप से हाइब्रिड के प्रदर्शन की तुलना शुद्ध सहयोगात्मक और सामग्री-आधारित विधियों से की है और प्रदर्शित किया है कि हाइब्रिड विधियां अधिक स्पष्ट प्रदान कर सकती हैं शुद्ध दृष्टिकोण की तुलना में अनुशंसाएँ इन विधियों का उपयोग अनुशंसा प्रणाली में कुछ सामान्य समस्याओं जैसे कोल्ड स्टार्ट और स्पार्सिटी समस्या, साथ ही ज्ञान आधार ज्ञान-आधारित दृष्टिकोण में ज्ञान इंजीनियरिंग बाधा को दूर करने के लिए भी किया जा सकता है।

NetFlix हाइब्रिड अनुशंसा प्रणाली के उपयोग का अच्छा उदाहरण है। वेबसाइट समान उपयोगकर्ताओं की देखने और खोजने की आदतों (अथार्त, सहयोगी फ़िल्टरिंग) की तुलना करके और साथ ही उन फिल्मों की प्रस्तुति करके पक्ष समर्थन करती है जो उन फिल्मों के साथ विशेषताओं को साझा करती हैं जिन्हें उपयोगकर्ता ने उच्च रेटिंग दी है (सामग्री-आधारित फ़िल्टरिंग)।

कुछ संकरण तकनीकों में सम्मिलित हैं:
 * भारित: विभिन्न अनुशंसा घटकों के स्कोर को संख्यात्मक रूप से संयोजित करना।
 * स्विचिंग: अनुशंसा घटकों में से चयन करना और चयनित को प्रयुक्त करना।
 * मिश्रित: अनुशंसा देने के लिए विभिन्न अनुशंसाकर्ताओं की अनुशंसाओं को साथ प्रस्तुत किया जाता है।
 * सुविधा संयोजन: विभिन्न ज्ञान स्रोतों से प्राप्त सुविधाओं को साथ संयोजित किया जाता है और एकल अनुशंसा एल्गोरिदम को दिया जाता है।
 * फ़ीचर ऑग्मेंटेशन: किसी फ़ीचर या फ़ीचर के सेट की गणना करना, जो अगली तकनीक के इनपुट का भाग है।
 * कैस्केड: अनुशंसाकर्ताओं को सख्त प्राथमिकता दी जाती है, कम प्राथमिकता वाले लोग उच्च प्राथमिकता वाले लोगों के स्कोरिंग में संबंध तोड़ देते हैं।
 * मेटा-स्तर: अनुशंसा तकनीक प्रयुक्त की जाती है और कुछ प्रकार का मॉडल तैयार किया जाता है, जो अगली तकनीक द्वारा उपयोग किया जाने वाला इनपुट होता है।

सत्र-आधारित अनुशंसा प्रणाली
ये अनुशंसा प्रणालियाँ सत्र के अंदर उपयोगकर्ता की इंटरेक्शन का उपयोग करती हैं पक्ष समर्थन उत्पन्न करने के लिए. यूट्यूब पर सत्र-आधारित अनुशंसा प्रणाली का उपयोग किया जाता है और अमेज़न. ये विशेष रूप से तब उपयोगी होते हैं जब किसी उपयोगकर्ता का इतिहास (जैसे पिछले क्लिक, खरीदारी) उपलब्ध नहीं है या वर्तमान उपयोगकर्ता सत्र में प्रासंगिक नहीं है। डोमेन, जहां सत्र-आधारित अनुशंसाएं विशेष रूप से प्रासंगिक हैं, उनमें वीडियो, ई-कॉमर्स, यात्रा, संगीत और बहुत कुछ सम्मिलित हैं। सत्र-आधारित अनुशंसा प्रणाली के अधिकांश उदाहरण उपयोगकर्ता के किसी भी अतिरिक्त विवरण (ऐतिहासिक, जनसांख्यिकीय) की आवश्यकता के बिना सत्र के अंदर वर्तमान की इंटरेक्शन के अनुक्रम पर निर्भर करते हैं। सत्र-आधारित अनुशंसाओं की तकनीकें मुख्य रूप से जेनरेटिव अनुक्रमिक मॉडल जैसे आवर्ती तंत्रिका नेटवर्क,ट्रांसफॉर्मर और अन्य गहन शिक्षण आधारित दृष्टिकोण पर आधारित हैं।। ,

अनुशंसा प्रणाली के लिए सुदृढीकरण सीखना
अनुशंसा समस्या को सुदृढीकरण सीखने की समस्या के विशेष उदाहरण के रूप में देखा जा सकता है, जिसके तहत उपयोगकर्ता वह वातावरण है जिस पर एजेंट, अनुशंसा प्रणाली पुरस्कार प्राप्त करने के लिए कार्य करती है, उदाहरण के लिए, उपयोगकर्ता द्वारा क्लिक या सहभागिता सुदृढीकरण सीखने का विधि जो अनुशंसा प्रणाली के क्षेत्र में विशेष रूप से उपयोगी है, वह यह तथ्य है कि अनुशंसा एजेंट को पुरस्कार प्रदान करके मॉडल या नीतियों को सीखा जा सकता है। यह पारंपरिक शिक्षण तकनीकों के विपरीत है जो पर्यवेक्षित शिक्षण दृष्टिकोणों पर निर्भर करती है जो कम लचीले होते हैं, सुदृढीकरण सीखने की अनुशंसा तकनीकें संभावित रूप से ऐसे मॉडलों को प्रशिक्षित करने की अनुमति देती हैं जिन्हें सीधे जुड़ाव के आव्यूह और उपयोगकर्ता की रुचि पर अनुकूलित किया जा सकता है।

बहु-मापदंड अनुशंसा प्रणाली
मल्टी-मानदंड अनुशंसा प्रणाली (एमसीआरएस) को अनुशंसा प्रणाली के रूप में परिभाषित किया जा सकता है जो अनेक मानदंडों पर वरीयता जानकारी को सम्मिलित करती है। एकल मानदंड मान के आधार पर अनुशंसा तकनीकों को विकसित करने के अतिरिक्त आइटम i के लिए उपयोगकर्ता u की समग्र प्राथमिकता, ये प्रणाली अनेक मानदंडों पर वरीयता जानकारी का लाभ उठाकर u की अज्ञात वस्तुओं के लिए रेटिंग की पूर्वानुमान करने का प्रयास करते हैं जो इस समग्र वरीयता मान को प्रभावित करते हैं। अनेक शोधकर्ता एमसीआरएस को बहु-मापदंड निर्णय लेने (एमसीडीएम) समस्या के रूप में देखते हैं, और एमसीआरएस प्रणाली को प्रयुक्त करने के लिए एमसीडीएम विधियों और तकनीकों को प्रयुक्त करते हैं। विस्तृत परिचय के लिए.यह अध्याय देखें

रिस्क-जागरूक अनुशंसा प्रणाली
अनुशंसा प्रणाली के अधिकांश उपस्थित दृष्टिकोण प्रासंगिक जानकारी का उपयोग करने वाले उपयोगकर्ताओं को सबसे अधिक प्रासंगिक सामग्री की अनुशंसा करने पर ध्यान केंद्रित करते हैं, फिर भी अवांछित सूचनाओं के साथ उपयोगकर्ता को परेशान करने के विपत्ति को ध्यान में नहीं रखते हैं। कुछ परिस्थितियों में अनुशंसाओं को आगे बढ़ाने से उपयोगकर्ता को परेशान होने के विपति पर विचार करना महत्वपूर्ण है, उदाहरण के लिए, किसी कुशल मीटिंग के समय, सुबह जल्दी या देर रात में होती है इसलिए, अनुशंसाकर्ता प्रणाली का प्रदर्शन आंशिक रूप से इस बात पर निर्भर करता है कि उसने अनुशंसा प्रक्रिया में विपति को किस सीमा तक सम्मिलित किया है। इस समस्या को प्रबंधित करने का विकल्प द्रार्स है,एक प्रणाली जो संदर्भ-जागरूक अनुशंसा को दस्यु समस्या के रूप में मॉडल करती है। यह प्रणाली सामग्री-आधारित तकनीक और प्रासंगिक बैंडिट एल्गोरिदम को जोड़ती है।

मोबाइल अनुशंसा प्रणाली
मोबाइल अनुशंसाकर्ता प्रणाली व्यक्तिगत, संदर्भ-संवेदनशील अनुशंसाएँ प्रदान करने के लिए इंटरनेट-एक्सेसिंग स्मार्टफोन्स का उपयोग करते हैं। यह अनुसंधान का विशेष रूप से कठिन क्षेत्र है क्योंकि मोबाइल डेटा उस डेटा की तुलना में अधिक सम्मिश्र है जिससे अनुशंसा प्रणाली को अधिकांशतः सामना करना पड़ता है। यह विषम है, ध्वनि है, स्थानिक और लौकिक ऑटो-सहसंबंध की आवश्यकता है, और इसमें सत्यापन और व्यापकता की समस्याएं हैं।

ऐसे तीन कारक हैं जो मोबाइल अनुशंसा प्रणाली और पूर्वानुमान परिणामों की स्पष्ट ता को प्रभावित कर सकते हैं: संदर्भ, अनुशंसा विधि और गोपनीयता इसके अतिरिक्त, मोबाइल अनुशंसा प्रणाली प्रत्यारोपण समस्या से ग्रस्त है - पक्ष समर्थन सभी क्षेत्रों में प्रयुक्त नहीं हो सकती हैं (उदाहरण के लिए, ऐसे क्षेत्र में नुस्खा की पक्ष समर्थन करना मूर्खतापूर्ण होगा जहां सभी सामग्रियां उपलब्ध नहीं हो सकती हैं)।

मोबाइल अनुशंसा प्रणाली का उदाहरण किसी शहर में टैक्सी चालकों के लिए ड्राइविंग मार्ग तैयार करने के लिए उबेर और लिफ़्ट जैसी कंपनियों द्वारा अपनाए गए दृष्टिकोण हैं। यह प्रणाली उन मार्गों के जीपीएस डेटा का उपयोग करती है जो टैक्सी चालक काम करते समय अपनाते हैं, जिसमें स्थान (अक्षांश और देशांतर), समय टिकटें और परिचालन स्थिति (यात्रियों के साथ या बिना) सम्मिलित हैं। यह अधिभोग समय और लाभ को अनुकूलित करने के लक्ष्य के साथ, मार्ग के साथ पिकअप बिंदुओं की सूची की पक्ष समर्थन करने के लिए इस डेटा का उपयोग करता है।

नेटफ्लिक्स पुरस्कार
अनुशंसा प्रणाली में अनुसंधान को सक्रिय करने वाली घटनाओं में से नेटफ्लिक्स पुरस्कार था। 2006 से 2009 तक, नेटफ्लिक्स ने प्रतियोगिता प्रायोजित की थी जिसमें उस टीम को 1,000,000 डॉलर का भव्य पुरस्कार दिया गया, जो 100 मिलियन से अधिक मूवी रेटिंग का प्रस्तावित डेटासेट ले सकती थी और कंपनी की उपस्थित अनुशंसा प्रणाली द्वारा प्रस्तुत की गई पक्षसमर्थन की तुलना में 10% अधिक स्पष्ट पक्ष समर्थन लौटा सकती थी। इस प्रतियोगिता ने नए और अधिक स्पष्ट एल्गोरिदम की खोज को सक्रिय किया। 21 सितंबर 2009 को, टाईब्रेकिंग नियमों का उपयोग करके बेलकोर की प्रैग्मैटिक कैओस टीम को 1,000,000 अमेरिकी डॉलर का भव्य पुरस्कार दिया गया।

2007 में सबसे स्पष्ट एल्गोरिदम ने 107 अलग-अलग एल्गोरिदम दृष्टिकोणों की सम्मिलित विधि का उपयोग किया, जिसे ही पूर्वानुमान में मिश्रित किया गया। जैसा कि विजेताओं, बेल एट अल ने कहा:

<ब्लॉककोट>

एकाधिक भविष्यवक्ताओं को मिश्रित करने पर पूर्वानुमान स्पष्ट ता में अधिक सुधार होता है। हमारा अनुभव यह है कि अधिकांश प्रयासों को ही तकनीक को परिष्कृत करने के अतिरिक्त, अधिक भिन्न दृष्टिकोण प्राप्त करने पर केंद्रित किया जाना चाहिए। परिणाम स्वरुप हमारा समाधान अनेक विधियों का समूह है।

नेटफ्लिक्स प्रोजेक्ट के कारण वेब को अनेक लाभ हुए। कुछ टीमों ने अपनी तकनीक ली है और इसे अन्य बाजारों में प्रयुक्त किया है। दूसरे स्थान पर रहने वाली टीम के कुछ सदस्यों ने ग्रेविटी आर एंड डी की स्थापना की, जो अनुशंसा इंजन है जो एसीएम रिकसिस में सक्रिय है। 4-टेल, इंक. ने ईकॉमर्स वेबसाइटों के लिए नेटफ्लिक्स प्रोजेक्ट-व्युत्पन्न समाधान बनाया है।

नेटफ्लिक्स पुरस्कार प्रतियोगिता के लिए नेटफ्लिक्स द्वारा प्रस्तुत किए गए डेटासेट के आसपास अनेक गोपनीयता उद्देश्य थे। चूँकि ग्राहक की गोपनीयता बनाए रखने के लिए डेटा सेट को अज्ञात रखा गया था, 2007 में टेक्सास विश्वविद्यालय के दो शोधकर्ता इंटरनेट मूवी डेटाबेस पर फिल्म रेटिंग के साथ डेटा सेट का मिलान करके व्यक्तिगत उपयोगकर्ताओं की पहचान करने में सक्षम थे। परिणामस्वरूप, दिसंबर 2009 में गुमनाम नेटफ्लिक्स उपयोगकर्ता ने डो बनाम नेटफ्लिक्स में नेटफ्लिक्स पर मुकदमा सीमा किया, जिसमें आरोप लगाया गया कि नेटफ्लिक्स ने डेटासेट जारी करके संयुक्त राज्य अमेरिका के निष्पक्ष व्यापार कानूनों और वीडियो गोपनीयता संरक्षण अधिनियम का उल्लंघन किया है। इसके साथ ही संघीय व्यापार आयोग की चिंताओं के कारण 2010 में दूसरी नेटफ्लिक्स पुरस्कार प्रतियोगिता समाप्त कर दी गई।

निष्पादन उपाय
अनुशंसा एल्गोरिदम की प्रभावशीलता का आकलन करने में मूल्यांकन महत्वपूर्ण है। अनुशंसाकर्ता प्रणालियों की प्रभावशीलता को मापने और विभिन्न दृष्टिकोणों की तुलना करने के लिए, तीन प्रकार के मूल्यांकन उपलब्ध हैं: उपयोगकर्ता अध्ययन, ए/बी परीक्षण|ऑनलाइन मूल्यांकन (ए/बी परीक्षण), और ऑफ़लाइन मूल्यांकन होता है।

समान्यत: उपयोग की जाने वाली आव्यूह माध्य वर्ग त्रुटि और मूल माध्य वर्ग त्रुटि हैं, इसके बाद वाले का उपयोग नेटफ्लिक्स पुरस्कार में किया गया है। सूचना पुनर्प्राप्ति आव्यूह जैसे स्पष्ट ता और रिकॉल या डिस्काउंटेड संचयी लाभ किसी अनुशंसा पद्धति की गुणवत्ता का आकलन करने के लिए उपयोगी होते हैं। मूल्यांकन में विविधता, नवीनता और कवरेज को भी महत्वपूर्ण विधि माना जाता है। चूँकि, अनेक क्लासिक मूल्यांकन उपायों की अत्यधिक आलोचना की जाती है।

एक निश्चित परीक्षण डेटासेट पर अनुशंसा एल्गोरिदम के प्रदर्शन का मूल्यांकन करना सदैव बेसीमा चुनौतीपूर्ण होगा क्योंकि पक्षसमर्थन पर वास्तविक उपयोगकर्ताओं की प्रतिक्रियाओं का स्पष्ट अनुमान लगाना असंभव है। इसलिए ऑफ़लाइन डेटा में एल्गोरिदम की प्रभावशीलता की गणना करने वाला कोई भी मीट्रिक स्पष्ट नहीं होगा।

उपयोगकर्ता अध्ययन अपेक्षाकृत छोटे मापदंड का है। कुछ दर्जनों या सैकड़ों उपयोगकर्ताओं को विभिन्न अनुशंसा दृष्टिकोणों द्वारा बनाई गई पक्ष समर्थन प्रस्तुत की जाती हैं, और फिर उपयोगकर्ता निर्णय लेते हैं कि कौन सी पक्ष समर्थन सर्वोत्तम हैं।

ए/बी परीक्षणों में, समान्य रूप से वास्तविक उत्पाद के हजारों उपयोगकर्ताओं को पक्ष समर्थन दिखाई जाती हैं, और पक्ष समर्थन प्रणाली पक्ष समर्थन उत्पन्न करने के लिए यादृच्छिक रूप से कम से कम दो अलग-अलग पक्ष समर्थन दृष्टिकोण चुनती है। प्रभावशीलता को प्रभावशीलता के अंतर्निहित उपायों जैसे रूपांतरण दर या दर के माध्यम से क्लिक करके मापा जाता है।

ऑफ़लाइन मूल्यांकन ऐतिहासिक डेटा पर आधारित होते हैं, उदा. डेटासेट जिसमें यह जानकारी होती है कि उपयोगकर्ताओं ने पहले फिल्मों को कैसे रेट किया था।

अनुशंसा दृष्टिकोण की प्रभावशीलता को इस आधार पर मापा जाता है कि अनुशंसा दृष्टिकोण डेटासेट में उपयोगकर्ताओं की रेटिंग का कितना अच्छा अनुमान लगा सकता है। जबकि रेटिंग इस बात की स्पष्ट अभिव्यक्ति है कि उपयोगकर्ता को कोई फिल्म पसंद आई या नहीं, ऐसी जानकारी सभी डोमेन में उपलब्ध नहीं है। उदाहरण के लिए, उद्धरण अनुशंसा प्रणाली के क्षेत्र में, उपयोगकर्ता समान्यत: किसी उद्धरण या अनुशंसित लेख को रेटिंग नहीं देते हैं। ऐसे स्थिति में ऑफ़लाइन मूल्यांकन प्रभावशीलता के अंतर्निहित उपायों का उपयोग कर सकते हैं। उदाहरण के लिए, यह माना जा सकता है कि अनुशंसा प्रणाली प्रभावी है जो शोध लेख की संदर्भ सूची में सम्मिलित यथासंभव अधिक से अधिक लेखों की अनुशंसा करने में सक्षम है। चूँकि, इस प्रकार के ऑफ़लाइन मूल्यांकन को अनेक शोधकर्ता आलोचनात्मक मानते हैं। उदाहरण के लिए, यह दिखाया गया है कि ऑफ़लाइन मूल्यांकन के परिणामों का उपयोगकर्ता अध्ययन या ए/बी परीक्षणों के परिणामों के साथ कम संबंध है। ऑफ़लाइन मूल्यांकन के लिए लोकप्रिय डेटासेट में डुप्लिकेट डेटा सम्मिलित दिखाया गया है और इस प्रकार एल्गोरिदम के मूल्यांकन में गलत निष्कर्ष निकलते हैं। अधिकांशतः, तथाकथित ऑफ़लाइन मूल्यांकन के परिणाम वास्तव में मूल्यांकन की गई उपयोगकर्ता-संतुष्टि से संबंधित नहीं होते हैं। ऐसा संभवतः इसलिए है क्योंकि ऑफ़लाइन प्रशिक्षण अत्यधिक पहुंच योग्य वस्तुओं के प्रति अत्यधिक पक्षपाती है, और ऑफ़लाइन परीक्षण डेटा ऑनलाइन अनुशंसा मॉड्यूल के आउटपुट से अत्यधिक प्रभावित होता है। शोधकर्ताओं ने निष्कर्ष निकाला है कि ऑफ़लाइन मूल्यांकन के परिणामों को आलोचनात्मक रूप से देखा जाना चाहिए।

स्पष्टता से परे
समान्यत: अनुशंसाकर्ता प्रणालियों पर शोध सबसे स्पष्ट अनुशंसा एल्गोरिदम खोजने से संबंधित है। चूँकि, ऐसे अनेक कारक भी हैं जो महत्वपूर्ण हैं।


 * विविधता - जब अंतर-सूची विविधता अधिक होती है तो उपयोगकर्ता अनुशंसाओं से अधिक संतुष्ट होते हैं, उदाहरण के लिए। विभिन्न कलाकारों के आइटम.
 * पक्ष समर्थन की दृढ़ता - कुछ स्थितियों में, पक्षसमर्थन को दोबारा दिखाना अधिक प्रभावी होता है, या उपयोगकर्ताओं को आइटम को दोबारा रेट करने दें, नए आइटम दिखाने की तुलना में. इसके अनेक कारण हैं। उदाहरण के लिए, जब आइटम पहली बार दिखाए जाते हैं तो उपयोगकर्ता उन्हें अनदेखा कर सकते हैं, क्योंकि उनके पास अनुशंसाओं का सावधानीपूर्वक निरीक्षण करने का समय नहीं था।
 * गोपनीयता - अनुशंसा प्रणाली को समान्यत: गोपनीयता संबंधी चिंताओं से निपटना पड़ता है क्योंकि उपयोगकर्ताओं को संवेदनशील जानकारी प्रकट करनी होती है। सहयोगी फ़िल्टरिंग का उपयोग करके उपयोगकर्ता प्रोफ़ाइल बनाना गोपनीयता के दृष्टिकोण से समस्याग्रस्त हो सकता है। अनेक यूरोपीय देशों में सूचना गोपनीयता की शसक्त संस्कृति है, और उपयोगकर्ता प्रोफाइलिंग (सूचना विज्ञान) के किसी भी स्तर को प्रस्तुत करने के हर प्रयास के परिणामस्वरूप नकारात्मक ग्राहक प्रतिक्रिया हो सकती है। इस क्षेत्र में चल रहे गोपनीयता के उद्देश्यों पर अधिक शोध किया गया है। नेटफ्लिक्स पुरस्कार अपने डेटासेट में जारी विस्तृत व्यक्तिगत जानकारी के लिए विशेष रूप से उल्लेखनीय है। रामकृष्णन एट अल. वैयक्तिकरण और गोपनीयता के बीच व्यापार-संवर्त का व्यापक अवलोकन किया गया है और पाया गया है कि अशक्त संबंधों (एक अप्रत्याशित कनेक्शन जो आकस्मिक पक्ष समर्थन प्रदान करता है) और अन्य डेटा स्रोतों का संयोजन अज्ञात डेटासेट में उपयोगकर्ताओं की पहचान को प्रकाशित करने के लिए किया जा सकता है।
 * उपयोगकर्ता जनसांख्यिकी - बील एट अल पाया गया कि उपयोगकर्ता जनसांख्यिकी प्रभावित कर सकती है कि उपयोगकर्ता अनुशंसाओं से कितने संतुष्ट हैं। अपने पेपर में उन्होंने दिखाया कि बुजुर्ग उपयोगकर्ता युवा उपयोगकर्ताओं की तुलना में अनुशंसाओं में अधिक रुचि रखते हैं।
 * शसक्तता - जब उपयोगकर्ता अनुशंसा प्रणाली में भाग ले सकते हैं, तो धोखाधड़ी के उद्देश्य को संबोधित किया जाना चाहिए।
 * आकस्मिकता - सेरेन्डिपिटी इस बात का माप है कि पक्ष समर्थन कितनी आश्चर्यजनक हैं। उदाहरण के लिए, अनुशंसा प्रणाली जो किराने की दुकान में ग्राहक को दूध की पक्ष समर्थन करती है वह पूरी तरह से स्पष्ट हो सकती है, किंतु यह अच्छी पक्ष समर्थन नहीं है क्योंकि यह ग्राहक के लिए खरीदने के लिए स्पष्ट वस्तु है। [सेरेन्डिपिटी] दो उद्देश्यों को पूरा करता है: पहला यह संभावना कम हो जाती है कि उपयोगकर्ता रुचि खो देते हैं क्योंकि विकल्प सेट बहुत समान है। दूसरा, एल्गोरिदम को सीखने और खुद को उत्तम बनाने के लिए इन वस्तुओं की आवश्यकता होती है।
 * विश्वास - यदि उपयोगकर्ता को प्रणाली पर विश्वास नहीं है तो अनुशंसाकर्ता प्रणाली का उपयोगकर्ता के लिए बहुत कम महत्व है। अनुशंसा प्रणाली द्वारा यह समझाकर विश्वास बनाया जा सकता है कि यह कैसे अनुशंसाएँ उत्पन्न करती है, और यह किसी आइटम की अनुशंसा क्यों करती है।
 * लेबलिंग - पक्षसमर्थन के साथ उपयोगकर्ता की संतुष्टि पक्षसमर्थन की लेबलिंग से प्रभावित हो सकती है। उदाहरण के लिए, उद्धृत अध्ययन में प्रायोजित के रूप में लेबल की गई पक्षसमर्थन के लिए क्लिक-थ्रू दर (सीटीआर) ऑर्गेनिक (सीटीआर = 8.86%) के रूप में लेबल की गई समान पक्षसमर्थन के लिए सीटीआर की तुलना में कम (CTR= 5.93%) थी। उस अध्ययन में बिना किसी लेबल वाली अनुशंसाओं ने सबसे अच्छा प्रदर्शन (CTR=9.87%) किया गया था।

प्रतिलिपि प्रस्तुत करने योग्यता
अनुशंसा प्रणाली का ऑफ़लाइन मूल्यांकन करना अधिक कठिन है, कुछ शोधकर्ताओं का प्रमाण है कि इससे अनुशंसा प्रणाली प्रकाशनों में पुनरुत्पादन परिस्थिति उत्पन्न हो गया है। कुछ मशीन लर्निंग प्रकाशन स्थलों में प्रतिलिपि प्रस्तुत करने योग्यता का विषय आवर्ती उद्देश्य प्रतीत होता है, किंतु वैज्ञानिक प्रकाशन की विश्व से परे इसका कोई महत्वपूर्ण प्रभाव नहीं है। अनुशंसा प्रणाली के संदर्भ में 2019 के पेपर में शीर्ष सम्मेलनों (SIGIR, KDD, WWW, ACM कॉन्फ्रेंस ऑन अनुशंसा प्रणाली, IJCAI) में प्रकाशित टॉप-के अनुशंसा समस्या के लिए गहन शिक्षण या तंत्रिका विधियों को प्रयुक्त करने वाले चुनिंदा प्रकाशनों का सर्वेक्षण किया गया, जिसमें दिखाया गया है कि सर्वेक्षण के लेखकों द्वारा औसतन 40% से कम लेखों को पुन: प्रस्तुत किया जा सकता है, कुछ सम्मेलनों में तो 14% से भी कम। लेख आज की शोध छात्रवृत्ति में अनेक संभावित समस्याओं पर विचार करता है और उस क्षेत्र में उत्तम वैज्ञानिक प्रथाओं का सुझाव देता है।  समान विधियों के सेट को बेंचमार्क करने पर हाल ही में किए गए काम से गुणात्मक रूप से बहुत अलग परिणाम सामने आए जिससे तंत्रिका विधियाँ सर्वोत्तम प्रदर्शन करने वाली विधियों में से पाई गईं। अनुशंसा प्रणाली के लिए गहन शिक्षण और तंत्रिका विधियों का उपयोग अनेक हालिया अनुशंसा प्रणाली चुनौतियों, डब्लूएसडीएम, में विजयी समाधानों में किया गया है। रिकसिस चैलेंज। इसके अतिरिक्त उद्योग में तंत्रिका और गहन शिक्षण विधियों का व्यापक रूप से उपयोग किया जाता है जहां उनका बड़े मापदंड पर परीक्षण किया जाता है।  अनुशंसाकर्ता प्रणालियों में प्रतिलिपि प्रस्तुत करने योग्यता का विषय नया नहीं है। 2011 तक, माइकल एकस्ट्रैंड, जोसेफ ए. कॉन्स्टन, और अन्य आलोचना की गई कि वर्तमान में अनुशंसा प्रणाली अनुसंधान परिणामों को पुन: प्रस्तुत करना और विस्तारित करना कठिन है, और मूल्यांकन को "निरंतर नहीं संभाला जाता है।" कॉन्स्टन और एडोमाविसियस ने निष्कर्ष निकाला है कि अनुशंसा प्रणाली अनुसंधान समुदाय संकट का सामना कर रहा है जहां बड़ी संख्या में कागजात ऐसे परिणाम प्रस्तुत करते हैं जो सामूहिक ज्ञान में बहुत कम योगदान देते हैं […] अधिकांशतः क्योंकि अनुसंधान में उचित रूप से निर्णय लेने के लिए […] मूल्यांकन का अभाव होता है और इसलिए, सार्थक योगदान प्रदान करने के लिए परिणामस्वरूप, पक्ष समर्थन प्रणालियों के बारे में बहुत से शोध को प्रतिलिपि प्रस्तुत करने योग्य नहीं माना जा सकता है। इसलिए, अनुशंसाकर्ता प्रणालियों के संचालकों को इस प्रश्न का उत्तर देने के लिए वर्तमान शोध में बहुत कम मार्गदर्शन मिलता है कि अनुशंसाकर्ता प्रणालियों में किस अनुशंसा का उपयोग किया जाना चाहिए। एलन सईद और एलेजांद्रो बेलोगिन|बेलोगिन ने क्षेत्र में प्रकाशित पत्रों का अध्ययन किया जाता था जो की साथ ही पक्ष समर्थन के लिए कुछ सबसे लोकप्रिय रूपरेखाओं को बेंचमार्क किया और परिणामों में बड़ी विसंगतियां पाईं, तब भी जब समान एल्गोरिदम और डेटा सेट का उपयोग किया गया था। कुछ शोधकर्ताओं ने प्रदर्शित किया कि अनुशंसा एल्गोरिदम या परिदृश्यों में समान्य बदलाव के कारण अनुशंसा प्रणाली की प्रभावशीलता में शसक्त बदलाव आए थे। उन्होंने निष्कर्ष निकाला कि वर्तमान स्थिति में सुधार के लिए सात कार्य आवश्यक हैं: (1) अन्य अनुसंधान क्षेत्रों का सर्वेक्षण करें और उनसे सीखें, (2) प्रतिलिपि प्रस्तुत करने योग्यता की सामान्य समझ खोजें, (3) प्रतिलिपि प्रस्तुत करने योग्यता को प्रभावित करने वाले निर्धारकों को पहचानें और समझें, (4) अधिक व्यापक प्रयोग करें (5) प्रकाशन प्रथाओं का आधुनिकीकरण करें, (6) अनुशंसा फ्रेमवर्क के विकास और उपयोग को बढ़ावा दें, और (7) अनुशंसा-प्रणाली अनुसंधान के लिए सर्वोत्तम अभ्यास दिशानिर्देश स्थापित करें।

== यह भी देखें                                                                                                                                                                                            ==


 * रेटिंग साइट
 * कोल्ड स्टार्ट (सिफारिश प्रणाली)
 * सहयोगी को छानने
 * सामूहिक आसूचना
 * सामग्री खोज प्लेटफ़ॉर्म
 * एंटरप्राइज बुकमार्किंग
 * फ़िल्टर बुलबुला
 * अनुशंसा प्रणाली पर एसीएम सम्मेलन
 * वैयक्तिकृत विपणन
 * वरीयता प्राप्त करना
 * उत्पाद खोजक
 * विन्यासकर्ता
 * पैटर्न मान्यता

अग्रिम पठन

 * Books


 * Kim Falk (January 2019), Practical Recommender Systems, Manning Publications, ISBN 9781617292705
 * Seaver, Nick (2022). Computing Taste: Algorithms and the Makers of Music Recommendation. University of Chicago Press.
 * Seaver, Nick (2022). Computing Taste: Algorithms and the Makers of Music Recommendation. University of Chicago Press.
 * Seaver, Nick (2022). Computing Taste: Algorithms and the Makers of Music Recommendation. University of Chicago Press.
 * Seaver, Nick (2022). Computing Taste: Algorithms and the Makers of Music Recommendation. University of Chicago Press.
 * Seaver, Nick (2022). Computing Taste: Algorithms and the Makers of Music Recommendation. University of Chicago Press.


 * Scientific articles
 * Prem Melville, Raymond J. Mooney, and Ramadass Nagarajan. (2002) Content-Boosted Collaborative Filtering for Improved Recommendations. Proceedings of the Eighteenth National Conference on Artificial Intelligence (AAAI-2002), pp. 187–192, Edmonton, Canada, July 2002.

बाहरी संबंध

 * Hangartner, Rick, "What is the Recommender Industry?", MSearchGroove, December 17, 2007.
 * ACM Conference on Recommender Systems
 * Recsys group at Politecnico di Milano
 * Data Science: Data to Insights from MIT (recommendation systems)
 * Data Science: Data to Insights from MIT (recommendation systems)