समाचारं

गहनशिक्षणवैज्ञानिकेन Yann LeCun इत्यनेन सह बृहत् मॉडल् विषये कथं चिन्तनीयम् इति विषये वदामः

2024-08-09

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

विगतवर्षद्वये जननात्मक-एआइ-प्रौद्योगिक्याः उन्नतिं लोकप्रियतां च प्राप्य सामग्रीं जनयितुं बृहत्-माडल-प्रयोगः क्रमेण सामान्यजनानाम् जीवनस्य भागः अभवत् एषा प्रक्रिया सुलभा प्रतीयते यदा वयं निर्देशं निवेशयामः तदा बृहत् मॉडल् अस्माकं कृते उत्तरं प्रत्यक्षतया निर्गन्तुं शक्नोति । परन्तु पर्दापृष्ठे कोऽपि आदर्शस्य आन्तरिककार्यसिद्धान्तान्, आदर्शनिर्णयप्रक्रिया च न जानाति ।

कृष्णपेटीमाडलस्य अव्याख्यातत्वात् एआइ-सुरक्षायाः विषये सर्वदा प्रश्नः आसीत् । अतः वैज्ञानिकाः बृहत् मॉडलानां कृष्णपेटीं उद्घाटयितुं प्रयतन्ते स्म, यत् उद्योगे "श्वेतपेटीसंशोधनम्" इति कथ्यते । एकतः श्वेत-पेटी-माडलस्य अध्ययनेन जनानां कृष्ण-पेटी-माडलस्य अवगमने सहायता कर्तुं शक्यते, तस्मात् बृहत्-माडलस्य अनुकूलनं, कार्यक्षमतायाः च सुधारः भवति अपरपक्षे श्वेतपेटीसंशोधनस्य लक्ष्यं अभियांत्रिकीविषयं एआइ विज्ञानं प्रति धकेलितुं भवति ।

अस्मिन् समये वयं आमन्त्रितवन्तःचेन् युबेई, सहायकप्रोफेसरः, विद्युत्-कम्प्यूटर-इञ्जिनीयरिङ्गविभागः, कैलिफोर्निया-विश्वविद्यालयः, डेविस्, तस्य शोधसामग्री "श्वेतपेटीप्रतिरूपेण" सम्बद्धा अस्ति । तदतिरिक्तं सः ट्युरिंग् पुरस्कारविजेता मेटा मुख्यवैज्ञानिकः च यान् लेकुन् इत्यस्य पोस्टडॉक्टरेल् फेलो अपि अस्ति । अस्मिन् प्रकरणे सः अस्माभिः सह श्वेत-पेटी-माडलस्य नवीनतम-संशोधन-प्रगतेः विषये गपशपं कृतवान्, अपि च अस्माभिः सह Yann LeCun इति वैज्ञानिकं साझां कृतवान्, यस्य सः परिचितः अस्ति, यः AI-उद्योगस्य उतार-चढावस्य अनुभवं कृतवान् परन्तु विशुद्धरूपेण केन्द्रितः एव तिष्ठति | .

वायलेट् दशी द्वारा ग्राफिक। नादिया तथा सरलरेखा द्वारा दृष्टान्त

निम्नलिखितम् चयनितसाक्षात्काराः सन्ति

01 मानवमस्तिष्कं विशालं च आदर्शम्

"सिलिकन वैली १०१": १.प्रथमं भवन्तः यत् "श्वेतपेटीप्रतिरूपम्" इति शोधं कुर्वन्ति तस्य संक्षेपेण परिचयं कर्तुं शक्नुवन्ति वा? भवतः शोधकाले किं भवता GPT इत्यस्य इनपुट्-आउटपुट्-समस्याः कथं व्याख्यायितव्याः इति आविष्कृतम्?

चेन् युबेई : १.वस्तुतः अस्मिन् दिशि तुल्यकालिकं विशालं लक्ष्यं विशुद्धरूपेण अनुभवजन्यविषयात् वैज्ञानिकविषयं प्रति गहनशिक्षणस्य प्रवर्धनं, अथवा अभियांत्रिकीशास्त्रं विज्ञानरूपेण परिणतुं वा भवति, यतोहि सम्प्रति अभियांत्रिकीशास्त्रस्य विकासः तुल्यकालिकरूपेण शीघ्रं भवति परन्तु विज्ञानं तुल्यकालिकरूपेण मन्दं वर्तते पूर्वं शब्दनिवेशनम् इति एकं प्रतिरूपं आसीत्, यत् भाषायाः केचन प्रतिनिधित्वं ज्ञातुं शक्नोति स्म ।

तस्मिन् समये सर्वेषां वस्तुतः एकः प्रश्नः आसीत् यत् अस्माकं कार्यप्रदर्शने सुधारः अभवत्, परन्तु अस्य कार्यप्रदर्शनस्य सुधारः किं सम्यक् अभवत् ? अतः वयं तस्मिन् समये अतीव प्रारम्भिकं कार्यं कृतवन्तः, यत् एतानि शब्दप्रतिपादनानि उद्घाटयितुं प्रयत्नः करणीयः आसीत् । यदा भवन्तः तत् उद्घाटयन्ति तदा भवन्तः केचन रोचकाः घटनाः प्राप्नुवन्ति।

यथा, यदि भवान् सेबशब्दं गृह्णाति तर्हि तस्मिन् केचन मेटा-अर्थाः प्राप्यन्ते यथा, एकः अर्थः फलस्य प्रतिनिधित्वं कर्तुं शक्नोति, अपरः मिष्टान्नस्य प्रतिनिधित्वं कर्तुं शक्नोति यदि भवान् गभीरं खनति तर्हि प्रौद्योगिक्याः अर्थः च प्राप्स्यति उत्पादाः, यत् अवश्यमेव एप्पल् उत्पादानाम् उल्लेखं करोति। अतः भवन्तः पश्यन्ति यत् भवन्तः एतान् मेटा-अर्थान् शब्देन सह अन्वेष्टुं शक्नुवन्ति, ततः भवन्तः एतां पद्धतिं विशालभाषाप्रतिरूपं यावत् विस्तारयितुं शक्नुवन्ति ।

अन्येषु शब्देषु, वयं विशालं भाषाप्रतिरूपं ज्ञात्वा आदर्शे केचन मेटा-अर्थाः अन्वेष्टुं शक्नुमः ततः तत् उद्घाटयितुं प्रयत्नः कर्तुं शक्नुमः । भवन्तः एकं विशालं भाषाप्रतिरूपं प्राप्नुवन्ति, यस्य वस्तुतः बहवः स्तराः सन्ति ।

प्राथमिकस्तरस्य "शब्दविविधता" इति घटना प्रकटिता भविष्यति । यथा, आङ्ग्लभाषायां "वाम" इति शब्दः अस्ति प्रथमेषु कतिपयेषु स्तरेषु ।

मध्यावस्थायां भवन्तः पश्यन्ति यत् केचन नूतनाः अर्थाः उद्भवन्ति। तस्मिन् समये वयं चिन्तितवन्तः यत् अतीव रोचकं वस्तु "एककरूपान्तरणम्" इति एकदा भवन्तः किलोमीटर्-मात्रं माइल-रूप्यकाणि परिवर्तयितुम् इच्छन्ति, तथा च फारेनहाइट्-तः सेल्सियस-पर्यन्तं तापमानं सक्रियं भविष्यति, एषः अर्थः अपि उद्घाटितः भविष्यति एवं प्रकारेण अस्य मेटा-अर्थस्य अनेके समानाः स्तराः।

यथा यथा भवन्तः अधिकं गच्छन्ति तथा तथा भवन्तः अपि पश्यन्ति यत् एतेषु मेटा-अर्थेषु एकः प्रतिरूपः अस्ति यत् यदा सन्दर्भे पुनरावृत्तिः अर्थः दृश्यते तदा सः सक्रियः भविष्यति . अवश्यं, एते विचाराः सर्वथा नवीनाः न सन्ति, तेषां वस्तुतः दृश्यप्रतिमानयोः इतिहासः अस्ति यथा, मैथ्यू ज़ेलरस्य अनन्तरं केचन एतादृशाः अन्वेषणाः अभवन् ।

"सिलिकन वैली १०१": १.एतां चिन्तनपङ्क्तिम् अनुसृत्य यदि वयं जानीमः यत् तस्य भागः कथं कार्यं करोति तर्हि अभियांत्रिकीदृष्ट्या तस्य बहु अनुकूलनं कर्तुं शक्नुमः वा?

चेन् युबेई : १.आम्, एषः अतीव उत्तमः प्रश्नः अस्ति। अहं मन्ये यत् कस्यापि सिद्धान्तस्य तुल्यकालिकरूपेण उच्चा आवश्यकता अस्ति यत् सः अभ्यासस्य मार्गदर्शनं कर्तुं शक्नोति अतः यदा वयं भाषाप्रतिमानं शब्दावलीप्रतिपादनं च कुर्वन्तः आसन् तदा अस्माकं एकं लक्ष्यं आसीत् यत् अस्माभिः तत् अवगत्य, किं वयं क्रमेण एतान् आदर्शान् अनुकूलितुं शक्नुमः ? वस्तुतः सम्भवति ।

यथा, यदि भवान् बृहत्भाषाप्रतिरूपे मेटा-अर्थं प्राप्नोति तर्हि सः कञ्चन मेटा-अर्थं दृष्ट्वा सक्रियः भविष्यति, तर्हि एतत् न्यूरॉन् भेदकरूपेण उपयोक्तुं शक्यते, तथा च भवान् एतत् किमपि उपयोक्तुं शक्नोति केचन कार्याणि कर्तुं एतेषां मेटा-अर्थानाम् परिवर्तनेन आदर्शस्य पूर्वाग्रहः समायोजितः भवति ।

इदं यत् यदि अहं तत् द्रष्टुं शक्नोमि तर्हि अहं तत् समायोजयितुं शक्नोमि। अधुना एन्थ्रोपिक् इत्यनेन अपि तथैव कार्यं कृतम्, यत् भाषाप्रतिरूपे विद्यमानाः केचन पूर्वाग्रहाः अन्वेष्टुं, ततः प्रतिरूपं अधिकं न्याय्यं सुरक्षितं च कर्तुं तस्मिन् केचन परिवर्तनानि कर्तुं

"सिलिकन वैली १०१": १.मया दृष्टं यत् OpenAI इत्यनेन गतवर्षे अपि अध्ययनं कृतम्, यस्मिन् GPT4 इत्यस्य उपयोगेन GPT2 इत्यस्य व्याख्यानं कृतम्, GPT2 इत्यस्य कार्यं कथं भवति इति द्रष्टुं च। यथा, तेषां ज्ञातं यत् १८०० तमे वर्षे अमेरिकादेशस्य इतिहाससम्बद्धानां सर्वेषां वस्तूनाम् उत्तरं दत्त्वा GPT 2 इत्यस्य न्यूरॉन् सक्रियः भविष्यति line 12. सक्रियः भवति।

यदि चीनीभाषायाः उत्तरं ददाति सः न्यूरॉन् निष्क्रियः भवति तर्हि तस्य चीनीभाषायाः अवगमनक्षमता महतीं न्यूनीभवति । परन्तु न्यूरॉन् यथा दूरं पृष्ठतः भवन्ति, उदाहरणार्थं यदा न्यूरॉन्साः प्रायः २००० पङ्क्तयः प्राप्नुवन्ति तदा तेषां समग्रविश्वसनीयता बहु न्यूनीभूता अस्ति । किं भवता तेषां संशोधनं लक्षितम् ?

OpenAI शोधः : GPT4 GPT2 न्यूरॉन्सस्य व्याख्यां करोतु

चेन् युबेई : १.अहम् अद्यापि एषः लेखः न पठितवान्, परन्तु एषा पद्धतिः मस्तिष्कस्य न्यूरॉन्-इत्यस्य शल्यक्रियायाः सदृशी अस्ति । इदानीं तुल्यम् यदि तंत्रिकाजालं भवति तर्हि अस्य जालस्य अर्थः अस्ति यत् एकस्मिन् अर्थे एतत् पूर्णतया विकीर्णं न भवति अपितु स्थानीयं अस्तित्वं अन्वेष्टुं शक्नोति, तर्हि तस्मिन् केचन क्रियाः कर्तुं शक्यन्ते यथा - यदि कश्चन न्यूरॉन् छिन्नः भवति तर्हि तस्य क्षमतायाः कश्चन भागः तुल्यकालिकरूपेण नष्टः इति भवन्तः चिन्तयितुं शक्नुवन्ति ।
वस्तुतः जनानां विषये अपि तथैव भवति यथा मिर्गीरोगेण पीडितस्य शल्यक्रियायाः अनन्तरं केचन भाषाबाधाः भवितुम् अर्हन्ति, परन्तु सिद्धान्ततः एतत् समानं न दृश्यते

"सिलिकन वैली १०१": १.OpenAI तथा Anthropic इत्येतत् सम्प्रति बृहत् मॉडल् इत्यस्य व्याख्यानक्षमतायाः अध्ययनं कुर्वतः सन्ति किं भवतः शोधस्य तेषां संशोधनस्य च मध्ये किमपि अन्तरम् अस्ति?

चेन् युबेई : १.वस्तुतः भविष्ये श्वेतपेटीप्रतिरूपस्य संशोधनं सफलं भविष्यति वा इति कोऽपि न जानाति, परन्तु मया पूर्वं मम पर्यवेक्षकेन सह चर्चा कृता, परन्तु एषः विषयः प्रयासयोग्यः इति सर्वे सहमताः सन्ति। यदि वयम् अस्मिन् क्षेत्रे पुनः आगच्छामः तर्हि अस्माकं संशोधनं यत् कर्तुम् इच्छति तत् वस्तुतः कृत्रिमबुद्धिं अवगन्तुं, अस्माकं अवगमनद्वारा च तस्याः पुनर्निर्माणं कर्तुं, ततः मौलिकरूपेण किमपि भिन्नं निर्मातुं च अतः अवलोकनम् अर्थात् व्याख्यात्वं केवलं साधनम् इति मन्ये।
अन्येषु शब्देषु, अहम् एतत् प्रतिरूपं उद्घाटयामि वा, एतान् प्रयोगान् करोमि वा, अथवा आदर्शे केचन समायोजनानि करोमि वा, अहं मन्ये एतानि केचन पद्धतयः वयं अवगमनप्रक्रियायां प्रयत्नशीलाः स्मः, परन्तु श्वेत-पेटिकायाः ​​विषये वस्तुतः किं महत्त्वपूर्णम् अस्ति model is अद्यापि पुनः संकेतं प्रति गन्तुं भवति। यतः मानवमस्तिष्कं वा यन्त्रं वा तेषां शिक्षणस्य सारः संकेताधारितः भवति ।

अस्माकं जगति काश्चन संरचनाः सन्ति, तेषां अपि एतेषां संरचनानां माध्यमेन शिक्षितव्यं भवति, एतानि एव संरचनानि ते शिक्षन्ति । अतः एतेषां संरचनानां पृष्ठतः नियमाः, तथैव तेषां प्रतिनिधित्वार्थं केचन गणितीयसाधनाः च अन्वेष्टुं शक्नुमः, ततः एतानि वस्तूनि पुनः व्यवस्थित्य भिन्नं प्रतिरूपं निर्मातुं शक्नुमः वा? यदि एतत् कर्तुं शक्यते तर्हि अस्माकं प्रणालीनां दृढता, सुरक्षा, विश्वसनीयता च सुधारयितुम् अपेक्षाः आनयिष्यन्ति इति अहं मन्ये।
तदतिरिक्तं तस्य कार्यक्षमता वर्धते। इदं किञ्चित् उष्मागतिकीशास्त्रस्य सिद्धान्तस्य सदृशं यत् वाष्पइञ्जिनस्य प्रथमं बहिः आगत्य तस्य परिवर्तनस्य समर्थनं भवति, अतः तस्य पूर्णशिल्पकारात् विज्ञानविषयस्य परिवर्तनस्य समर्थनं भवति तथैव अद्यत्वे प्रथमवारं अस्माकं दत्तांशस्य उपरि वाष्प-इञ्जिनं दृश्यते ।

"सिलिकन वैली १०१": १.अतः अधिकं ऊर्जा-कुशलं भविष्यति।

चेन् युबेई : १.ऊर्जासंरक्षणस्य विषये अहं भवद्भ्यः कतिपयानि रोचकानि उदाहरणानि दातुं शक्नोमि। प्रथमः बिन्दुः निश्चितरूपेण ऊर्जा-बचनम् अस्ति, यतः मस्तिष्कं २० वाट्-शक्ति-उपभोगेन बल्बस्य बराबरम् अस्ति, वर्तमान-सुपर-कम्प्यूटर्-मध्ये च दशलाख-वाट्-अधिकं भवितुम् अर्हति

द्वितीयः बिन्दुः अस्ति यत् यदि वयं प्रकृतौ विविधजीवानां विकासं पश्यामः तर्हि तेषां विकासदक्षता वस्तुतः अतीव उच्चा भवति । यथा - जम्पिंग् स्पाइडर इति विशेषः प्रकारः अस्ति अस्य केवलं कतिपयानि कोटिनि न्यूरॉन् सन्ति, परन्तु सः स्वस्य शिकारं ग्रहीतुं अतीव जटिलाः त्रिविमसमूहरेखाः निर्मातुम् अर्हति ।

कूदते मकर, विकिपीडिया

तथा च मम कृते एकं रोचकं वस्तु अस्ति यत् जनाः कियत् कुशलतया दत्तांशस्य उपयोगं कुर्वन्ति। Llama3 इत्यस्य वर्तमानदत्तांशमात्रा प्रायः १३ खरब टोकनपर्यन्तं प्राप्ता अस्ति । परन्तु व्यक्तिः स्वजीवने कियत् दत्तांशं प्राप्तुं शक्नोति ? मानातु यत् वयं प्रति सेकण्ड् ३० फ्रेम्स् इमेज् प्राप्तुं शक्नुमः, तथा च दैनिकः अधिग्रहणसमयः १२ घण्टाः भवति, तथा च वयं २० वर्षाणि यावत् कुर्मः, तदा वयं सम्भवतः १० अरब टोकन्स् प्राप्तुं शक्नुमः, तथा च पाठः प्रायः समानः प्राप्तुं शक्यते दत्तांशः बृहत् मॉडलस्य अपेक्षया बहु लघुः भवति ।
अतः प्रश्नः अस्ति यत् एतावता अल्पमात्रायां दत्तांशद्वारा जनाः एतादृशीम् प्रबलं सामान्यीकरणक्षमतां कथं प्राप्नुवन्ति? मानवमस्तिष्कस्य कार्यक्षमतायाः विषये एतत् मया आश्चर्यजनकं दृश्यते।

"सिलिकन वैली १०१": १.किं बृहत् आदर्शाः कियत् कार्यं कुर्वन्ति इति उद्घाटयितुं कठिनतरं वा मानवमस्तिष्कं कथं कार्यं करोति इति उद्घाटयितुं वा? मम कृते कठिनं ध्वन्यते।

चेन् युबेई : १.उभयोः स्वकीयाः कष्टाः सन्ति, परन्तु उपसर्गेण समानाः सन्ति । मानवमस्तिष्कं वा विशालभाषाप्रतिरूपं वा, वयं तस्य अवलोकनं कर्तुं प्रयत्नशीलाः स्मः, तस्य प्रतिक्रियां च द्रष्टुं प्रयत्नशीलाः स्मः।

एषा पद्धतिः वस्तुतः १९८० तमे दशके शरीरविज्ञानस्य नोबेल् पुरस्कारं प्राप्तवन्तौ डेविड् ह्युबेल्, टोर्स्टन् वेइसेल् च इत्येतयोः दृश्यप्रकोष्ठस्य विषये संशोधनात् द्रष्टुं शक्यते ते एकं सरलं कोशिकाम् अवाप्तवन्तः तथा च एते न्यूरॉन् जनाः किमपि दृष्ट्वा आवेगं जनयन्ति इति अध्ययनं कर्तुं प्रयतन्ते स्म, तथा च यदा ते भिन्नानि वस्तूनि पश्यन्ति तदा न्यूरॉन्सस्य भिन्नप्रतिक्रियास्थितीनां विश्लेषणं कुर्वन्ति, यथा यदा ते सर्वथा प्रतिक्रियां न ददति तथा च यदा ते अतीव उत्साहिताः भवन्ति। , ततः ते न्यूरॉनस्य Receptive क्षेत्रं प्राप्नुवन्।

१९८१ तमे वर्षे शरीरविज्ञानस्य अथवा चिकित्साशास्त्रस्य नोबेल् पुरस्कारविजेता डी.एच्.हुबेल्, टी.एन.वीसेल् च

अद्यत्वे बृहत्भाषाप्रतिमानानाम् अस्माकं अध्ययनं वस्तुतः समानं भवति, ततः वयं भिन्नानि निवेशानि अन्विष्यामः, ततः प्रतिरूपस्य अन्तः के के न्यूरॉन्साः केषां निवेशानां विषये रुचिं लभन्ते इति अवगच्छामः । परन्तु अद्यापि भेदाः सन्ति।

प्रथमः अन्तरः अस्ति यत् मानवमस्तिष्कस्य अवलोकनस्य बहवः सीमाः सन्ति भवेत् तत् प्लग-इन् इलेक्ट्रोड्-माध्यमेन वा मस्तिष्क-कम्प्यूटर-अन्तरफलक-विधिना तथापि बृहत्-भाषा-प्रतिमानानाम् एकः स्वाभाविकः लाभः अस्ति यत् अवलोकन-विधयः अधुना सीमिताः न सन्ति a better method, भवन्तः दीर्घकालं यावत् तस्य विश्लेषणं कर्तुं शक्नुवन्ति, अपि च भवन्तः केषाञ्चन विभेदकपद्धतीनां माध्यमेन मॉडलस्य अधिकं विश्लेषणं कर्तुं शक्नुवन्ति ।

परन्तु तस्य दोषः अस्ति यत् बृहत् आदर्शानां क्षमता मस्तिष्कस्य अपेक्षया दूरं न्यूना भवति, विशेषतः बृहत् भाषाप्रतिमानानाम् अपेक्षया, यतः सः केवलं भाषातः एव जगत् शिक्षते, अतः तस्य जगतः अवगमनं अपूर्णं भवति, यथा व्यक्तिः नास्ति भाषां विहाय अन्येन्द्रियाणि।

तदपेक्षया मस्तिष्कं अधिकानि आयामीसंकेतानि संसाधितुं शक्नोति, इन्द्रियाणि च अतीव समृद्धानि भवन्ति । कदाचित् वयं प्रश्नं चिन्तयामः, भाषा पूर्णा अस्ति वा? यदि अन्येन्द्रियाणां समर्थनं नास्ति तर्हि भाषायां सर्वाणि अवधारणाः स्वतन्त्रतया विद्यन्ते वा, अथवा यथार्थबोधं प्राप्तुं अन्येन्द्रियाणां समर्थनस्य आवश्यकता अस्ति वा।

यथा, यदि "शीतलनयंत्रम्" इति वस्तु वास्तविकजगति उष्णशीतभावनाभिः सह सम्बद्धं न भवति, अपितु केवलं द्वारं भवति इत्यादीनां सांख्यिकीयलक्षणानाम् वर्णनं करोति तर्हि एतत् वर्णनं अपूर्णं भविष्यति

"सिलिकन वैली १०१": १.अतः वस्तुतः मस्तिष्कस्य तुलने वर्तमानस्य विशालस्य आदर्शस्य अद्यापि बहु अभावः अस्ति । परन्तु यतः वयं तत् विच्छिद्य अध्ययनं कर्तुं शक्नुमः, तथापि मस्तिष्कस्य रहस्यं उद्घाटयितुं महत्त्वाकांक्षायाः अपेक्षया किञ्चित् दूरं गच्छति इति भवन्तः मन्यन्ते।

चेन् युबेई : १.बृहत् भाषाप्रतिरूपस्य अवगमनस्य कठिनता अस्ति यत् भवतः तस्य अवलोकनस्य बहवः उपायाः सन्ति, भवतः अधिकं अवगन्तुं शक्यते च । यथा - यदि यन्त्रद्वयं भवति तर्हि एकं यन्त्रं पूर्णतया अवलोकनीयं अपरं च आंशिकरूपेण अवलोकनीयं भवति तर्हि सहजतया यत् यन्त्रं पूर्णतया अवलोकनीयं तत् सुकरं भवति अवश्यं अस्य केचन क्षमताः सन्ति ये अस्मिन् यन्त्रे नास्ति, अतः मानवमस्तिष्कस्य किञ्चित् अवगमनं प्रतिस्थापयितुं न शक्नोति ।

"सिलिकन वैली १०१": १.युबेई पूर्वं तंत्रिकाविज्ञानस्य अध्ययनं कृतवान् इति अपि प्रेक्षकाणां समक्षं परिचयं करोमि। अतः किं भवन्तः मन्यन्ते यत् भवतः विषयपृष्ठभूमिः एआइ-क्षेत्रे वर्तमानसंशोधनस्य भवतः सहायकं भविष्यति? किं केचन अन्तरविषयसंशोधनपद्धतयः सन्ति ये परस्परं शिक्षितुं शक्यन्ते?

चेन् युबेई : १.अहं वस्तुतः कम्प्यूटेशनल् न्यूरोसाइन्स इत्यस्मिन् प्रमुखः नास्मि । मम स्नातकपदवी सिंघुआ विश्वविद्यालये इलेक्ट्रॉनिक्सविभागे, बर्कलेनगरे विद्युत्-इञ्जिनीयरिङ्ग-कम्प्यूटर-विज्ञानविभागे च आसीत् तथापि तस्मिन् समये अहं यस्मिन् शोध-संस्थाने कार्यं कुर्वन् आसीत् तत् तंत्रिकाविज्ञान-संशोधन-संस्थानम् आसीत्, अतः मम मार्गदर्शकः कम्प्यूटेशन-विषये विशेषज्ञः आसीत् तंत्रिका विज्ञान।

अधुना एव प्रश्नस्य विषये अहं मन्ये यत् तंत्रिकाविज्ञानस्य अध्ययनं प्रायः मम कृते प्रेरणादायकं भवति। यतः यदा भवन्तः प्रकृतौ एताः व्यवस्थाः जानन्ति, ते किं कर्तुं शक्नुवन्ति इति च भवन्तः भिन्नाः विचाराः स्युः, हस्ते स्थितां समस्यां पुनः पश्यन्ति च ।

यथा - चित्रं द्विविधं निवेशसंकेतं भवति, तस्य पिक्सेलाः क्षैतिजाः लम्बाः च भवन्ति, ततः तत् जालं निर्माति । परन्तु मानवस्य रेटिना एवं न दृश्यते । प्रथमं भिन्न-भिन्न-अनुभूति-युक्तः ग्राहकः अतीव सघनः किन्तु अत्यन्तं नियमितः न भवति ।
यदा भवान् एतादृशस्य निवेशसंकेतस्य सम्मुखीभवति तदा सर्वप्रथमं वयं येषु अभ्यस्ताः स्मः ते कन्वोल्यूशनल् न्यूरल नेटवर्क् असिद्धाः भवन्ति, यतः कन्वोल्यूशन अपि अत्र परिभाषितं नास्ति अतः यदा वयं जैविकतन्त्रेषु एतां स्थितिं पश्यामः तदा वयं पुनर्विचारं करिष्यामः यत् एते तथाकथिताः भ्रमाः कुतः आगच्छन्ति ।

"सिलिकन वैली १०१": १.अतः भवन्तः विधिं पुनर्विचारं करिष्यन्ति, किं सम्यक् ? किम् एवं कार्यान्वितं कर्तव्यम् ?

चेन् युबेई : १.आम्‌। मानातु यत् भवन्तः एकस्मिन् दिने जागृताः भवन्ति तदा भवतः सर्वे न्यूरॉन्साः बाधिताः भवन्ति किं भवन्तः अद्यापि जगत् अवगन्तुं शक्नुवन्ति? यतः भवन्तः यत् पश्यन्ति तत् चित्रं न भवति, एतत् कर्तुं भवन्तः कीदृशं पद्धतिं प्रयोक्तुं न शक्नुवन्ति ।

यद्यपि अस्माभिः एतस्याः समस्यायाः सम्पूर्णतया समाधानं न कृतम् तथापि वस्तुतः वयं एकं पदं अग्रे गतवन्तः । यद्यपि मम सर्वे न्यूरॉन्साः बाधिताः सन्ति अर्थात् अस्माकं ग्राहकप्रतिबिम्बे पिक्सेलाः बाधिताः सन्ति तथापि समीपस्थपिक्सेलयोः मध्ये किञ्चित् सम्बन्धः अस्ति । यथा, यदा वयं चित्रं पश्यामः तदा वयं पश्यामः यत् यदि कश्चन पिक्सेलः रक्तः भवति तर्हि परितः पिक्सेल् रक्तवर्णस्य अधिका सम्भावना भवति ततः अस्य सम्बन्धस्य माध्यमेन, भवान् एतान् पिक्सेलान् पुनः मित्राणि अन्वेष्टुं शक्नोति, ततः भवान् तत्सदृशं स्थापयितुं शक्नोति पिक्सेल एकत्रितरूपेण केषुचित् सम्बन्धेषु स्वयमेव संगठितः भवति ।

ततः अस्मिन् समये बृहत्भाषाप्रतिरूपे Transformer इत्यादिसंरचनां योजयित्वा वयम् अस्य चित्रस्य पुनः प्रतिनिधित्वं कर्तुं शक्नुमः, अस्य प्रतिनिधित्वस्य प्रदर्शनं च बहु उत्तमम् अस्ति अस्माकं वर्तमानकाले प्रकृत्या प्रेरितानां केषाञ्चन अभियांत्रिकी-प्रथानां पुनः परीक्षणं कृत्वा ततः केचन भिन्नाः पद्धतयः प्रस्ताविताः इति एतत् उदाहरणम् अस्ति ।

Black Box Model, Firefly मार्गेण AIGC इमेज

"सिलिकन वैली १०१": १.अद्यापि बृहत् एआइ-माडल-विषये संशोधनस्य मानवमस्तिष्कस्य तंत्रिकाविज्ञानस्य च बहु साम्यम् अस्ति । किं तंत्रिकावैज्ञानिकाः भविष्यन्ति ये भवद्भिः सह क्षेत्रान्तरसंशोधनार्थं स्वदृष्ट्या सहकार्यं करिष्यन्ति?

चेन् युबेई : १.वस्तुतः अनेके तंत्रिकावैज्ञानिकाः, सांख्यिकीविदः, गणितज्ञाः च सन्ति ये प्राकृतिकसंकेतेषु काश्चन संरचनाः अवगन्तुं इच्छन्ति, तथा च मस्तिष्के न्यूरॉन्साः कथं कार्यं कुर्वन्ति इति विषये अपि ध्यानं ददति, ततः द्वयोः संयोजनं कृत्वा संकेतानां केचन न्यूनतमप्रतिपादनानि प्रस्तावितुं प्रयतन्ते

यथा - मस्तिष्के भवन्तः एकां घटनां प्राप्नुयुः अर्थात् यद्यपि बहवः न्यूरॉन्साः सन्ति तथापि एकस्मिन् समये कार्यं कुर्वन्तः न्यूरॉन्साः वस्तुतः अतीव विरलाः सन्ति । यथा - यदि १० लक्षं न्यूरॉन् सन्ति तर्हि कतिपयानि सहस्राणि एव कार्यं कुर्वन्ति स्यात् ।

अस्य आधारेण प्रारम्भिकेषु वर्षेषु तंत्रिकाविज्ञानस्य क्षेत्रे विरलसङ्केतनविधिः प्रस्ताविता आसीत् अर्थात् अस्मिन् उच्चस्तरीयसंकेते केचन विरलनिम्न-आयामीप्रतिपादनानि प्राप्यन्ते वा? अस्य विचारस्य आधारेण निर्मितः एल्गोरिदम् मस्तिष्के भवता अवलोकितानां न्यूरॉन्-प्रतिनिधित्वस्य अत्यन्तं सदृशः अस्ति, अतः प्रारम्भिकगणना-न्यूरोविज्ञाने एषा अनिरीक्षितसफलता अस्ति

अद्यत्वे अस्माकं सम्पूर्णं शोधक्षेत्रं प्राकृतिकसंकेतसांख्यिकीयम् इति नाम अस्ति तथापि बृहत्प्रतिमानानाम् अपेक्षया इदं श्वेतपेटी इव सरलं नास्ति यथा आदर्शाः वस्तुतः तुल्यकालिकरूपेण मन्दः भवति । अहं वस्तुतः मन्ये यत् एकतः समस्या जटिला इति कारणेन भवितुम् अर्हति, परन्तु अन्यतः अस्मिन् दिशि निवेशं कुर्वन्तः जनाः तुल्यकालिकरूपेण अल्पाः एव सन्ति इति कारणेन अपि अस्ति

02 कृष्णपेटी मॉडलस्य "वर्तमानं ओवरटेकिंग्"

"सिलिकन वैली १०१": १.सरलतया वक्तुं शक्यते यत् इदानीं श्वेतपेटीमाडलस्य अध्ययनं कुर्वन्तः जनाः अत्यल्पाः सन्ति । परन्तु बृहत्-माडलस्य उद्भवात् पूर्वं पारम्परिक-यन्त्र-शिक्षणम् अपि श्वेत-पेटी-माडल-संशोधनस्य वर्गे पतति वा ?

चेन् युबेई : १.अहं मन्ये एतत् कथनं सम्यक् इति मन्तव्यं एते पूर्वयन्त्रशिक्षणप्रतिमानाः तुल्यकालिकरूपेण सरलाः तुल्यकालिकरूपेण च अवगम्यन्ते।

"सिलिकन वैली १०१": १.अतः किमर्थं सम्पूर्णस्य कृष्णपेटीप्रतिरूपस्य वर्तमानसंशोधनप्रगतिः कोणेषु श्वेतपेटीप्रतिरूपं अतिक्रमितुं समर्था अस्ति, एतावत् शीघ्रम्?

चेन् युबेई : १.यदा एषः प्रश्नः पृष्टः भवति तदा वयं उत्तरं दातुं पूर्वं क्षणं यावत् घबरामः।

"सिलिकन वैली १०१": १.किमर्थं घबराहटः ?


चेन् युबेई : १.यतो हि एषः प्रश्नः अतीव तीक्ष्णः अस्ति, वस्तुतः एषः पृच्छति यत् एषः श्वेतपेटीप्रतिरूपः अस्ति वा, अथवा अवगम्यमानः मार्गः अस्ति यत् अस्माभिः त्यक्तव्यम् इति। अस्माकं युगात् किं वयं एआइ-क्षेत्रे विज्ञानस्य अध्ययनं न करिष्यामः, भविष्ये सर्वं अनुभवजन्यविषयः भविष्यति वा? परन्तु अहम् अद्यापि तथैव न मन्ये ।
अधुना एव भवतः प्रश्नं प्रति गत्वा अस्मिन् क्रमे किं सम्यक् अभवत् ? प्रथमं बिन्दुः अस्ति यत् कृष्णपेटीमाडलस्य सामानं न्यूनं भवति । यदि भवान् इच्छति यत् एषा पद्धतिः कार्यं करोतु तथा च एषा पद्धतिः व्याख्यातुं शक्यते तर्हि अत्यधिकाः आवश्यकताः सन्ति ततः कृष्णपेटीप्रतिरूपं प्रथमं कार्यं कर्तुं ददाति ।

द्वितीयं कारणं सर्वैः तुल्यकालिकरूपेण उपेक्षितं भवति, यत् प्रवृत्तिविरुद्धं दत्तांशस्य वृद्धिः, अथवा स्केलस्य विस्तारः ।

रिचर्ड सटनः पूर्वं एकं ब्लोग् लिखितवान् तथा च उल्लेखितवान् यत् विगत २० वर्षेषु किमपि न भग्नम् अस्ति, यत् यदा अस्माकं समीपे अधिकानि आँकडानि अधिकानि च गणनानि सन्ति तदा अस्माभिः एतादृशाः एल्गोरिदम् अन्वेष्टव्याः ये यथार्थतया विस्तारं कर्तुं शक्नुवन्ति गच्छन्तु सर्वेषु एतत् प्रतिरूपं अन्वेष्टुम् दत्तांशः । अहं मन्ये एषः कृष्णपेटीप्रतिरूपस्य, अथवा अस्माकं वर्तमानस्य अनुभवजन्यप्रगतेः अतीव महत्त्वपूर्णः पक्षः अस्ति ।

अर्थात् यदा अस्माकं समीपे बृहत्तराः दत्तांशाः, उत्तमाः दत्तांशाः, अधिकानि गणनानि, बृहत्तराणि आदर्शानि च सन्ति तदा वयं अधिकं ज्ञातुं शक्नुमः । परन्तु यदि वयम् अस्मिन् विषये पुनः आगच्छामः तर्हि श्वेतपेटीप्रतिरूपे सर्वेषां अनुसरणं भवति, यत् आदर्शः एव सरलः भवितुमर्हति ।

Black Box ML तथा White Box ML इत्येतयोः मध्ये एकः तुलना

"सिलिकन वैली १०१": १.श्वेतपेटीमाडलाः किमर्थं सरलाः भवेयुः ? किं यदि अतिजटिलं भवति तर्हि तस्य परिकल्पना कठिना भविष्यति इति?
चेन् युबेई : १.आम्‌। वस्तुतः सिद्धान्तं कुर्वन् संक्षिप्तवस्तूनि एव अवगन्तुं शक्यन्ते, तस्य सरलीकरणं पुनः पुनः करणीयम् । परन्तु यदा जनाः प्रतिरूपस्य सरलतां अनुसृत्य भवन्ति तदा ते पुनः पुनः अतिसरलीकरणं अपि कर्तुं शक्नुवन्ति तदा आदर्शः दत्तांशस्य आकारस्य पूर्णतया वर्णनं कर्तुं न शक्नोति । ततः यदा अधिकदत्तांशः भविष्यति तदा आदर्शः निरन्तरं कर्तुं न शक्नोति, तस्य क्षमता च सीमितं भविष्यति ।

अतः अहं मन्ये यत् एषा अपि कठिनता अस्ति यस्याः सामना सर्वेषां कृते पूर्वं श्वेतपेटीमाडलस्य सरलमाडलस्य च अध्ययनकाले अभवत्। न केवलं कार्येण सह मॉडलं वहितुं आवश्यकम्, अपितु तस्य व्याख्यानीयं सामानं अपि आवश्यकम्, मम अपि आवश्यकता अस्ति यत् एतत् सरलं भवेत् यदा भवान् एतानि सर्वाणि वस्तूनि आनयति तदा भवान् पश्यति यत् एषः सामानः अतिभारवान् अस्ति। यदा भवन्तः अतिसरलीकरणं कुर्वन्ति तदा भवन्तः दोषान् प्रवर्तयन्ति, दोषाः च सञ्चिताः भविष्यन्ति, पश्चात् भवन्तः अग्रे गन्तुं न शक्नुवन्ति ।
"सिलिकन वैली १०१": १.परन्तु अधुना कृष्णपेटीमाडलस्य तीव्रविकासेन वयं पुनः तस्य समाधानस्य प्रयासं कर्तुं आरब्धाः स्मः ।
चेन युबेई:आम्‌। अस्मिन् च समये यदा वयं तस्य समाधानं कुर्मः तदा वयम् अस्य विषयस्य पुनः अवलोकनं कर्तुं शक्नुमः। अर्थात् अस्माभिः तत् स्तरं यावत् प्रतिरूपस्य पूर्णतया सरलीकरणस्य आवश्यकता नास्ति, अद्यापि जगतः जटिलतरपक्षस्य प्रतिनिधित्वं कर्तुं शक्नोति ।

परन्तु तत्सह, वयम् अद्यापि आशास्महे यत् एतत् तुल्यकालिकरूपेण अवगम्यते, अतः यदि एकस्मिन् दिने वयं श्वेत-पेटी-प्रतिरूपं प्राप्तुं शक्नुमः, तर्हि अहं मन्ये तस्मात् पूर्वं प्रत्येकं प्रयासः अतिसरलीकरणम् अस्ति, परन्तु वयं आशास्महे यत् प्रत्येकं सरलीकरणं अग्रे गन्तुं शक्नोति |. अस्माकं पूर्णतया श्वेतपेटीमाडलस्य निर्माणस्य अपि आवश्यकता नास्ति भवतु वयं श्वेतपेटीमाडलं निर्मातुम् अर्हति यत् बृहत् मॉडल इव शक्तिशाली नास्ति, परन्तु तत् तुल्यकालिकरूपेण सरलम् अस्ति ।
अस्माकं कृते शिक्षणस्य पृष्ठतः सारं अवगन्तुं सहायकं भवति, एषा अवगमनं च क्रमेण बृहत्प्रतिमानानाम् प्रशिक्षणस्य कार्यक्षमतां वर्धयितुं शक्नोति मया पूर्वं यान् इत्यनेन सह कार्यक्षमतायाः विषयेषु बहुवारं चर्चा कृता, यस्य अर्थः अस्ति यत् यदि अस्य पृष्ठतः सिद्धान्तः विकसितः भवति तर्हि वयं अभियांत्रिकी-अभ्यासस्य कार्यक्षमतां परिमाणस्य क्रमेण वर्धयितुं शक्नुमः इति
"सिलिकन वैली १०१": १.यान् इत्यस्य मतं यत् सः श्वेतपेटीप्रतिरूपं विकसितुं रोचते अथवा कृष्णपेटीप्रतिरूपं विकसितुं रोचते?
चेन् युबेई : १.यान् स्वस्य अभियांत्रिकीकौशलस्य कृते प्रसिद्धः वैज्ञानिकः अस्ति, अतः अद्यापि तस्य बहवः प्रयासाः प्रथमं एतत् वस्तु कार्यं कर्तुं प्रवृत्ताः सन्ति । परन्तु यान् श्वेत-पेटी-प्रतिरूप-संशोधनस्य समर्थनमपि करोति मम तस्य सह चर्चायां सः अयं मार्गः अन्वेषणीयः इति अनुभूतवान्, परन्तु सः न जानाति स्म यत् अतिमहत्वाकांक्षिणः लक्ष्यस्य कृते एषः मार्गः साध्यः भविष्यति वा इति, परन्तु कस्यचित् तत् कर्तव्यम् आसीत्
"सिलिकन वैली १०१": १.कृष्णपेटीप्रतिरूपं अभियांत्रिकीसमस्या इव अनुभूयते, श्वेतपेटिकप्रतिरूपं तु वैज्ञानिकरूपेण व्याख्यातव्यम् । यद्यपि व्यावसायिकीकरणस्य दृष्ट्या तस्य निवेश-निर्गम-अनुपातः तावत् अधिकः नास्ति तथापि यदि अन्ततः एतत् वस्तु निर्मातुं शक्यते तर्हि एआइ इत्यस्य सुरक्षायाः तस्य भविष्यस्य व्यावसायिक-अनुप्रयोगस्य च महत् मूल्यं भविष्यति
चेन् युबेई : १.व्यावसायिकीकरणस्य विषये अहं वस्तुतः मन्ये यत् मूलभूतं एआइ-संशोधनं कुर्वतां सर्वेषां मूल-अभिप्रायः मूल-अभिप्रायरूपेण किमपि अनुप्रयोगं न भवति, अपितु बुद्धि-विषये तुल्यकालिक-शुद्ध-जिज्ञासेन चालितं भवेत् तदा केचन प्रतिमानाः आविष्कृताः भवेयुः | , यत् क्रमेण अभियांत्रिकी-अभ्यासे सहायतां कर्तुं शक्नोति। संशोधनमेव कस्यचित् एकस्य अनुप्रयोगस्य कृते न निर्मितम्।

तदतिरिक्तं यदा वयम् एतत् श्वेत-पेटी-प्रतिरूपं एतस्य च परम-दक्षतायाः अनुसरणं कुर्मः तदा वयम् एकं प्रश्नम् अपि पृच्छामः अर्थात् इदानीं वयं यत् बृहत् भाषा-प्रतिरूपं निर्मामः तत् केवलम् एतादृशेन स्केल-माध्यमेन एव प्राप्तुं शक्यते वा, Is केवलं अधः गन्तुं कुशलम्? अहं न मन्ये। यतो हि मनुष्याः एतादृशं बृहत् परिमाणं दत्तांशं स्वीकुर्वितुं न शक्नुवन्ति, अतः अल्पमात्रायां दत्तांशैः सह तुल्यकालिकरूपेण उच्चसामान्यीकरणक्षमता कथं प्राप्तुं शक्यते इति अपि महत्त्वपूर्णः विषयः अस्ति यस्य विषये वयं अध्ययनं कुर्मः


"सिलिकन वैली १०१": १.एषा अपि समस्या भवितुमर्हति यस्याः अध्ययनं कृष्णपेटीप्रतिरूपविद्वद्भिः क्रियते। सम्प्रति के विद्वांसः विद्यालयाः च श्वेतपेटीप्रतिरूपस्य अध्ययनं कुर्वन्ति?

चेन् युबेई : १.सम्प्रति एआइ इत्यस्य मुख्यतया त्रीणि बलानि सन्ति । प्रथमं बलं एतेषां अभियांत्रिकीप्रतिमानानाम् अध्ययनस्य प्रक्रियायां अस्माभिः उत्पन्नस्य किञ्चित् अनुभवः, ततः तस्य कल्पनाकरणस्य च, यथा एन्थ्रोपिक्, ओपनएइ च अद्यतनकाले किं कर्तुं प्रवृत्तौ।

मानवीयसंशोधनम् : तंत्रिकाजालतः व्याख्यायोग्यविशेषताः निष्कासनम् क्लाउड् ३ सॉनेट्

द्वितीयं तु कम्प्यूटेशनल् न्यूरोसाइन्स् अस्ति यत् मानवमस्तिष्कं अवगन्तुं प्रयतते तथा च केचन स्मृतयः यथा भवितुं शक्नुवन्ति इति उपायान् अन्वेष्टुं प्रयतते।

अन्यः विचारधारा अस्ति यत् संकेतस्य मूलभूतसंरचनां गणितीयसांख्यिकीयदृष्ट्या अवलोकयितुं शक्यते । अवश्यं एतेषां त्रयाणां प्रकाराणां मध्ये बहु क्रॉसओवरः भविष्यति ।
"सिलिकन वैली १०१": १.भवान् कस्य विधायाः अस्ति ?
चेन् युबेई : १.वस्तुतः अहं न्यूनाधिकं त्रयोऽपि समूहैः प्रभावितः अस्मि । यदा अहं बर्कले-नगरे आसम् तदा मम मार्गदर्शकः शिक्षकः च मा यी सर्वे तंत्रिकाविज्ञानस्य गणितीयसांख्यिकीयस्य च विद्यालयस्य आसन्, यान् च अभियांत्रिकीशास्त्रे अधिकं प्रशिक्षितः आसीत् । अहम् अपि मन्ये एतानि त्रीणि पद्धतयः स्वीकार्याः सन्ति, यतः ते अन्ते अस्मान् एकस्यामेव दिशि गन्तुं नेष्यन्ति ।
"सिलिकन वैली १०१": १.का दिशा समाना ? इदानीं किमपि चरणबद्धं परिणामं भवति वा ?
चेन् युबेई : १.अन्तिमः सोपानः आदर्शस्य अवगमनम् अस्ति । पूर्वं केचन चरणबद्धाः परिणामाः अभवन्, यथा वयं द्वौ वा त्रयः वा स्तराः अपि केचन जालपुटाः कर्तुं शक्नुमः वा, ते च प्रत्येकस्मिन् स्तरे किं शिक्षन्ति इति द्रष्टुं शक्नुमः । अन्ते मया ज्ञातं यत् वास्तवतः कस्यापि संख्यायाः प्रतिनिधित्वं कर्तुं शक्यते यदि भवान् तस्याः प्रतिनिधित्वं कर्तुम् इच्छति तर्हि तस्य सर्वाणि आघातानि ज्ञास्यति, ततः समानानि आघातानि एकत्र संयोजयिष्यति, ततः भवान् प्रतिनिधित्वस्य अग्रिमस्तरं, स्तर-स्तरं निर्मातुम् अर्हति , अन्ततः संख्यां प्राप्नोत् ।
"सिलिकन वैली १०१": १.किं भवतः वर्तमानसंशोधनेन कृष्णपेटीप्रतिरूपस्य अनुकूलनं भविष्यति?

चेन् युबेई : १.प्रथमं यथा यथा भवतः तस्य अवगमनं गभीरं भवति तथा तथा भवन्तः कृष्णपेटीप्रतिरूपस्य अनुकूलनं कृत्वा अधिकं कार्यक्षमतां कर्तुं शक्नुवन्ति । द्वितीयं भिन्न-भिन्न-कृष्ण-पेटी-माडल-एकीकरणम्, अतः अनावश्यक-अपव्ययस्य बहु न्यूनीकरणं भवति । तत्सह मम प्रयोगशालायाः अन्यः कार्यस्तम्भः अस्ति, यः न केवलं बोधस्य अपितु नियन्त्रणस्य अपि अध्ययनम् अस्ति ।

यदा भवन्तः एतेभ्यः बृहत्भाषाप्रतिमानानाम् विश्वेन सह अन्तरक्रियायाः क्षमताम् ददति तदा नियन्त्रणप्रणाल्यां समानसामान्यीकरणक्षमताम् प्राप्तुं शक्नुवन्ति वा? किम् इत्यर्थः ? अर्थात् बोधव्यवस्थायां भवन्तः पश्यन्ति यत् अहं सेबं, नाशपाती, ततः आड़ूः च शिक्षितवान् यतः पूर्वं मया सेबस्य, नाशपातीयाः च एतादृशी अवधारणा ज्ञाता, अतः अहं शीघ्रमेव आड़ूस्य अवधारणां ज्ञातुं शक्नोमि।

अतः नियन्त्रणक्षेत्रे अपि तथैव कार्यप्रदर्शनं प्राप्तुं शक्यते वा ? यथा - यदि रोबोट् अग्रे गन्तुं शिक्षते, स्थाने कूर्दितुं च शिक्षते तर्हि शीघ्रमेव सः रोबोट् इति परिणतुं शक्नोति यत् अग्रे कूर्दति, एकस्मिन् समये च गच्छति?


"सिलिकन वैली १०१" ।: यदि भवान् निष्कर्षं दातुं पृष्टः तर्हि किं भवान् मन्यते यत् बृहत् मॉडल्-सञ्चालनस्य रहस्यं अनलॉक् कर्तुं श्वेत-पेटी-माडल-संशोधनस्य उपयोगेन वर्तमान-प्रगति-पट्टिका कुत्र अस्ति?
चेन् युबेई : १.वस्तुतः अस्माकं कोऽपि न जानाति यत् एषा प्रगतिपट्टिका कियत् दीर्घा अस्ति इति अहं मन्ये यत् एतत् वस्तुतः अस्मात् लक्ष्यात् दूरम् अस्ति। रेखीयविकासः न भवति, क्वाण्टमकूदः इव अधिकं भवितुम् अर्हति । यदा नूतना अवगमनं बहिः आगच्छति तदा भवन्तः तत्क्षणमेव महत् पदं अग्रे गन्तुं शक्नुवन्ति।

यदि भवान् श्वेत-पेटी-ChatGPT कर्तुम् इच्छति तर्हि अहं मन्ये एतत् अद्यापि अत्यन्तं दूरम् अस्ति, परन्तु वयं एकं सुन्दरं, पूर्णतया अवगम्यमानं प्रतिरूपं निर्मातुं शक्नुमः यत् तत्कालीनस्य AlexNet इत्यस्य क्षमतां पुनः प्रदर्शयितुं शक्नोति। इदं प्रतिरूपं Imagenet-परिचयं कर्तुं शक्नोति वयं अवगन्तुं शक्नुमः यत् एतत् प्रत्येकं पदं कथं करोति, कथं पदे पदे बिडाल-कुक्कुर-रूपेण परिणमति, ततः अस्य बिडालस्य श्वानस्य च संरचना का उत्पद्यते ।

इमेजनेट् द्वारा प्रयुक्तस्य वर्डनेट् इत्यस्य उदाहरणम्

"सिलिकन वैली १०१": १.इमेजनेट्-परिचयः श्वेत-पेटी अस्ति वा कृष्ण-पेटी?

चेन् युबेई : १.अद्यापि वयं सम्यक् न आविष्कृतवन्तः यत् एतत् कथं कार्यं करोति। मैथ्यू ज़ेलर-रोब-फर्गस्-इत्यनेन कृतानां केषाञ्चन प्रारम्भिक-दृश्यीकरणानां तथा च अनेकेषां शोधकर्तृणां किञ्चित् अवगमनं आसीत्, परन्तु कोऽपि एतादृशं प्रतिरूपं निर्मातुं न शक्तवान् यत्र वयं प्रत्येकं पदं अवगन्तुं शक्नुमः तथापि सम्यक् कार्यं कर्तुं शक्नुमः |.
"सिलिकन वैली १०१": १.अतः भवतु श्वेतपेटीप्रतिरूपस्य लक्ष्यं मञ्चनं करणीयम्। यथा, प्रथमं सोपानं भवति यत् ImageNet कथं कार्यं करोति इति व्याख्यातुं शक्नुमः, रहस्यस्य समाधानं कृत्वा वयं व्याख्यातुं शक्नुमः यत् केचन लघु मॉडल् कथं कार्यं कुर्वन्ति, यथा GPT 4 इत्यस्य उपयोगेन GPT 2 कथं कार्यं करोति इति व्याख्यातुं शक्नुमः, ततः शनैः शनैः बृहत्तराणि मॉडल् कथं कार्यं कुर्वन्ति इति व्याख्यातुं शक्नुमः मॉडल कार्यं करोति।
चेन् युबेई : १.आम्‌। अहं मन्ये अद्यापि एषा प्रक्रिया बहुकालं यावत् भवति, अस्मिन् दिशि निवेशं कर्तुं अधिकान् जनानां आवश्यकता वर्तते। यतः सम्प्रति अधिकांशं कार्यम् अभियांत्रिकीक्षेत्रे एव अस्ति । यदि वयं विद्यालयेषु स्थापयामः, तर्हि भवतः वस्तुतः केचन मौलिकविचाराः आवश्यकाः, भवन्तः स्केल-पर्यन्तं गच्छन्ति, अहं च स्केल-पर्यन्तं गमिष्यामि इति वक्तुं स्थाने, तर्हि सर्वे स्केल-रूपेण सन्ति, अन्ते च कोऽपि भेदः नास्ति, सर्वं निर्भरं भवति who कः यन्त्रः श्रेष्ठः कस्य च अधिकः दत्तांशः अस्ति?

03 यान् लेकुन् विषये अहं यत् जानामि

"सिलिकन वैली १०१": १.तदनन्तरं भवद्भिः सह भवतः पोस्टडॉक्टरेल् सल्लाहकारः यान् लेकुन् इत्यनेन सह चर्चां कर्तुम् इच्छामि। प्रथमं यान् लेकुन् इत्यस्य परिचयं करोमि सः फ्रांसीसी कम्प्यूटर वैज्ञानिकः अस्ति ". "अन्तर्जालस्य पिता"।

लेकुन् सम्प्रति मेटा-संस्थायाः मुख्यः एआइ-वैज्ञानिकः अस्ति, न्यूयॉर्क-विश्वविद्यालये प्राध्यापकरूपेण च कार्यं करोति । सः १९८० तमे दशके कन्वोल्यूशनल् न्यूरल नेटवर्क् (CNN) इत्यस्य अग्रणीः अभवत्, एषा प्रौद्योगिकी आधुनिकसङ्गणकदृष्टेः आधारः अभवत् । लेकुन्, जेफ्री हिण्टन्, योशुआ बेङ्गियो च सह मिलित्वा गहनशिक्षणस्य अग्रणीकार्यस्य कृते २०१८ तमस्य वर्षस्य ट्युरिंग् पुरस्कारं प्राप्तवान् ।
किं भवान् अस्माकं अ-तकनीकी-मित्रेभ्यः यान्-महोदयस्य मुख्य-वैज्ञानिक-संशोधन-परिणामान् व्याख्यातुं शक्नोति, सः किमर्थम् एतावत् प्रसिद्धः इति च?

चेन् युबेई : १.यान् १९८० तमे दशके आरभ्य तंत्रिकाजालस्य एआइ-क्षेत्रस्य अध्ययनं कुर्वन् अस्ति तथा च अनेकेषां शिखरानाम्, गर्तानां च अनुभवं कृतवान् तथापि सः सर्वदा गहनशिक्षणजालस्य आग्रहं कृतवान् अस्ति तथा च सः अन्धकारस्य माध्यमेन गतः व्यक्तिः अस्ति

यथा २००० तमे वर्षे गहनशिक्षणसम्बद्धाः लेखाः प्रकाशयितुं अतीव कठिनम् आसीत् ।कियत् कठिनम् आसीत् ? यदि भवतः लेखे Neural अथवा Network इति शब्दः अस्ति तर्हि भवतः अस्वीकारस्य सम्भावना अतीव अधिका भवति यदि Neural Network अस्ति तर्हि मूलतः अङ्गीकृतः भविष्यति।

अतः तस्मिन् समये तेषां कृते अन्धकारमयः क्षणः आसीत्, वित्तपोषणम् अपि प्रभावितम् आसीत् । परन्तु ते अस्मिन् अन्धकारे धैर्यं धारयितुं कदापि न त्यक्तवन्तः, अन्ततः अस्मात् अन्धकारात् बहिः गतवन्तः अद्य अहं मन्ये यत् एतत् वस्तुतः तेषां ट्यूरिंग् पुरस्कारस्य विजयः अस्ति, यत् तेषां प्रारम्भिकस्य अग्रणीत्वस्य स्मृतिः अस्ति दिवसाः ।

यान लेकुन

"सिलिकन वैली १०१": १.भवन्तः पोस्टडॉक्टरेट् छात्राः आसन् तदा तस्य समूहं किमर्थं चिनोति स्म?
चेन् युबेई : १.एतत् किञ्चित् रोचकं साहसिकं कार्यम् अस्ति । अहं तदा वस्तुतः अत्यन्तं भ्रमितः आसम्, तस्मिन् सत्रे स्नातकपदवीं प्राप्तुं अपि न चिन्तितवान् । यतः मम दृढनिश्चयः मम पीएचडी-काले श्वेत-पेटी-प्रतिरूपं निर्मातुं वर्तते, तथा च प्रदर्शनं AlexNet इत्यनेन सह तुलनीयं भवेत्, परन्तु अद्यापि सज्जं नास्ति।

अहं मन्ये यदि अहं मम शोधं निरन्तरं कर्तुम् इच्छामि तर्हि अहं पोस्टडॉक् इति रूपेण कस्य समीपं गन्तव्यम्? अहं तदा एकस्मिन् सभायां आसम्, ततः आयोजनस्थले यान् इत्यनेन सह मिलितवान्। अहं वस्तुतः विशेषतया अनुमानात्मकः व्यक्तिः नास्मि अहं मन्ये सर्वे यानं पोस्टडॉक् इति रूपेण अन्वेष्टुम् इच्छन्ति, अतः यदा अहं तस्य साक्षात्कारं कृतवान् तदा अहं मुख्यतया मम कार्यस्य विषये तस्य विचाराणां विषये, एआइ इत्यस्य भविष्यस्य विषये च वक्तुं इच्छामि स्म .

फलतः सभायां वार्तालापः अतीव उत्तमः आसीत् सः मम शोधदिशायाः विषये अपि चिन्तितवान् आसीत्, मया चिन्तितानां केषाञ्चन विषयाणां विषये च, परन्तु तंत्रिकाजालस्य दृष्ट्या। अतः तस्मिन् समये सः मां पृष्टवान् यत् मम रुचिः अस्ति वा पोस्टडॉक्टरेल् पदस्य आवेदनं कर्तुं अवश्यं अहं आवेदनं कृतवान्, अतः वयं तत्क्षणमेव तत् प्रहारं कृतवन्तः।


"सिलिकन वैली १०१": १.सः कीदृशः मार्गदर्शकः अस्ति ? छात्राणां कृते अन्वेषणार्थं बहु मुक्तस्थानं ददाति, सर्वैः सह चर्चां कर्तुं च बहु साहाय्यं करोति ।
चेन् युबेई : १.प्रथमःद्वितीया स्थितिः तस्य कृते सम्भवः नास्ति ।

सः वस्तुतः मम पीएचडी-पर्यवेक्षकस्य सदृशः अस्ति, सः केषुचित् सामान्यदिशि अतीव स्वतन्त्रः अस्ति, परन्तु अहं मन्ये तेषां मध्ये अन्यत् साम्यं यत् ते यत् विश्वसन्ति तस्मिन् निरन्तरं भवन्ति, अर्थात् सः भवन्तं दिशां लक्ष्यं च दातुं शक्नोति। परन्तु भवन्तः कथं गच्छन्ति इति महत्त्वं नास्ति, नौकायानेन वा वाहनेन वा, सः एतान् विवरणान् न नियन्त्रयिष्यति।
वस्तुतः वर्षेषु तस्य सामान्यदिशा परिवर्तनं न जातम् इदं सर्वदा स्वनिरीक्षितशिक्षणम् एव आसीत् । स्वनिरीक्षितशिक्षणं वस्तुतः द्वयोः भागयोः विभक्तं भवति एकः भागः प्रतीतिमाधारितः आत्मनिरीक्षणः । अन्यः महत्त्वपूर्णः भागः अस्ति यत् आत्मनिरीक्षणं कथं मूर्तरूपेण कर्तव्यम्, अथवा वयम् अधुना विश्वप्रतिरूपं कुर्मः, यत् सः विश्वसिति इति दिशि।

अहं वस्तुतः तस्मै एतत् नाम दत्तवान् यतोहि अहं डेविड् हा तथा युर्गेन् श्मिधुबर इत्यनेन लिखितः वर्ल्ड मॉडल् इति लेखः पठितवान्, अहं च नाम सुन्दरं मस्तं मन्ये।

स्वायत्तबुद्धेः कृते एकः प्रणालीवास्तुकला, माता ए.आइ

"सिलिकन वैली १०१": १.किं भवन्तः मन्यन्ते यत् Yann इत्यस्य शोधनिर्देशः OpenAI तथा Anthropic इत्येतयोः संशोधननिर्देशात् भिन्नः अस्ति?
चेन् युबेई : १.यदि अहं वास्तवमेव किमपि भिन्नं वक्तुम् इच्छामि तर्हि अहं मन्ये यत् यान् इच्छति तत् अस्ति यत् मॉडलस्य अनेकाः लक्षणानि आवश्यकानि सन्ति। प्रथमं मूर्तरूपस्य क्षमता भवितुं शक्नोति, यस्य अर्थः अस्ति यत् एतत् केवलं दत्तांशराशिः एव नास्ति, अपितु आदर्शः अन्ते स्वयमेव जगतः अन्वेषणं कर्तुं शक्नोति
"सिलिकन वैली १०१": १.किं भेदः ? अन्ततः एतादृशं परिणामं प्राप्तुं सर्वे आशां कुर्वन्ति इति भाति।
चेन् युबेई : १.निष्पादनं भिन्नम् अस्ति। यथा, OpenAI इति मया चिन्तितम् Scaling Law इति, यस्य अर्थः अधिकाधिकं उत्तमं च दत्तांशं, ततः अधिकानि गणनानि बृहत्तराणि च मॉडल् इति । परन्तु यान् अद्यापि अधिकं वैज्ञानिकः अस्ति यत् यदि वयं यथार्थतया अधिकाधिकं मानवसदृशं बुद्धिं नेतुम् इच्छामः तर्हि किं सम्यक् आवश्यकम्? सः अनुभविष्यति यत् केवलं दत्तांशसञ्चयः एव पर्याप्तः नास्ति।
"सिलिकन वैली १०१": १.अतः यान् वस्तुतः कृष्णपेटी श्वेतपेटी च एकत्र संशोधनस्य समकक्षः अस्ति।

चेन् युबेई : १.अहं मन्ये यत् यान् वस्तुतः तावत् चिन्तां न करोति यत् एतत् विज्ञानरूपेण विकसितुं शक्यते वा इति अतीव उत्तमम्।

"सिलिकन वैली १०१": १.यदा OpenAI इत्यनेन सिद्धं कृतं यत् Scaling Law इत्यनेन उत्तमं परिणामं प्राप्तुं शक्यते तदा किं भवन्तः मन्यन्ते यत् Yann इत्यस्य वैज्ञानिकसंशोधनपद्धतिषु चिन्तने च परिवर्तनं जातम्? अथवा सः अद्यापि स्वस्य मूलरेखायां बहु लप्यते ?

चेन् युबेई : १.वस्तुतः सः Scaling Law इत्यस्य विरोधं न करोति इति अहं मन्ये अस्मिन् विषये सर्वेषां विग्रहः नास्ति । वास्तविकः सम्भाव्यः अन्तरः अस्ति यत् OpenAI इत्यस्य बहुभागः वस्तुतः अद्यापि उत्पाद-उन्मुखः अस्ति तथा च अभियांत्रिकी-क्षेत्रे चरमपर्यन्तं निष्पादितः अस्ति, परन्तु Yann वस्तुतः अधिकवैज्ञानिकरूपेण शोधं कुर्वन् अस्ति

एतेषु विषयेषु चिन्तयति तदा तस्य उत्पादैः सह बहु सम्बन्धः नास्ति । यतः सः अस्मिन् क्षेत्रे अतिदीर्घकालं यावत् अस्ति, अष्टवर्षाधिकं यावत् अस्मिन् क्षेत्रे गभीरं संलग्नः अस्ति, अतः एतान् विषयान् पश्यन् सः अद्यापि स्वस्य आदर्शेषु एव लप्यते

"सिलिकन वैली १०१": १.बुद्धिः स्वायत्तरूपेण शिक्षितुं दत्तुं यानस्य संशोधनस्य प्रथमं वैशिष्ट्यं अन्ये के सन्ति ।

चेन् युबेई : १.अत्र अपि किञ्चित् अस्ति यत् यान् सर्वदा विश्वासं कृतवान् यत् JEPA, Joint Embedding Predictive Architecture इति । अर्थात् अवश्यमेव आदर्शस्य स्वतन्त्रतया शिक्षणस्य क्षमता भवितुमर्हति, परन्तु अस्मात् अधिकं महत्त्वपूर्णं यत् आदर्शः दत्तांशशिक्षणकाले केचन उच्चस्तरीयनियमाः अपि शिक्षितुं शक्नोति

वस्तुतः एकः समूहः शिक्षणद्वारा दत्तांशस्य पूर्णतया पुनर्निर्माणं कर्तुं आशास्ति, तथापि यान् सम्पूर्णतया अस्मिन् चित्रे प्रत्यागन्तुं न इच्छति यतोहि एतस्य चित्रस्य पुनर्निर्माणे एते बहवः विवरणाः सन्ति प्रणाल्याः विषये निर्णयं कुर्वन् विवरणं सर्वाधिकं महत्त्वपूर्णं सूचना न भवति ।

"सिलिकन वैली १०१": १.किं एषः बिन्दुः बर्कले-नगरस्य भवतः मार्गदर्शकात् मा यी इत्यस्मात् भिन्नः अस्ति ?

चेन् युबेई : १.वस्तुतः अस्मिन् दृष्टिकोणे तयोः मध्ये अत्यावश्यकः विग्रहः नास्ति, परन्तु तस्य अभिव्यक्तिमार्गः भिन्नः अस्ति । अध्यापिका मा अस्य जगतः नियमाः सरलाः इति मन्यते यत् एते विवरणाः वस्तुतः अधःप्रवाहकार्यस्य वा केषाञ्चन निर्णयानां कृते हानिकारकाः सन्ति, अतः तान् उच्चस्तरीयनियमान् अन्वेष्टुम् आवश्यकम्।

वस्तुतः द्वौ समानौ स्तः, यतः उच्चस्तरीयनियमाः सामान्यतया सरलाः भवन्ति । शिक्षकः मा प्रायः वदति यत् सर्वं संपीडनम् अस्ति यदि भवान् यान् इत्यस्य दृष्ट्या पश्यति तर्हि भवान् पश्यति यत् संपीडनं खलु सम्यक् अस्ति, परन्तु दत्तांशस्य श्रेणीबद्धसंरचना वस्तुतः भिन्ना अस्ति।

यतो हि वास्तविकजगत् जटिलं भवति, यदि भवान् वास्तविकजगति विवरणं खनति तर्हि भवान् पश्यति यत् बहुधा वस्तूनि वस्तुतः निम्नस्तरीयसंरचनानि सन्ति । दत्तांशेषु संरचना अस्ति, यस्य किमपि संरचना अस्ति सः कोलाहलात् व्यभिचारस्य प्रतिबिम्बं भवति अर्थात् यत्किमपि सर्वथा संरचनाहीनं वस्तु कोलाहलः भवति, यत्किमपि कोलाहलं त्यजति तस्य अर्थः अस्ति यत् संरचना अस्ति।

वयं एतानि संरचनानि ज्ञातुं गच्छामः, परन्तु संरचनायाः भिन्नाः स्तराः सन्ति । परन्तु यदा भवन्तः एकं स्तरं उपरि गच्छन्ति, बृहत्तरेण स्तरं प्रति, तदा भवन्तः पश्यन्ति यत् संरचना वस्तुतः इतः परं महत्त्वपूर्णा नास्ति यदि भवन्तः तस्मिन् स्तरे पश्यन्ति तर्हि एतानि वस्तूनि कोलाहलवत् अभवन् ।

अतः यान् इत्यस्य दृष्टिकोणः अस्ति यत् संपीडनं सम्यक् अस्ति, परन्तु संकेते सर्वाणि संरचनानि ज्ञातुं उच्चतरं उच्चतरं च संरचनां ज्ञातुं अस्माकं एतादृशस्य श्रेणीबद्धशिक्षणस्य आवश्यकता वर्तते। परन्तु, अत्यन्तं उन्नतसंरचना प्रायः सम्पूर्णस्य संपीडनस्य बृहत् भागं न गृह्णाति, अनुकूलनप्रक्रियायाः समये च नष्टा भवितुम् अर्हति, यतः बहूनां वस्तूनि न्यूनस्तरस्य सन्ति, तथा च कोलाहलसदृशसूचनायाः परिमाणं बृहत्तमं भवति, यावत् उच्चतरं भवति तथा तथा एतादृशाः संरचनाः यथा यथा दूरं गच्छन्ति तथा तथा द्रष्टुं कठिनाः भवन्ति।

किमर्थम्‌? यतो हि भवतः अनुकूलितं हानिकार्यं भवतः उद्देश्यकार्यं भवति, भवान् एतत् नियमं लभते वा न वा लभते वा, तस्य भवतः हानिषु अल्पः प्रभावः भवितुम् अर्हति । अहं मन्ये मुख्यौ एतौ बिन्दुौ, एकः विश्वप्रतिरूपः, अपरः च एतत् श्रेणीबद्धप्रतिपादनम् ।

एनवाईयू इत्यत्र वदन् यान् लेकुन्

"सिलिकन वैली १०१": १.के गुणाः भवन्तं विशेषतया प्रभावितं कुर्वन्ति इति भवन्तः मन्यन्ते?

चेन् युबेई : १.यत् विशेषतया मम मनसि प्रभावं जनयति स्म तत् सम्भवतः ते यया एकाग्रतायाः, शुद्धतायाः च सह कार्याणि कुर्वन्ति स्म ।

एकदा मया यान् इत्यनेन सह मध्याह्नभोजनं कृतम्, सः अवदत् यत् भवतः बाल्यकाले इष्टं सर्वं मम अस्ति, परन्तु मम इदानीं बहुकालः नास्ति, अतः सः अवशिष्टं समयं केवलं तेषु कार्येषु उपयोक्तुं शक्नोति येषु सः यथार्थतया विश्वसिति

यदा भवन्तः एतादृशैः वैज्ञानिकैः सह कार्यं कुर्वन्ति तदा भवन्तः तेषां स्वभावेन प्रभाविताः भवितुम् अर्हन्ति, येन भवन्तः इदानीं यस्मिन् स्थाने सन्ति, तेषां वस्तूनि च प्राप्तुं पूर्वं अपि भवन्तः तेषां दृष्ट्या किञ्चित् जगत् द्रष्टुं शक्नुवन्ति

अतः यदा भवन्तः विकल्पं कुर्वन्ति वा कार्याणि कुर्वन्ति तदा भवन्तः स्वस्य वर्तमानस्थानात् परं गन्तुं शक्नुवन्ति, तथा च भवन्तः चिन्तयन्ति यत् यदि एकस्मिन् दिने मम सर्वं तस्य सदृशं भवति तर्हि अहं किं करिष्यामि इति।

"सिलिकन वैली १०१": १.किं सः भवतः कस्यापि निर्णयस्य परिवर्तनं कृतवान् ?

चेन् युबेई : १.आम्, बहु विकल्पं कुर्वन् एतस्य विषये चिन्तयितुं मां प्रेरयिष्यति। अहं स्मरामि यत् मम पीएचडी-अध्ययनस्य प्रथमदिने मम पर्यवेक्षकः द्वौ विषयौ अवदत्।

एकं यत् तस्य मम बहुलेखानां प्रकाशनस्य आवश्यकता नास्ति, परन्तु अहं आशासे यत् मया प्रकाशयितुं शक्याः लेखाः कालस्य यात्रां कर्तुं शक्नुवन्ति, येन २० वर्षाणाम् अनन्तरम् अयं लेखः पठित्वा अपि सः नूतनः एव भविष्यति। एतत् वस्तुतः अतीव कठिनम् अस्ति, यतः बहुकार्यस्य कालस्य विशिष्टः बोधः भवति, परन्तु केचन यथार्थतया गहनाः विचाराः अद्यापि शतशः वर्षाणि यावत् स्थातुं शक्नुवन्ति एतत् अतीव उच्चं लक्ष्यं, भवन्तः च यदा भवन्तः सन्ति तदा तत् प्राप्तुं शक्नुवन्ति निवृत्तः भवितुं। परन्तु आत्मायातनाम् उत्थापयति अर्थात् कालेन सह सह-अस्तित्वं कर्तुं शक्नुवन्तः किमपि कार्यं कर्तुं भवन्तः स्थातुं शक्नुवन्ति वा इति।

द्वितीयं यत् सः आशास्ति यत् विद्वान् स्वकीया मनोवृत्तिः भवेत् यदि भवान् मन्यते यत् किमपि क, ख, भवता वा कर्तुं शक्यते तर्हि भवता तत् न कर्तव्यम्। अर्थात् यदा भवन्तः एतत् कार्यं कुर्वन्ति तदा भवन्तः पश्यन्ति यत् एतस्य कार्यस्य आवश्यकता नास्ति, अपितु भवन्तः एव एतत् कार्यस्य आवश्यकतां अनुभवन्ति। एषः एव वस्तुतः तेषु सदृशः स्वभावः पश्यामि अर्थात् ते जनसमूहस्य अनुसरणं न करिष्यन्ति, अपितु स्वकीया मनोवृत्तिः कृत्वा स्वस्य किञ्चित् स्वरं अन्वेष्टुं आशां कुर्वन्ति।

अतः यदा अहं शोधदिशां चिनोमि तदा अहं समये समये न्यायं करिष्यामि यत् अहं यत् कार्यं करोमि तत् अनुमानात्मकं वा वास्तविकं मुख्याधारं वा।

अहं मन्ये तेषां विशेषतः यान् इत्यस्य महती वस्तु अस्ति यत् भवन्तः एतत् प्रायः निराशं समयं गत्वा प्रदोषस्य आरम्भं कर्तुं शक्नुवन्ति। ये जनाः कदापि गर्तस्य अनुभवं न कृतवन्तः ते पर्याप्तं निवसितुं न शक्नुवन्ति यदा भवन्तः अन्धकारमयक्षणं गच्छन्ति तदा एतत् अल्पकालं गन्तुं भवतः दृष्टिः, दृढता च उपयुज्यन्ते, ततः एतत् सम्यक् इति सिद्धयन्तु अतीव रोचकः स्वभावः।

"सिलिकन वैली १०१": १.किं यानस्य विषये केचन वैज्ञानिकाः मताः सन्ति येषां सह भवतः असहमतिः अस्ति ?

चेन् युबेई : १.कदाचित् सः मन्दः भवति स्म । यथा, सः अद्यैव उक्तवान् यत् यदि भवान् शोधकः अस्ति तर्हि बृहत् भाषाप्रतिमानानाम् अध्ययनं न कर्तव्यम्। अस्य वाक्यस्य बहवः व्याख्याः सन्ति यदि भवान् अक्षरशः गृह्णाति तर्हि मया सह बहवः जनाः असहमताः भविष्यन्ति। अहं मन्ये यत् बृहत्भाषाप्रतिमानेषु काश्चन संरचनाः सन्ति ये अवगन्तुं अध्ययनं च कर्तुं योग्याः सन्ति।

अवश्यं, यान् यत् वस्तुतः वक्तुम् इच्छति तत् मया अधुना एव उक्तं, ए तथा ख इव अनुमानात्मकं कार्यं मा कुरुत आशासे शोधकर्तारः किञ्चित् दृढतां प्राप्नुयुः, अधिकानि मौलिकयोगदानानि च प्राप्नुयुः। यदि एवं उक्तं स्यात् तर्हि अहं वस्तुतः अधिकं सहमतः भविष्यामि इति मन्ये। परन्तु एकः बृहत् V इति नाम्ना कदाचित् तस्य वचनं भवन्तं आहतं करिष्यति, बहु चर्चां च प्रेरयिष्यति। एतत् एकं स्थानं यत् मम कृते अतीव रोचकं दृश्यते।

"सिलिकन वैली १०१": १.भवान् मेटा इत्यत्र अपि कार्यं कृतवान् अस्ति यत् मेटा इत्यत्र यान् इत्यस्य महत्तमं योगदानं किम् अस्ति?

चेन् युबेई : १.प्रथमं मेटा एआइ निर्माणे सहायतां कर्तुं भवितुमर्हति। यदा सः मेटा ए.आइ मेटा इत्यत्र । एतस्याः अवधारणायाः अनुसरणं कृत्वा सः मेटा एआइ इत्यस्मिन् अतीव उत्तमजनानाम् एकं समूहं अपि नियुक्तवान् प्रशिक्षितवान् च, अस्मिन् क्षेत्रे महत् योगदानं दत्तवान्, सम्पूर्णस्य क्षेत्रस्य विकासं च प्रवर्धितवान्

"सिलिकन वैली १०१": १.अहं मन्ये मुक्तस्रोतः तस्य अतीव महत्त्वपूर्णः योगदानः इति गणनीयः उदाहरणार्थं मेटा लामा मुक्तस्रोतमार्गं किमर्थं गृहीतवान् इति कारणं यार्नस्य समग्रविचारेन सह अतीव सङ्गतं भवितुमर्हति।

चेन् युबेई : १.आम्, आम्, मुक्तस्रोतः एव खलु यत् यान् आग्रहं करोति। परन्तु अहं न जानामि यत् भविष्ये मेटा मुक्तस्रोतः एव भविष्यति वा, यतः सर्वथा मेटा अपि स्पर्धायाः सामना करिष्यति, परन्तु अहं मन्ये यत् एषा अन्ते कियत् सम्यक् कार्यान्वितुं शक्यते कियत् दूरं च इति अवधारणा अस्ति तत् गन्तुं शक्नोति वस्तुतः सम्पूर्णविकासस्य उपरि निर्भरं भवति।

"सिलिकन वैली १०१": १.किं भवन्तः मन्यन्ते यत् इदानीं बृहत् आदर्शानां विषये सम्पूर्णं शोधं वैज्ञानिकैः चालितं भवितुमर्हति? अथवा शनैः शनैः अभियांत्रिकी-प्रेरितं वस्तु भविष्यति ?

चेन् युबेई : १.अहं मन्ये यत् एतत् अभियांत्रिकी-प्रेरितं जातम् अस्ति । विगतवर्षद्वये अहं मन्ये मुख्या प्रगतिः परियोजनायाः निष्पादनात् एव आगच्छति किं दत्तांशस्य गुणवत्ता अधिका अभवत्? किं दत्तांशः वर्धितः ? किं तस्य वितरणं समृद्धतरं जातम् ? गणनानां समानान्तरीकरणं कर्तुं शक्यते वा ? सर्वं अभियांत्रिकीक्षेत्रे अतीव महत्त्वपूर्णविवरणानां कारणेन। ० तः १ पर्यन्तं विकासाय वैज्ञानिकसफलतायाः आवश्यकता भवति, परन्तु १ तः १०० पर्यन्तं अभियांत्रिकी कठोरता, निष्पादनक्षमता च आवश्यकी भवति भिन्न-भिन्न-चरणयोः तस्य प्रचारार्थं भिन्न-भिन्न-भूमिका-युक्तानां जनानां आवश्यकता भवति

"सिलिकन वैली १०१": १.इदानीं सर्वे GPT 5 इत्यस्य प्रतीक्षां कुर्वन्ति वा यदि GPT 5 बहिः आगच्छति तर्हि वैज्ञानिकसमस्या अधिका भविष्यति वा अभियांत्रिकीसमस्या?

चेन् युबेई : १.अहं मन्ये अभियांत्रिकीक्षेत्रे दीर्घः मार्गः अस्ति इति अपि वयं चिन्तयितुं शक्नुमः यत् Scaling Law इत्यस्य दूरं गन्तव्यम् अस्ति, तथा च दत्तांशस्य गुणवत्ता, कम्प्यूटिंगशक्तिविस्तारः च अन्तर्भवति परन्तु तत्सह, अहं मन्ये यत् इदानीं अस्माभिः प्राप्तः सर्वाधिकं दृढः मार्गः Scaling Law इति अपि, निश्चितरूपेण पर्याप्तः नास्ति ।

अतः अस्माकं अन्यत् किं आवश्यकम् ? अहं मन्ये यत् आवश्यकं तत् मनुष्यवत् किञ्चित् उच्चदक्षता अतः एतादृशी कार्यक्षमता कथं प्राप्तुं शक्यते। इदं दत्तांशैः प्रेरितं भवेत्, परन्तु अन्यत् अपि भवितुम् अर्हति, अतः अहं मन्ये यदि वयं AGI -पर्यन्तं नेतुम् प्रक्रियायाः विषये वदामः तर्हि 0 तः 1 पर्यन्तं केचन तुल्यकालिकरूपेण महत् परिवर्तनं भवितुमर्हति

"सिलिकन वैली १०१": १.वैज्ञानिकप्रगतिः अस्ति चेदपि अभियांत्रिकीक्षेत्रे सुधारस्य बहु स्थानं वर्तते ।