2024-08-13
한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina
जिन् लेइ इत्यस्य पश्चिमवायुः आओफेइ मन्दिरात् उत्पद्यते
Qubits |.सार्वजनिक खाता QbitAI
देविनस्य अनन्तरं अन्यःएआइ सॉफ्टवेयर अभियंतापटलं स्वाइप् कृतम् आसीत्——
इति उच्यतेजिनी, धारा इति प्रसिद्धःउपरि बलवन्तः, पूर्वमेव मानववत् चिन्तयितुं कार्यं च कर्तुं शक्नोति!
अतः एषः "पृष्ठतः बलिष्ठतमः" कियत् बलवान् अस्ति ?
प्रथमं अवलोकयामःसमीक्षा स्कोर。
आधिकारिकसूचौ SWE-Bench, Genie समाधानं कृतवान्30.07%प्रश्नस्य स्कोरः सूचीयां शीर्षस्थाने आसीत् ।
(SWE-Bench इति एकः बेन्चमार्कः यस्य उपयोगः वास्तविक-जगतः सॉफ्टवेयर-समस्यानां समाधानार्थं बृहत्-प्रतिमानानाम् मूल्याङ्कनार्थं भवति ।)
एतत् परिणामं द्वितीयस्थानात् १९.२७% दूरं पुरतः इति वक्तुं शक्यते, अनलॉक् कृत्वाSOTA सुधारस्य सर्वाधिकं वृद्धिः - ५७%!
यथा Genie’s इतिवास्तविक प्रभाव, दलस्य वचनेषु : १.
मानवीय-इञ्जिनीयरानाम् इव वास्तविकजीवनस्य सॉफ्टवेयर-समस्यानां समाधानं कर्तुं शक्नोति ।
सर्वप्रथमं, भवान् Genie आरभ्यतुं 4 उपायान् उपयोक्तुं शक्नोति, यथा प्रॉम्प्ट् शब्दाः, GitHub Issue, Linear Ticket अथवा API ।
GitHub Issues इत्यस्य समाधानं उदाहरणरूपेण गृहीत्वा प्रथमं Genie इत्यस्मै repo इत्यस्य लिङ्क् फीड कुर्वन्तु, ततः आरभ्यतेस्वयमेव समस्यानां समाधानं कुर्वन्तुलब्धः:
जिनी क्लबस्वचालित पुनरावर्तनीय चिन्तनयदि एतत् एतस्याः समस्यायाः समाधानं कर्तुम् इच्छति तर्हि यावत् सः एकं सञ्चिकां प्राप्तवान् इति न अनुभवति तावत् यावत् तस्य आवश्यकता अस्ति यत् सः सन्तुष्टः अस्ति:
तत्पश्चात् तत्क्षणमेव कस्वचालित पुनरावर्तनीय विश्लेषणप्रक्रिया : १.
तदा जिनी "स्विश, स्विश, स्विश" कर्तुं आरब्धा।स्वयमेव कोडं लिखन्तु + चालयन्तुलब्धः:
यदि कोडं चालयति समये दोषः भवति तर्हि Genie केवलं समस्याक्षेत्रे एव ध्यानं दास्यति तथा च विश्लेषणस्य, कोडस्य लेखनस्य, चालनस्य च प्रक्रियां पुनः पुनः करिष्यति यावत् सः चालयति
समग्रप्रक्रिया केवलं समयं गृह्णाति८४ सेकण्ड्!
दलस्य वचनेषु : १.
मानवप्रोग्रामर-जनाः कथं सॉफ्टवेयर-समस्यानां समाधानं कोटि-कोटि-वारं कुर्वन्ति इति जिनी-महोदयः अवलोकितवान्, तस्मात् ज्ञातवान् च ।
एषा संख्या यत् कोऽपि मानवः प्रोग्रामरः जीवने प्राप्तुं न शक्नोति ।
परन्तु यत् तस्मादपि अप्रत्याशितम् अस्ति तत् Genie इत्यस्य पृष्ठतः दलम्——कोसाइन, केवलं ५ जनाः。
तथा च CEO Alistair इत्यनेन OpenAI इत्यस्य धन्यवादं दत्त्वा सन्देशः अपि स्थापितः यत् -
भवतः विना वयं जिनीं कर्तुं न शक्तवन्तः।
अतः कोसाइन्-दलेन कथं जिनी-निर्माणं कृतम् ?
जिनी इत्यस्य मुख्यं वैशिष्ट्यं मानवीय-इञ्जिनीयरानाम् संज्ञानात्मकप्रक्रियाणां, तर्कस्य, कार्यप्रवाहस्य च अनुकरणं कर्तुं तस्य क्षमता अस्ति ।
एतत् कर्तुं जिनी-दलेन प्रकाशितं यत् गतवर्षे वास्तविक-मानव-प्रोग्रामर-विकास-क्रियाकलापं समाविष्टं दत्तांशसमूहं संगृहीतवान् ।
एतत् न केवलं परिणामविश्लेषणं, स्थिरविश्लेषणं, स्वयमेव क्रीडनं, पदे पदे सत्यापनम् इत्यादीनां पद्धतीनां उपयोगं करोति, अपितु लेबलयुक्तानां दत्तांशस्य बृहत् परिमाणस्य आधारेण प्रशिक्षितानां एआइ-माडलानाम् अपि उपयोगं करोति लाभः अस्ति यत् यथा यथा अन्तर्निहितप्रतिमानानाम् क्षमता सुधरति तथा तथा तेषां निष्कासनं कर्तुं शक्नुवन्ति दत्तांशस्य गुणवत्ता अपि सुधरति ।
अन्ते जिनीप्रशिक्षणार्थं एतस्य स्वामित्वदत्तांशस्य उपयोगं कुर्वन्तु。
मानवीयतर्कस्य सम्पूर्णप्रक्रिया दत्तांशसमूहे संकेतिता भवति, यत्र सम्यक् सूचनानिरीक्षणं, वृद्धिशीलज्ञानस्य आविष्कारः, सॉफ्टवेयर-इञ्जिनीयरानाम् वास्तविककार्यप्रकरणानाम् आधारेण पदे-पदे निर्णयप्रक्रिया च सन्ति
जिनी इत्यस्य तर्कप्रक्रियायां अन्तर्भवतियोजना, पुनर्प्राप्तिः, कोडलेखनं, कोडनिष्पादनं चचत्वारि मुख्यानि सोपानानि अन्येषां एआइ-इञ्जिनीयरानाम् सीमां भङ्गयन्ति ये मूलभूतप्रतिरूपस्य उपरि जालपुटं, कोडव्याख्याकारं च इत्यादीनि अतिरिक्तानि साधनानि योजयितुं अवलम्बन्ते, तथा च मानवसदृशानि विविधानि, अत्यन्तं परिस्थितिगतानि, अपूर्वसमस्यानि च सम्भालितुं शक्नुवन्ति
एषा प्रशिक्षणपद्धतिः नेटिजनाः तत्क्षणमेव एतादृशान् विचारान् चिन्तयितुं प्रेरितवती ये कर्पाथी पूर्वं प्रस्तौति स्म :
LLM कृते आदर्शः प्रशिक्षणदत्तांशः भवता स्वयमेव लिखिता सामग्री न भवति, अपितु भवतः सम्पूर्णचिन्तनप्रक्रिया लेखनप्रक्रियायाः समये प्रत्येकं सम्पादनक्रिया च भवति । तथापि अस्माकं समीपे ये संसाधनाः सन्ति तेन एव वयं यत् उत्तमं कर्तुं शक्नुमः तत् एव कर्तुं शक्नुमः ।
तदतिरिक्तं जिनी प्रशिक्षणम् अपि परिचयं करोतिआत्मसुधारतन्त्रम्。
प्रारम्भिकप्रशिक्षणदत्तांशः अधिकतया त्रुटिरहितः कोडः भवति यः सामान्यतया चालयितुं शक्नोति, येन Genie कृते त्रुटिस्थितीनां निवारणं कठिनं भवति । एतस्याः समस्यायाः समाधानार्थं दलेन त्रुटियुक्तं कृत्रिमदत्तांशं जनयितुं Genie इत्यस्य प्रथमसंस्करणस्य उपयोगः कृतः, ततः मॉडलस्य अग्रिमसंस्करणस्य प्रशिक्षणार्थं एतस्य दत्तांशस्य उपयोगः कृतः
विशेषतः, Genie इत्यस्य पुरातनसंस्करणस्य उपयोगः समाधानस्य प्रस्तावनाय भवति, यदि समाधानं गलतं भवति तर्हि कार्यस्य निपुणतायाः अन्तिमस्थितेः उपयोगः वर्तमानस्थित्याः सम्यक् अवस्थां प्राप्तुं शिक्षितुं भवति
एतां प्रक्रियां पुनरावृत्त्य Genie द्वारा प्रस्तावितं प्रारम्भिकं समाधानं क्रमेण अधिकं सटीकं भवति, अधिकांशतया प्रत्यक्षतया सम्यक् उत्तरं ददाति, तथा च यदि एतत् त्रुटिं करोति चेदपि, केवलं दत्तांशसमूहे न्यूनानि सुधारणानि आवश्यकानि भवन्ति
Genie इत्यस्य क्षमतासु सुधारस्य अन्यत् कुञ्जी OpenAI द्वारा प्रदत्तस्य विशालस्य मॉडल् समर्थनस्य अस्ति ।
दलेन उक्तं यत् यदा ते प्रथमवारं Genie विकसितवन्तः तदा ते केवलं 16-32k परिधिमध्ये लघुसन्दर्भमाडलं प्राप्तुं शक्नुवन्ति स्म ते एतेषां मॉडलानां उपयोगं प्रारम्भिकविकासाय बहुधा कृतवन्तः तथा च प्रशिक्षितुं 100 मिलियनतः अधिकं टोकनदत्तांशं प्रयुक्तवन्तः models.
विविधसंपीडन/चङ्किंग् पद्धतीनां प्रयोगानन्तरं एकमात्रं समाधानं बृहत्तरसन्दर्भयुक्तस्य मॉडलस्य उपयोगः आसीत् ।
OpenAI दीर्घकालं यावत् सन्दर्भप्रतिरूपसमर्थनं प्रदाति, तथा च Genie इत्यस्य नवीनतमं संस्करणं अरबौ टोकन-विषये प्रशिक्षितम् अस्ति ।
दलस्य मतं यत् हाइपरपैरामीटर् समायोजनस्य, दत्तांशमात्रायाः च तुलने दत्तांशस्य गुणवत्ता एव कुञ्जी अस्ति । अतः तेषां दत्तांशमिश्रणस्य विषये अपि बहु प्रयोगाः अभवन्, यत्र भाषा, कार्यप्रकारः, कार्यदीर्घता इत्यादयः बहुविधाः आयामाः सन्ति ।जीनी इत्यस्य प्रशिक्षणार्थं प्रयुक्तानां भिन्नानां प्रोग्रामिंगभाषादत्तांशस्य अनुपातः निम्नलिखितम् अस्ति
विभिन्नप्रकारस्य उदाहरणानां दत्तांशानुपाताः अपि सन्ति :
यथा वयं उपरि उक्तवन्तः, Cosine’s start-up team इत्यत्र सम्प्रति केवलं ५ जनाः एव सन्ति ।
आधिकारिकजालस्थले परिचये ते अपि अतीव प्रत्यक्षतया स्वस्य वर्णनं कुर्वन्ति यथा-
लघु किन्तु पराक्रमी।
लघु किन्तु शक्तिशाली।
परिचयतः न्याय्यं चेत्, केचन सदस्याः एकशृङ्गकम्पनीभ्यः सन्ति, केषाञ्चन वैश्विकदलानां प्रबन्धनस्य अनुभवः अस्ति, केचन ८ वर्षेभ्यः एव प्रोग्रामिंग् अपि आरब्धवन्तः
परन्तु यदा कोसिन् प्रथमवारं स्थापितः तदा केवलं त्रयः जनाः आसन् तेषां लक्ष्यं आसीत्मानवीयं तर्कं अवगच्छन्तु。
उल्लेखनीयं यत् दलस्य सदस्येषु एकः चीनीयः अस्ति ।याङ्ग ली, कोसाइन् इत्यस्य सहसंस्थापकः अस्ति तथा च २०२१ तमे वर्षे ३० वर्षाणाम् अधः फोर्ब्स् ३० इति कार्यक्रमे सूचीकृतः ।
तदतिरिक्तं स्वयं जिनी इत्यस्य विषये मुख्यकार्यकारी एलिस्टरः अपि अवदत् यत् -
वयं २०२२ तमे वर्षे एव जिनी इत्यस्य कल्पनां आरब्धवन्तः, परन्तु तदानीन्तनः तत् तान्त्रिकदृष्ट्या सम्भवं नासीत् ।
गतषड्मासान् यावत् एव जिनी वास्तविकतां प्राप्तवती यतः बृहत् आदर्शः क्रमेण परिपक्वः अभवत् ।
खैर, मया वक्तव्यं यत् बृहत् मॉडल् पुनः महत् योगदानं कृतवान्।
Genie सम्प्रति Waitlist कृते आवेदनं कर्तुं शक्नोति इच्छुकाः मित्राणि लेखस्य अन्ते लिङ्क् क्लिक् कर्तुं शक्नुवन्ति~
प्रतीक्षासूचिकायाः पताः : १.
https://cosine.sh/पञ्जीकरणं कुर्वन्तु
सन्दर्भलिङ्कानि : १.
[1]https://x.com/alistairpullen/status/1822981361608888619?s=46
[2]https://cosine.sh/blog/genie-तकनीकी-रिपोर्ट
[3]https://cosine.sh/blog/अत्याधुनिकता
[4]https://x.com/AlistairPullen/status/1823030874579120223
[5]https://x.com/यंगली_