समाचारं

Xiao Zha इत्यनेन प्रकटितं यत् सः Llama 4 इत्यस्य प्रशिक्षणार्थं बहु धनं व्ययितवान्, तथा च 240,000 GPUs एकत्र उपयुज्यन्ते स्म!२०२५ तमे वर्षे प्रदर्शितं भविष्यति इति अपेक्षा अस्ति

2024-08-05

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina


नवीन बुद्धि प्रतिवेदन

सम्पादकः ताओजी

[नव प्रज्ञायाः परिचयः] । अप्रत्याशितरूपेण बहुविधा लामा ४ इत्यस्य प्रशिक्षणं पूर्णरूपेण आरब्धम् अस्ति । जिओ झा इत्यनेन उक्तं यत् २०२५ तमे वर्षे विमोचितस्य मॉडलस्य प्रशिक्षणार्थं ल्लामा ३ इत्यस्य गणनाराशितः दशगुणं निवेशं करिष्यति । सः GPU क्रेतुं बहु धनं व्ययितवान्, परन्तु अतीव विलम्बः भविष्यति इति भीतः आसीत् ।

Llama 3.1 इत्येतत् अधुना एव विमोचितम्, Llama 4 च पूर्णतया प्रशिक्षणे स्थापितं अस्ति ।

विगतकेषु दिनेषु जिओ झाः द्वितीयत्रिमासे वित्तीयप्रतिवेदने अवदत् यत् मेटा अग्रिमपीढीयाः बहुविधा ल्लामा ४ इत्यस्य प्रशिक्षणार्थं लामा ३ इत्यस्य दशगुणं कम्प्यूटिंग् शक्तिं उपयुज्यते, यत् २०२५ तमे वर्षे विमोचनं भविष्यति इति अपेक्षा अस्ति।


एतेन विधेयकेन लाओ हुआङ्ग् पुनः बृहत्तमः विजेता अभवत्

दशगुणस्य गणनायाः का अवधारणा ?

भवन्तः जानन्ति, Llama 3 २४,००० GPUs इत्यनेन सह GPU क्लस्टरद्वये प्रशिक्षितः अस्ति । अन्येषु शब्देषु ल्लामा ४ प्रशिक्षणे २४०,००० जीपीयू आवश्यकाः सन्ति ।



अतः, मेटा इन्वेण्ट्री पर्याप्तं वा ?

अहम् अद्यापि स्मरामि यत् Xiao Zha इत्यनेन वर्षस्य आरम्भे एव घोषितं यत् सः वर्षस्य अन्ते यावत् 350,000 Nvidia H100s इत्यस्य परिनियोजनं कर्तुं योजनां कृतवान् इति।

सः अधिकविवरणानि अपि प्रकाशितवान् मेटा एलएलएम-प्रशिक्षणार्थं आन्तरिकरूपेण द्वौ एकसमूहौ निर्मास्यति, एकः २२,००० एच्१०० खण्डैः सुसज्जितः, अपरः च २४,००० खण्डैः सुसज्जितः।


एकदा केचन नेटिजनाः ल्लामा मॉडलस्य पुनरावृत्तिप्रक्रियायां GPU-उपयोगः कथं वर्धते इति समीक्षां कृतवन्तः:

लामा १: २०४८ जीपीयू

लामा २: ४०९६ जीपीयू

लामा ३.१: १६३८४ जीपीयू


अथवा ४० अरब अमेरिकी डॉलरं व्यययन्तु, जिओ झाः न इच्छति यत् अतीव विलम्बः भवतु

बृहत् आदर्शानां प्रशिक्षणं महत् व्ययः व्यापारः इति द्रष्टुं शक्यते ।

वित्तीयप्रतिवेदने दर्शयति यत् द्वितीयत्रिमासे मेटा इत्यस्य सर्वर्, डाटा सेण्टर्, नेटवर्क् इन्फ्रास्ट्रक्चर इत्येतयोः विषये पूंजीव्ययस्य प्रायः ३३% वृद्धिः अभवत् ।

गतवर्षस्य तस्मिन् एव काले ६.४ अब्ज अमेरिकीडॉलर् यावत् वर्धितः ।

अधुना वार्षिकव्ययः ३७ अब्ज डॉलरतः ४० अरब डॉलरपर्यन्तं भविष्यति इति अपेक्षा अस्ति, यत् पूर्वं ३५ अरब डॉलरतः ४० अरब डॉलरपर्यन्तं व्ययः भविष्यति ।


सूचनायाः प्रतिवेदने उक्तं यत् ओपनएआइ इत्यनेन ३ अरब डॉलरं प्रशिक्षणमाडलं व्ययितम् अपरं च ४ अर्ब डॉलरं च माइक्रोसॉफ्ट इत्यस्मात् सर्वरं रियायतेन भाडेन दत्तम्।

बृहत् मॉडल्-प्रशिक्षणार्थं कम्प्यूटिंग्-शक्तिं व्यययितुं कियत् विडम्बना अस्ति इति द्रष्टुं शक्यते ।

परन्तु महत्त्वं अस्ति यत् लामा ३.१ इत्यस्य मुक्तस्रोतः एआइ उद्योगे महत्त्वपूर्णः मोक्षबिन्दुः भविष्यति, मुक्तस्रोतकृत्रिमबुद्धिः च लिनक्स इव उद्योगमानकः भवितुम् आरभेत

मेटा आगामिषु कतिपयेषु वर्षेषु कम्प्यूटिङ्ग् क्लस्टर्स्, डाटा सेण्टर् च योजनां कुर्वन् अस्ति यत् एआइ मॉडल् इत्यस्य भविष्यत्पीढीनां समर्थनं करोति ।

एआइ-प्रौद्योगिक्याः भविष्यस्य विकासमार्गस्य पूर्वानुमानं कर्तुं कठिनं भवति इति जिओ झाः स्वीकृतवान्, परन्तु आधारभूतसंरचनानिर्माणं शीघ्रं न भवति ।

अनिश्चिततायाः अभावेऽपि अहं सज्जतायाः अभावात् प्रतियोगिभ्यः पृष्ठतः पतितुं न अपितु पूर्वमेव निर्माणस्य जोखिमं ग्रहीतुं इच्छुकः आसम्


एकदा जिओ झा इत्यस्य दूरदर्शितायाः कारणात् मेटावर्स् इत्यस्य तरङ्गस्य मध्ये कम्पनी विशिष्टा अभवत् ।

यदा २०२२ तमे वर्षे कम्पनीयाः शेयरमूल्ये महती आघातः अभवत् तदा अपि जिओ झाः जोखिमं स्वीकृत्य एच्१०० इत्यस्य बहूनां संख्यां क्रीतवान् ।

तस्य वर्षस्य तृतीयत्रिमासिकवित्तीयप्रतिवेदने मेटा-संस्थायाः पूंजीव्ययः ३२ अरब-३३ अमेरिकी-डॉलर् यावत् अधिकः इति ज्ञातम् ।

अस्य अधिकांशः भागः दत्तांशकेन्द्राणां, सर्वराणां, संजालसंरचनानां च निर्माणं प्रति गच्छति, तथैव मेटावर्से विशालनिवेशः च भवति ।

साक्षात्कारे जिओ झाः व्याख्यातवान् यत्, "तस्मिन् समये मेटा लघु-वीडियो-उपकरणं Reels इति प्रबलतया विकसितवान् आसीत्, अतः मॉडलस्य प्रशिक्षणार्थं अधिकानि GPU-इत्येतत् आवश्यकम् आसीत्" इति ।

यतो हि मेटा कृते मॉडल् अनुमानं महत्त्वपूर्णः विषयः अस्ति, तस्मात् फेसबुक्, इन्स् इत्यादीनां स्वस्य अनुप्रयोगानाम् उपयोक्तृभ्यः सेवां प्रदातुं आवश्यकता वर्तते ।

जिओ झा इत्यस्य मूलशब्देषु : १.

अस्माभिः अपेक्षितस्य अनुमानगणनायाः प्रशिक्षणस्य च अनुपातः अस्मिन् क्षेत्रे संलग्नानाम् अन्यकम्पनीनां अपेक्षया बहु अधिकः भवितुम् अर्हति यतोहि वयं यत् समुदायप्रयोक्तृणां सेवां कुर्मः तेषां संख्या अतीव अधिका अस्ति।

सर्वेषां ए.आइ

किञ्चित्कालपूर्वं मेटा एआइ वैज्ञानिकः थोमस सियालोम् अपि एकस्मिन् ब्लॉग् साक्षात्कारे उल्लेखितवान् यत् ल्लामा ४ जूनमासे प्रशिक्षणं आरब्धवान् इति।

सः अवदत् यत् नूतनं प्रतिरूपं एजेण्ट्-प्रौद्योगिक्यां केन्द्रीभूतं भवितुम् अर्हति, तथा च टूलफॉर्मर् इत्यादिषु एजेण्ट्-उपकरणेषु किञ्चित् शोधं कृतम् अस्ति ।


जिओ झा इत्यस्य मतं यत् एआइ एजेण्ट् शीघ्रमेव ऑनलाइन कम्पनीनां कृते "मानकसाधनम्" भविष्यन्ति ।

"यथा यथा समयः गच्छति तथा तथा अहं मन्ये यत् यथा प्रत्येकस्य व्यवसायस्य जालपुटं, सामाजिकमाध्यमखाताः, ईमेल-सङ्केताः च सन्ति, तथैव भविष्ये प्रत्येकस्मिन् व्यवसाये ए.आइ-एजेण्टः भविष्यति यस्य सह ग्राहकाः संवादं कर्तुं शक्नुवन्ति।

मेटा इत्यस्य लक्ष्यं प्रत्येकं लघुव्यापारं, अन्ते च प्रत्येकं बृहत् उद्यमं अपि, स्वस्य सामग्रीं उत्पादं च एआइ एजेण्ट्-मध्ये सहजतया एकीकृत्य सक्षमं कर्तुं वर्तते ।

यदा एषा प्रौद्योगिकी बृहत्प्रमाणेन व्यावहारिकप्रयोगेषु स्थापिता भवति तदा अस्माकं व्यावसायिकसूचनाराजस्वस्य महती त्वरितता भविष्यति।


एआइ, मेटावर्स् इत्येतयोः विषये मेटा इत्यस्य उच्चव्ययस्य विषये निवेशकानां आलोचनायाः अभावेऽपि जुकरबर्ग् स्वरणनीत्याः प्रति प्रतिबद्धः अस्ति ।

यद्यपि आभासीयवास्तविकता मेटा इत्यत्र हाले त्रैमासिकेषु पृष्ठस्थानं गृहीतवती इति भासते तथापि जुकरबर्ग् इत्यनेन उल्लेखः कृतः यत् क्वेस्ट् ३ इत्यस्य विक्रयः कम्पनीयाः अपेक्षां अतिक्रान्तवान् इति

द्वितीयत्रिमासिकस्य आँकडानि दर्शयन्ति यत् अस्मिन् क्षेत्रे राजस्वं २२% वर्धमानं ३९.१ अब्ज अमेरिकीडॉलर् यावत् अभवत्, लाभः च ७३% वर्धितः १३.५ अब्ज अमेरिकीडॉलर् यावत् अभवत् ।

तृतीयत्रिमासे मेटा ३८.५-४१ अब्ज डॉलरपर्यन्तं राजस्वं प्राप्नुयात् इति अपेक्षां करोति ।

सूत्रेषु उक्तं यत् कम्पनी सेप्टेम्बरमासे Connect सम्मेलने सस्तां हेडफोनयुगलं घोषयिष्यति।

तदतिरिक्तं एआइ सहायकः मेटा एआइ अधिकाधिकं लोकप्रियः भवति, तथा च जिओ झा इत्यनेन उक्तं यत् वर्षस्य अन्ते यावत् एतत् सर्वाधिकं प्रयुक्तं एआइ सहायकं भविष्यति इति अपेक्षा अस्ति।


सन्दर्भाः : १.

https://the-decoder.com/meta-plans-to-use-10-time-more-compute-power-to-train-is-next-generation-lama-4-ai-model/

https://www.theverge.com/2024/7/31/24210786/मेटा-कमाई-q2-2024-ऐ-लामा-जुकरबर्ग