νέα

ποιος έχει τις περισσότερες gpu;

2024-09-17

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

με την έλευση της εποχής της τεχνητής νοημοσύνης, η gpu έχει γίνει το επίκεντρο της προσοχής όλων.

ωστόσο, εάν θέλετε να μεγιστοποιήσετε τις λειτουργίες εκπαίδευσης και εξαγωγής συμπερασμάτων της gpu, πρέπει επίσης να βασιστείτε στη δύναμη του κέντρου δεδομένων ενός κέντρου δεδομένων ai είναι συχνά εξοπλισμένο με δεκάδες χιλιάδες gpu μπορούμε να επιτύχουμε πράγματα όπως ισχυρό chatbot όπως το chatgpt.

ωστόσο, η τιμή των κέντρων τεχνητής νοημοσύνης δεν είναι χαμηλή το κόστος κατασκευής δισεκατομμυρίων δολαρίων δεν αφορά μόνο τους τεχνολογικούς γίγαντες, αλλά επίσης απαγορεύει πολλές χώρες και περιοχές που δεν είναι ισχυρές.

καθώς όλο και περισσότερα πράγματα μπορούν να γίνουν με την τεχνητή νοημοσύνη, η γεωπολιτική σημασία των τσιπ υψηλών προδιαγραφών αυξάνεται επίσης μέρα με τη μέρα όλο και περισσότερες χώρες και περιοχές ανταγωνίζονται για τη συσσώρευση τσιπ, και ορισμένες έχουν θεσπίσει νόμους για να αποτρέψουν ορισμένες χώρες. περιφέρειες από την αγορά των πιο σύγχρονων κυρώσεων,αλλά μέχρι στιγμής, υπάρχει μια εκπληκτική έλλειψη δημόσιων δεδομένων σχετικά με την ακριβή τοποθεσία των τσιπ ai σε όλο τον κόσμο.

ο καθηγητής vili lehdonvirta από το ινστιτούτο διαδικτύου του πανεπιστημίου της οξφόρδης αποκάλυψε μια πραγματικότητα που δεν μπορεί να αγνοηθεί: οι gpu είναι πολύ συγκεντρωμένες μόνο σε 30 χώρες και περιοχές σε όλο τον κόσμο, εκ των οποίων οι ηνωμένες πολιτείες και η κίνα είναι πολύ μπροστά, και οι περισσότερες περιοχές βρίσκονται σε τόσο που ονομάζεται "computing deserts" : δεν υπάρχουν καθόλου gpu διαθέσιμες προς ενοικίαση.

πώς να διερευνήσετε τις διανομές

η παγκόσμια αλυσίδα εφοδιασμού υπολογιστών ai μπορεί χονδρικά να χωριστεί σε τέσσερα μέρη:

εταιρείες που σχεδιάζουν και πωλούν gpu και άλλα τσιπ που σχετίζονται με την τεχνητή νοημοσύνη

εταιρείες που κατασκευάζουν και συσκευάζουν τσιπ

εταιρείες που αναπτύσσουν τσιπ για να παρέχουν υπολογιστική ισχύ

εταιρείες που δαπανούν υπολογιστική ισχύ για να αναπτύξουν ή να αναπτύξουν συστήματα ai

ο ηγέτης της αγοράς στον σχεδιασμό και τις πωλήσεις gpu είναι η nvidia με έδρα τις ηπα, η κατασκευή chip κυριαρχείται από την taiwan semiconductor manufacturing co., ltd. (tsmc) της ταϊβάν και η asml της ολλανδίας είναι επί του παρόντος η μόνη εταιρεία που παράγει μηχανές λιθογραφίας που είναι απαραίτητες για την κατασκευή τα τελευταίας τεχνολογίας τσιπ είναι κρίσιμα (miller 2022). ως αποτέλεσμα, αυτά τα τμήματα της υπολογιστικής αλυσίδας εφοδιασμού είναι ιδιαίτερα συγκεντρωμένα τόσο από άποψη γεωγραφίας όσο και από πλευράς ιδιοκτησίας.

αυτή η μελέτη εστιάζει στο τρίτο βήμα της αλυσίδας εφοδιασμού: όπου στον κόσμο αναπτύσσονται τσιπ για την παροχή υπολογιστών τεχνητής νοημοσύνης για ανάπτυξη και ανάπτυξη τεχνητής νοημοσύνης, δηλαδή για εκπαίδευση μοντέλων τεχνητής νοημοσύνης και εκτέλεση συμπερασμάτων σε υπάρχοντα μοντέλα. γενικά, υπάρχουν τρεις κατηγορίες παρόχων υπολογιστών μεγάλης κλίμακας: επιστημονικές εγκαταστάσεις υπερυπολογιστών, ιδιωτικά συμπλέγματα υπολογιστών και οι λεγόμενοι δημόσιοι πάροχοι υπολογιστικού νέφους.

οι επιστημονικές εγκαταστάσεις υπερυπολογιστών υπάρχουν από τις αρχές της δεκαετίας του 1960, συνήθως χρηματοδοτούνται από τις κυβερνήσεις και χρησιμοποιούνται κυρίως για ακαδημαϊκούς και στρατιωτικούς σκοπούς. μια μελέτη του οοσα (2023) διεξήγαγε μια απλή γεωγραφική ανάλυση των επιστημονικών υπερυπολογιστικών εγκαταστάσεων. σύμφωνα με τη βάση δεδομένων top500, η ​​κίνα έχει τον μεγαλύτερο αριθμό υπερυπολογιστών, με ποσοστό 32%, ακολουθούμενες από τις ηνωμένες πολιτείες, που αντιπροσωπεύουν το 25%. ωστόσο, οι περισσότεροι επιστημονικοί υπερυπολογιστές δεν έχουν σχεδιαστεί για εκπαίδευση μοντέλων τεχνητής νοημοσύνης (οοσα 2023). η τρέχουσα ευημερία της γενετικής ανάπτυξης τεχνητής νοημοσύνης βασίζεται κυρίως σε ιδιωτικά συμπλέγματα υπολογιστών και δημόσιο υπολογιστικό νέφος. προηγούμενες μελέτες δεν έχουν αναλύσει λεπτομερώς τη γεωγραφική κατανομή τους.

τα ιδιωτικά συμπλέγματα υπολογιστών ανήκουν σε κερδοσκοπικές εταιρείες όπως η meta, η hp και πολλές μικρότερες εταιρείες. αυτά τα συμπλέγματα αποτελούνται από υπολογιστές συνδεδεμένους με gpu που αναπτύσσονται σε κέντρα δεδομένων. ένα ιδιωτικό cluster μπορεί είτε να χρησιμοποιηθεί για την ανάπτυξη τεχνητής νοημοσύνης της εταιρείας είτε να ενοικιαστεί σε άλλες εταιρείες. οι δημόσιοι πάροχοι υπολογιστικού νέφους είναι επίσης κερδοσκοπικές εταιρείες. ονομάζονται "δημόσιες" όχι επειδή έχουν σχέση με την κυβέρνηση, αλλά επειδή οι υπηρεσίες τους παρέχονται κατόπιν ζήτησης και μοιράζονται από πολλούς πελάτες (δηλαδή παρόμοια με την έννοια του "δημόσιου" σε μια ταβέρνα, αντί του δημόσιου τμήματος "δημόσιο") . οι ηγέτες στην αγορά του δημόσιου cloud computing περιλαμβάνουν τους aws, το microsoft azure και το google cloud, οι κινεζικοί πάροχοι δημόσιου cloud, alibaba και tencent, παρέχουν επίσης υπολογιστές τεχνητής νοημοσύνης μεγάλης κλίμακας. αυτοί οι μεγάλοι πάροχοι αναφέρονται συχνά ως «πάροχοι υπολογιστών υπερκλίμακας».

αυτή η μελέτη εστιάζει κυρίως στη γεωγραφική κατανομή του δημόσιου cloud ai computing. τα ιδιωτικά συμπλέγματα υπολογιστών έχουν χρησιμοποιηθεί για την εκπαίδευση ορισμένων εμβληματικών μοντέλων όπως το meta's llama και το llama 2. ωστόσο, η εκπαίδευση και η ανάπτυξη ενός μεγάλου αριθμού μοντέλων τεχνητής νοημοσύνης αιχμής επικεντρώνεται στους δημόσιους παρόχους υπερκλίμακας cloud, google, microsoft και amazon, και στις «υπολογιστικές συνεργασίες» τους με κορυφαίες εταιρείες τεχνητής νοημοσύνης, όπως οι anthropic, cohere, google deepmind, hugging. face, openai και stability ai. το δημόσιο cloud είναι επίσης σημαντικό επειδή είναι ανοιχτό σε πολλούς διαφορετικούς τύπους προγραμματιστών, συμπεριλαμβανομένων ακαδημαϊκών ερευνητών. επομένως, το κύριο ερευνητικό μας ερώτημα είναι: ποια είναι η γεωγραφική κατανομή του δημόσιου cloud ai computing σε όλο τον κόσμο; θα διερευνήσουμε επίσης πιθανούς λόγους για αυτές τις γεωγραφικές διασπορές, θα συζητήσουμε τις επιπτώσεις τους στην υπολογιστική διακυβέρνηση και τη γεωπολιτική και θα ολοκληρώσουμε με μια σύντομη συζήτηση για τα ιδιωτικά clusters και την κρατική ιδιοκτησία εθνικών υπολογιστών τεχνητής νοημοσύνης.

η απογραφή της μελέτης καλύπτει τους έξι μεγαλύτερους παρόχους δημόσιου cloud υπερκλίμακα: aws, microsoft, google, alibaba, huawei και tencent. ενώ υπάρχουν αρκετοί μικρότεροι πάροχοι, αυτοί οι έξι αντιπροσωπεύουν την πλειοψηφία της παγκόσμιας αγοράς δημόσιου cloud και επίσης πρωτοστατούν σε διάφορες περιφερειακές αγορές. την εποχή της απογραφής, η πιο ισχυρή gpu για την εκπαίδευση κοινών μοντέλων ai ήταν το h100 της nvidia, που κυκλοφόρησε το 2023, με το προηγούμενο μοντέλο ναυαρχίδα, το a100, που κυκλοφόρησε το 2020 και το v100 νωρίτερα το 2017. το 2023, η nvidia παρουσίασε τα h800 και a800 για να παρακάμψει τους περιορισμούς των εξαγωγών των ηπα στην κίνα, αλλά αυτοί οι περιορισμοί επεκτάθηκαν γρήγορα σε αυτά τα νέα μοντέλα. η συλλογή δεδομένων επικεντρώθηκε σε αυτούς τους πέντε τύπους gpu που σχετίζονται περισσότερο με την τεχνητή νοημοσύνη.

από τη βάση δεδομένων της απογραφής, η μελέτη κατασκεύασε ένα σύνολο δεδομένων σε επίπεδο χώρας για να καταστεί δυνατή η γεωγραφική ανάλυση.για κάθε χώρα, υπολόγισε τον συνολικό αριθμό των περιοχών δημόσιου νέφους στην επικράτειά της, υπολόγισε επίσης το υποσύνολο των περιοχών που υποστηρίζουν τουλάχιστον έναν τύπο gpu ("περιοχές με δυνατότητα gpu") και το υποσύνολο των περιοχών που υποστηρίζουν μια συγκεκριμένη gpu τύπος.

για να συμπληρώσει τα δεδομένα της απογραφής cloud, η μελέτη διεξήγαγε ποιοτικές και ημιδομημένες συνεντεύξεις ειδικών. πήραμε συνεντεύξεις από συνολικά 10 πληροφοριοδότες, που αντιπροσώπευαν δύο ειδικούς σε θέματα πολιτικής, τρεις εμπειρογνώμονες σε δημόσιους παρόχους υπηρεσιών cloud και πέντε εμπειρογνώμονες ερευνητές με εξειδίκευση στον τομέα της τεχνητής νοημοσύνης. αυτοί οι πληροφοριοδότες στρατολογήθηκαν χρησιμοποιώντας δειγματοληψία χιονόμπαλας μέσω του δικού μας επαγγελματικού δικτύου. οι πρωταρχικοί στόχοι αυτών των συνεντεύξεων είναι να βελτιώσουν και να επικυρώσουν τη μεθοδολογία απογραφής, να δημιουργήσουν συμπληρωματικές ή εναλλακτικές πληροφορίες σχετικά με τη γεωγραφική κατανομή του δημόσιου cloud ai computing και να βοηθήσουν στην επεξήγηση των παρατηρούμενων γεωγραφικών προτύπων.

πού είναι οι gpu της ai;

το σχήμα 1 δείχνει την κατά προσέγγιση τοποθεσία των δημόσιων περιοχών νέφους που βρέθηκαν στην απογραφή. ο πίνακας 4 δείχνει πόσες περιοχές cloud υπάρχουν σε κάθε χώρα και πόσες από αυτές τις περιοχές προσφέρουν παρουσίες gpu. από τη σκοπιά της υπολογιστικής διακυβέρνησης, ένα από τα πιο σημαντικά χαρακτηριστικά των δεδομένων είναι ότι η συντριπτική πλειονότητα των χωρών στον κόσμο δεν έχουν καθόλου περιοχές δημόσιου νέφους. από τις 39 χώρες με μία ή περισσότερες περιοχές cloud, οι 30 έχουν περιοχές cloud που υποστηρίζουν gpu.

ένα άλλο εντυπωσιακό χαρακτηριστικό είναι ότι ακόμη και στις χώρες με περιοχές cloud με δυνατότητα gpu, η γεωγραφική κατανομή των περιοχών είναι πολύ πολωμένη:η κίνα και οι ηνωμένες πολιτείες μαζί έχουν σχεδόν τόσες περιοχές (49) όσες και ο υπόλοιπος κόσμος μαζί (52). από τις δύο, ο συνολικός αριθμός περιοχών υποστήριξης gpu της κίνας είναι ελαφρώς υψηλότερος (27) από τις ηνωμένες πολιτείες (22).

περαιτέρω ανάλυση μπορεί να διεξαχθεί εξετάζοντας τους τύπους παρουσιών gpu που προσφέρονται σε κάθε χώρα. το πιο προφανές μοτίβο είναι ότι οι ηνωμένες πολιτείες διαθέτουν τις νεότερες και πιο ισχυρές gpu στον κόσμο όχι μόνο σε αναλογία διαφορετικών τύπων παρουσιών που είναι διαθέσιμες, αλλά και σε τεράστιους αριθμούς. οι ηνωμένες πολιτείες είναι η μόνη χώρα όπου η gpu nvidia a100 2020 είναι διαθέσιμη σε περισσότερες περιοχές από την gpu v100 του 2017. οι ηπα έχουν επίσης αρκετές περιοχές που προσφέρουν την gpu nvidia h100 2023. οι περιοχές cloud στην κίνα βασίζονται κυρίως στο v100 και μερικές περιοχές παρέχουν παρουσίες a100. το h100 δεν είναι διαθέσιμο σε καμία περιοχή στην κίνα. μόνο 15 χώρες στον υπόλοιπο κόσμο προσφέρουν το a100, μόνο μία χώρα προσφέρει το h100 και οι υπόλοιπες περιοχές βασίζονται αποκλειστικά στο v100.

αυτή η ανάλυση δεν λαμβάνει υπόψη προσαρμοσμένα τσιπ επιτάχυνσης (όπως tpu), ούτε λαμβάνει υπόψη τις διαφορές στον αριθμό των gpu που είναι διαθέσιμες σε διαφορετικές περιοχές. οι πληροφοριοδότες συνεντεύξεων σημείωσαν ότι ο αριθμός των gpu του ίδιου τύπου που διατίθενται σε διαφορετικές περιοχές μπορεί να ποικίλλει σημαντικά μεταξύ περιοχών και παρόχων. ένας πληροφοριοδότης σημείωσε: "οι πάροχοι υπηρεσιών cloud σχεδόν δίνουν την εντύπωση ότι είναι παντοδύναμοι όσον αφορά τον υπολογισμό ή την αποθήκευση και φαίνεται ότι μπορούν να χειριστούν οποιοδήποτε πρόβλημα τους βάζεις ο αριθμός των gpu που διατίθενται σε μια περιοχή μπορεί να είναι πολύ περιορισμένος, με αποτέλεσμα μόνο ένας περιορισμένος αριθμός πελατών να μπορεί να εκτελεί παρουσίες gpu σε αυτήν την περιοχή ή να μπορεί να εκπαιδεύει μοντέλα μικρότερης κλίμακας σε εύλογο χρονικό διάστημα.

η aws και η microsoft πιστεύεται επί του παρόντος ότι διαθέτουν τα μεγαλύτερα συμπλέγματα gpu cloud, αλλά "υπάρχουν σίγουρα διαφορές μεταξύ των περιοχών από αυτή την άποψη."ωστόσο, ο αριθμός των gpu και η διανομή τους εντός της περιοχής του παρόχου θεωρούνται άκρως εμπιστευτικές πληροφορίες από τους παρόχους cloud υπερκλίμακας. κανένας από τους παρόχους πληροφοριών μας δεν ήταν πρόθυμος ή σε θέση να παράσχει συγκεκριμένα δεδομένα ή να υποδείξει πώς αυτές οι πληροφορίες θα μπορούσαν να ληφθούν δημόσια. ωστόσο, γενικά πιστεύεται ότι ο αριθμός των gpu στις ηνωμένες πολιτείες μπορεί να είναι πολύ μεγαλύτερος από άλλες περιοχές στον κόσμο με παρόμοιες gpu. η κινεζική περιοχή μπορεί επίσης να έχει περισσότερα τσιπ v100 για να αντισταθμίσει τη σχετικά χαμηλή απόδοσή της. οι συνεντεύξεις μας υποδηλώνουν ότι ακόμη κι αν ο αριθμός των gpu ανά περιοχή μπορούσε να συμπεριληφθεί σε αυτήν την ανάλυση, αυτό μπορεί να μην αμφισβητήσει τα κυρίαρχα μοτίβα που περιγράφονται παραπάνω, αλλά μάλλον να τα ενισχύσει.

γιατί να εστιάσουμε στις ηνωμένες πολιτείες;

τι κρύβεται πίσω από το προβάδισμα των ηπα στον προηγμένο δημόσιο υπολογισμό τεχνητής νοημοσύνης στο cloud σε σύγκριση με την κίνα και άλλες χώρες; μια προφανής εξήγηση είναι οι έλεγχοι εξαγωγών της κυβέρνησης των ηπα, οι οποίοι απαγορεύουν την εξαγωγή τσιπ a100 και h100 στην κίνα. οι κινέζοι πάροχοι cloud θα μπορούν να εισάγουν μερικά τσιπ a100 πριν τεθούν σε ισχύ οι έλεγχοι εξαγωγών το 2023, αλλά το h100 υπόκειται σε ελέγχους εξαγωγών από την κυκλοφορία του προϊόντος. ομοίως, τα τσιπ h800 και a800 τέθηκαν υπό έλεγχο εξαγωγών λίγο μετά την κυκλοφορία τους. το v100, το οποίο είναι πολύ λιγότερο ισχυρό από αυτά τα τσιπ, είναι ο πιο κοινός τύπος παρουσίας gpu nvidia στην κίνα, επειδή δεν υπόκειται σε ελέγχους εξαγωγών.

ωστόσο, οι έλεγχοι των εξαγωγών δεν μπορούν να εξηγήσουν γιατί άλλες χώρες εκτός από την κίνα έχουν αναπτύξει κυρίως παλαιότερες gpu. πολλές εξηγήσεις είναι δυνατές. μια απλή εξήγηση είναι η τριβή της διάδοσης της καινοτομίας, η οποία αναφέρεται στη διαδικασία διάδοσης της gpu στην αγορά. οι νεότερες gpu είναι πιθανό να εγκατασταθούν πρώτα στις ηνωμένες πολιτείες, όπου η nvidia έχει το ισχυρότερο δίκτυο διανομής από τότε που έχει την έδρα της στις ηνωμένες πολιτείες. με την πάροδο του χρόνου, οι προηγμένες gpu θα πρέπει σταδιακά να εξαπλωθούν σε σχετικά απομακρυσμένες αγορές. «θα υπέθεσα ότι σχεδόν όλες οι gpu αρχικά πήγαν στην περιοχή της βόρειας αμερικής, αλλά θα πρέπει να υπάρχει ένα αρκετά μεγάλο σύμπλεγμα και στην ευρώπη τώρα», υπέθεσε ένας πληροφοριοδότης.

μια άλλη πιθανή εξήγηση για το προβάδισμα των η.π.α. στο cloud computing προέρχεται από τις γεωγραφικές διαφορές στην αρχική δομή ζήτησης, οι οποίες σε συνδυασμό με οικονομίες κλίμακας δημιουργούν ένα είδος «εξάρτησης διαδρομής» που διατηρεί τη συγκέντρωση του υπολογισμού ai σε ορισμένες γεωγραφικές περιοχές. ένας πληροφοριοδότης εξήγησε:«υπάρχουν πολύ λίγοι αγοραστές cloud που κάνουν στην πραγματικότητα πρωτοποριακή ανάπτυξη τεχνητής νοημοσύνης... επομένως δεν χρειάζεται να διαδώσετε τις δυνατότητες... χρειάζεστε μερικά υπερσυστήματα για να σχηματίσετε μια κρίσιμη μάζα υπολογιστικής ισχύος σε ορισμένες τοποθεσίες, δεν υπάρχει καμία ανάγκη για να αναπαραχθεί αυτή η ικανότητα παντού».

οι πρώτες εταιρείες και ερευνητές που επικεντρώθηκαν στην εκπαίδευση μοντέλων τεχνητής νοημοσύνης μεγάλης κλίμακας εμφανίστηκαν στις ηνωμένες πολιτείες, έτσι οι πάροχοι cloud συγκέντρωσαν εκεί την πιο ισχυρή υπολογιστική τους δύναμη εκπαίδευσης. ωστόσο, ακόμη και όταν η ζήτηση για υπολογιστές αυξάνεται αλλού σε όλο τον κόσμο, αυτό δεν μεταφράζεται απαραίτητα σε αντίστοιχη ανάπτυξη στην τοπική υπολογιστική υποδομή, καθώς οι προγραμματιστές μπορούν συχνά να στέλνουν εκπαιδευτικές εργασίες σε περιοχές cloud στις ηπα χωρίς να υποστούν σημαντικές απώλειες απόδοσης. έτσι, διατηρήθηκε η αρχική ηγεσία των ηνωμένων πολιτειών στον τομέα των υπολογιστών.

οι πληροφοριοδότες πιστεύουν ότι η κατάσταση με την υπολογιστική ισχύ που χρησιμοποιείται για την ανάπτυξη της τεχνητής νοημοσύνης είναι διαφορετική. σε πολλές περιπτώσεις χρήσης τεχνητής νοημοσύνης, όπως οι βοηθοί φωνής, η εμπειρία χρήστη μπορεί να επηρεαστεί από λανθάνουσα κατάσταση εάν η απόσταση μεταξύ του χρήστη και του διακομιστή είναι πολύ μεγάλη. το κόστος μεταφοράς δεδομένων μπορεί επίσης να γίνει επιχειρηματικό ζήτημα. επομένως, τέτοιες εφαρμογές αναπτύσσονται καλύτερα σε υπολογιστική υποδομή πιο κοντά στους χρήστες. αυτό εξηγεί επίσης γιατί οι μάρκες v100, οι οποίες δεν είναι αρκετά ισχυρές για προπόνηση - αλλά εξακολουθούν να είναι κατάλληλες για εργασίες συμπερασμάτων παρά το γεγονός ότι είναι πιο αργές - κατανέμονται πιο ομοιόμορφα σε όλο τον κόσμο από τις πιο προηγμένες μάρκες.

ωστόσο, υπάρχουν μερικές εξαιρέσεις που δεν ταιριάζουν στο γενικό πρότυπο των ηπα που διαθέτουν τις πιο προηγμένες gpu.η ιαπωνία, το ηνωμένο βασίλειο και η γαλλία έχουν τον ίδιο αριθμό περιοχών υποστήριξης a100 με τις περιοχές υποστήριξης v100. κάθε μία από αυτές τις χώρες έχει σημαντική τοπική δραστηριότητα ανάπτυξης τεχνητής νοημοσύνης.μπορεί να υπάρχουν ρυθμιστικά ή πολιτικά εμπόδια που εμποδίζουν τους τοπικούς προγραμματιστές να στέλνουν δεδομένα στις ηνωμένες πολιτείες για εκπαίδευση. ένας πληροφοριοδότης σημείωσε: «προς το παρόν, υπάρχουν δημόσιοι φορείς ή σημαντικοί ευρωπαίοι παίκτες που πρέπει να εκπαιδεύσουν μοντέλα επιπέδου gpt-4 με δεδομένα που δεν μπορούν να φύγουν από την ευρώπη…αν οι πάροχοι cloud υπερκλίμακας δεν ανταποκριθούν σε αυτή τη ζήτηση, θα εκπλαγώ».

σε αυτό το πλαίσιο, οι πληροφοριοδότες ανέφεραν συζητήσεις πολιτικής σχετικά με την «ψηφιακή κυριαρχία», την «κυριαρχία δεδομένων» και την «υπολογιστική κυριαρχία», που θα μπορούσαν να δημιουργήσουν αυξημένη ανάγκη για τοπική εκπαίδευση υπολογιστών. η ολλανδία και η ιρλανδία έχουν επίσης μικρές αλλά σχετικά προηγμένες σειρές gpu. αυτό μπορεί να σχετίζεται με τη στρατηγική θέση αυτών των χωρών ως κόμβων υποδομής για ορισμένους παρόχους cloud υπερκλίμακας. αξίζει να σημειωθεί ότι η ολλανδία είναι η μόνη χώρα εκτός των ηνωμένων πολιτειών που διαθέτει περιοχή cloud με gpu h100.

παγκόσμια διανομή ιδιωτικών και κρατικών υπολογιστών

αυτή η μελέτη εστιάζει στο δημόσιο υπολογιστικό νέφος, μια σημαντική αλλά όχι η μοναδική πηγή υπολογιστών. στο δημόσιο cloud computing, η συλλογή δεδομένων μας επικεντρώνεται στις gpu της nvidia και σε έξι κορυφαίους παρόχους υπηρεσιών cloud υπερκλίμακας.

θα αλλάξει η σχετική θέση διαφορετικών τύπων παρόχων υπολογιστών μεγάλης κλίμακας, αμφισβητώντας τη γεωγραφία των υπολογιστών που παρατηρείται σήμερα; τα συμπλέγματα gpu είναι ακριβά κεφαλαιουχικά αγαθά που απαιτούν υψηλή χρήση για την επίτευξη εύλογης απόδοσης επένδυσης, γεγονός που εξηγεί γιατί τα συμπλέγματα μεγάλης κλίμακας κατασκευάζονται κυρίως ως κοινόχρηστη υποδομή, είτε είναι κρατικής ιδιοκτησίας (όπως ο επιστημονικός υπερυπολογιστής) είτε τα τελευταία χρόνια ιδιωτικά (όπως το δημόσιο cloud ). ο κυβερνητικός υπολογιστής φαίνεται να επιστρέφει σε μικρή κλίμακα σε όλο τον κόσμο με τη μορφή της εθνικής πρωτοβουλίας ai computing. για παράδειγμα, η ομάδα εργασίας national ai resources (nair) στις ηνωμένες πολιτείες στοχεύει στη δημιουργία δημόσιας υπολογιστικής υποδομής για τον «εκδημοκρατισμό της έρευνας της τεχνητής νοημοσύνης», ωστόσο, σε πολλές περιπτώσεις η κλίμακα των κρατικών επενδύσεων δεν φαίνεται να είναι επαρκής για να αμφισβητήσει πραγματικά την κυριαρχία υπερκλίμακα παρόχων υπηρεσιών cloud έχουν πραγματοποιηθεί επίσης πολλές πρόσφατες κυβερνητικές προσπάθειες σε συνεργασία με αυτούς τους παρόχους υπηρεσιών cloud, και στην πραγματικότητα αυτά τα έργα βασίζονται σε ιδιωτικές υποδομές.

ο νέος υπερυπολογιστής lumi της ευρωπαϊκής κοινοπραξίας υπολογιστών υψηλής απόδοσης παρέχει ένα αντιπαράδειγμα.το lumi, που βρίσκεται στο kajaani της φινλανδίας, ιδρύθηκε σε συνεργασία με τις κυβερνήσεις των κρατών μελών της εε και αποτελείται από ένα σύμπλεγμα 11.912 gpu που σχεδιάστηκαν από την ανταγωνιστική amd της nvidia. η κλίμακα του θα μπορούσε να το καταστήσει μια σοβαρή εναλλακτική στην ιδιωτική «δημόσια» υποδομή υπολογιστικού νέφους για υποδομές ανάπτυξης τεχνητής νοημοσύνης. δεδομένης της θέσης του στην εε, δεν αμφισβητεί το υπολογιστικό χάσμα βορρά-νότου που φαίνεται στο σχήμα 2. ωστόσο, θα μπορούσε να βοηθήσει να σπάσει η διπολική εικόνα των ηνωμένων πολιτειών και της κίνας ως οι μόνες υπερδυνάμεις της τεχνητής νοημοσύνης.

νέα ιδιωτικά συμπλέγματα υπολογιστών αυξάνονται επίσης. το tpu της google μπορεί να αντιπροσωπεύει ένα σημαντικό ποσοστό των υπολογιστών ai. η aws και η microsoft σχεδιάζουν να παράγουν τα δικά τους τσιπ. η meta ανακοινώνει τεράστιες επενδύσεις στην κατασκευή ιδιωτικής υπολογιστικής ισχύος: ο διευθύνων σύμβουλος mark zuckerberg ισχυρίζεται ότι επενδύει 340.000 μονάδες nvidia h100 και a100 το 2023, η microsoft ισχυρίζεται ότι ξοδεύει εκατοντάδες εκατομμύρια δολάρια για να τροφοδοτήσει το chatgpt των συμπλεγμάτων συνομιλίας του openai. οι μεγάλες εταιρείες τεχνολογίας ενδέχεται να είναι σε θέση να επιτύχουν υψηλή χρήση συμπλεγμάτων μεγάλης κλίμακας με βάση αποκλειστικά τις εσωτερικές τους ανάγκες και τις ανάγκες των συνεργατών τους. ωστόσο, τα cluster που αρχικά αναπτύχθηκαν ως ιδιωτικά ενδέχεται να μεταβούν σε κοινόχρηστη υποδομή cloud καθώς μειώνονται οι εσωτερικές ανάγκες.αυτό θολώνει τη διάκριση μεταξύ ιδιωτικών και δημόσιων (όπως η δημόσια στέγαση) δυνατοτήτων υπολογιστικού νέφους.

ένα κενό στον υπολογισμό ai

η διακυβέρνηση της τεχνητής νοημοσύνης μέσω υπολογισμού είναι μια ισχυρή ιδέα επειδή ο υπολογισμός αποτελείται από μεγάλη, παρατηρήσιμη φυσική υποδομή. αυτές οι υποδομές πρέπει να βρίσκονται κάπου φυσικά και επομένως είναι επιρρεπείς στην εδαφική δικαιοδοσία, η οποία είναι η πιο εκτελεστή μορφή δικαιοδοσίας για όλα τα κράτη, μεγάλα και μικρά. ωστόσο, η έρευνα δείχνει ότι η υπολογιστική υποδομή δεν είναι ομοιόμορφα κατανεμημένη σε όλο τον κόσμο και η γεωγραφική τους κατανομή καθορίζει σε μεγάλο βαθμό την πιθανότητα διαφορετικές χώρες να χρησιμοποιήσουν τους υπολογιστές ως σημείο παρέμβασης για την τεχνητή νοημοσύνη.

η έρευνα αναβιώνει τη γνώριμη ιδέα των δύο υπερδυνάμεων της τεχνητής νοημοσύνης εγκλωβισμένες σε έναν υπολογιστικό «αγώνα εξοπλισμών», με τις ηνωμένες πολιτείες να έχουν πλεονέκτημα στην ποιότητα των τσιπ και την κίνα να προσπαθεί να γεφυρώσει το χάσμα μέσω της ποσότητας.οι περιορισμοί στις εξαγωγές των ηπα σε προηγμένες gpu φαίνεται ότι έπαιξαν κάποιο ρόλο, καθώς κανένας πάροχος δημόσιου cloud δεν προσφέρει τα τσιπ h100 2023 στην κίνα, ούτε τα h800 ή a800, τα οποία αναπτύχθηκαν για να παρακάμψουν αυτούς τους περιορισμούς. ομοίως, η ρωσία και το ιράν, δύο χώρες που υπόκεινται σε δυτικές κυρώσεις, δεν διαθέτουν δημόσιες εγκαταστάσεις υπολογιστικής τεχνητής νοημοσύνης cloud στο δείγμα μας.

ωστόσο, εκτός από την προοπτική του γεωπολιτικού ανταγωνισμού μεγάλων δυνάμεων, η έρευνα προτείνει επίσης άλλες εννοιολογικές κατηγορίες που σχετίζονται με τη διακυβέρνηση της τεχνητής νοημοσύνης που βασίζεται σε υπολογιστές. εκτός από τις ηνωμένες πολιτείες και την κίνα, άλλες 15 χώρες διαθέτουν επίσης gpu που είναι πιο σημαντικές για την ανάπτυξη της τεχνητής νοημοσύνης, και συγκεκριμένα οι a100 και h100. αυτές οι χώρες πρώτης βαθμίδας, με εξαίρεση την ινδία, βρίσκονται όλες στον λεγόμενο «παγκόσμιο βορρά». κατ' αναλογία, ονομάστε τα "υπολογίζοντας βορρά". αυτές οι υπολογιστικές χώρες του βορρά μπορούν να χρησιμοποιήσουν την εδαφική τους δικαιοδοσία για να παρέμβουν στην ανάπτυξη της τεχνητής νοημοσύνης, ειδικά όταν τα μοντέλα αποστέλλονται στις τοπικές περιοχές του δημόσιου cloud για εκπαίδευση. για παράδειγμα, θα μπορούσαν να επηρεάσουν τους τύπους συστημάτων τεχνητής νοημοσύνης που εισέρχονται στις παγκόσμιες αγορές απαιτώντας αλγόριθμους και σύνολα δεδομένων για να περάσουν ελέγχους και να πιστοποιηθούν ότι συμμορφώνονται με τους τοπικούς κανόνες πριν ξεκινήσει η εκπαίδευση.

η δεύτερη βαθμίδα περιλαμβάνει 13 χώρες των οποίων η υπολογιστική ισχύς είναι πιο κατάλληλη για την ανάπτυξη συστημάτων τεχνητής νοημοσύνης παρά για την ανάπτυξή τους. με εξαίρεση την ελβετία, αυτές οι χώρες βρίσκονται όλες στον παγκόσμιο νότο, εξ ου και ο όρος «υπολογιστικός νότος». για παράδειγμα, υπάρχουν πέντε περιοχές cloud που υποστηρίζονται από gpu στη λατινική αμερική, αλλά καμία από αυτές δεν διαθέτει πιο ισχυρή gpu από το v100 που κυκλοφόρησε το 2017. αυτές οι χώρες είναι σε θέση να χρησιμοποιούν την εδαφική τους δικαιοδοσία στους υπολογιστές για να ελέγχουν ποια συστήματα τεχνητής νοημοσύνης μπορούν να αναπτυχθούν τοπικά, αλλά έχουν μικρότερη επιρροή στην ανάπτυξη συστημάτων τεχνητής νοημοσύνης.

εκτός από το "computing north" και το "computing south", υπάρχει επίσης ένα "computing desert", ένας όρος που χρησιμοποιείται για να αναφέρεται σε όλες τις χώρες στον κόσμο που δεν διαθέτουν δημόσιο υπολογιστικό cloud ai (είτε για εκπαίδευση είτε για ανάπτυξη ).για αυτές τις χώρες, η μετάβαση σε υπηρεσίες τεχνητής νοημοσύνης που βασίζονται σε σύννεφο σημαίνει να βασίζονται σε υποδομές που έχουν αναπτυχθεί και έχουν αναπτυχθεί σε ξένες δικαιοδοσίες. οι υπολογιστικές έρημοι περιλαμβάνουν ορισμένες πλούσιες χώρες αλλά και όλες τις χώρες χαμηλού-μεσαίου και χαμηλού εισοδήματος που ταξινομούνται από το διεθνές νομισματικό ταμείο (δντ). ο υπολογισμός του αντίκτυπου στις χώρες της ερήμου μπορεί να ποικίλλει ανάλογα με το πόσο πλούσιες είναι. οι πλούσιες χώρες στην έρημο μπορεί να είναι σε θέση να αξιοποιήσουν τα άλλα πλεονεκτήματά τους - όπως η διπλωματική επιρροή στον υπολογιστικό βορρά και ο πλούτος επαρκής για την οικοδόμηση κυβερνητικής υπολογιστικής δύναμης - για να αντισταθμίσουν το μειονέκτημα της έλλειψης τοπικού δημόσιου cloud computing ai, αλλά υπολογιστικών ερήμων οι φτωχές χώρες έχουν λίγες προοπτικές να επηρεάσουν την τεχνητή νοημοσύνη μέσω της υπολογιστικής διακυβέρνησης.

παρόμοια με τους ερευνητές που παρατηρούν ένα «υπολογιστικό χάσμα» μεταξύ ακαδημαϊκού και κλάδου, η μελέτη παρατήρησε επίσης ένα παγκόσμιο υπολογιστικό χάσμα και η γεωγραφική κατανομή του δημόσιου cloud ai computing φαίνεται να αναπαράγει γνωστά πρότυπα παγκόσμιας ανισότητας. ξεκινώντας στα μέσα της δεκαετίας του 1990, οι συζητήσεις για την ψηφιοποίηση πρότειναν ότι η επιτυχής είσοδος στη νέα παγκόσμια «οικονομία της γνώσης» θα βασιζόταν σε άυλα πλεονεκτήματα όπως η γνώση και η δημιουργικότητα, αντί να βασίζεται στα υλικά περιουσιακά στοιχεία και τους πόρους που απαιτούνται στη βιομηχανική οικονομική εποχή. αυτό σημαίνει ότι οι αναπτυσσόμενες χώρες μπορούν να παρακάμψουν τις δαπανηρές επενδύσεις σε υποδομές και να μεταπηδήσουν κατευθείαν σε μια οικονομία βασισμένη στη γνώση. ωστόσο, η σημερινή συζήτηση για την τεχνητή νοημοσύνη τόνισε για άλλη μια φορά τον κρίσιμο ρόλο της φυσικής υποδομής, όπως τα εργοστάσια τσιπ, τα κέντρα δεδομένων και τα δίκτυα ενέργειας στην εθνική ανταγωνιστικότητα. εάν η πληροφορική γίνει βασικός κόμβος διακυβέρνησης, τότε αυτές οι φυσικές υποδομές μπορεί επίσης να αποδειχθούν κρίσιμες για τη διατήρηση ανεξάρτητων ρυθμιστικών εξουσιών (lehdonvirta 2023). επομένως, η υπολογιστική ισχύς μιας χώρας εξισώνεται σε κάποιο βαθμό με την πολιτική της ισχύ.

θα αλλάξει αυτό; εάν η συγκέντρωση των υπολογιστών τεχνητής νοημοσύνης υψηλής τεχνολογίας στις ηνωμένες πολιτείες και τον «βορρά υπολογιστών» οφείλεται απλώς στην τριβή στη διάχυση της καινοτομίας, τότε με την πάροδο του χρόνου ο κόσμος μπορεί σταδιακά να πλημμυρίσει από υπολογιστική ισχύ, μειώνοντας αυτό το χάσμα. οι αντίπαλοι της nvidia, όπως η amd και η intel, παίζουν catch-up όσον αφορά την απόδοση των chip. οι κινέζοι κατασκευαστές αναπτύσσουν επίσης τσιπ επεξεργασίας τεχνητής νοημοσύνης και λόγω των ελέγχων των εξαγωγών των ηπα, υπάρχει τεράστια εγχώρια ζήτηση για αυτά, σε συνδυασμό με την κρατική υποστήριξη, αυτό το χάσμα μπορεί σταδιακά να διευρυνθεί.

ωστόσο, εάν τα παρατηρούμενα γεωγραφικά μοτίβα εξηγούνται περισσότερο από την εξάρτηση από το μονοπάτι που προκύπτει από τα πλεονεκτήματα και τις οικονομίες κλίμακας, τότε η γεωγραφική συγκέντρωση, η περιφερειακή εξειδίκευση και ο διεθνής καταμερισμός της εργασίας μπορεί να γίνουν διαρκή χαρακτηριστικά της υπολογιστικής παραγωγής, όπως συμβαίνει σε πολλά άλλα βιομηχανίες ίδια.

γράψε στο τέλος

ποιος έχει τις περισσότερες gpu; η απάντηση σε αυτό το ερώτημα φαίνεται να είναι έτοιμη, αλλά πίσω από αυτό το ερώτημα βρίσκεται ουσιαστικά η άνιση κατανομή της υπολογιστικής ισχύος. το πώς να βελτιωθεί η ανισορροπία της υπολογιστικής ισχύος και να επιτραπεί σε περισσότερους ανθρώπους στις ερήμους υπολογιστών να απολαύσουν την ευκολία που προσφέρει η τεχνητή νοημοσύνη θα είναι πιθανότατα δύσκολο να λυθεί σε σύντομο χρονικό διάστημα.