Νέα

한어Русский языкEnglishFrançaisIndonesianSanskrit日本語DeutschPortuguêsΕλληνικάespañolItalianoSuomalainenLatina

Θυμάστε πέρυσι, η Meta κυκλοφόρησε το Segment Anything (SAM);

ΧρησιμοποιείταιΔιαίρεση εικόνας μοντέλο. Προηγουμένως, για διαφορετικούς τύπους αντικειμένων, υπήρχαν τοίχοι μεταξύ μοντέλων κατάτμησης. Για παράδειγμα, ένα μοντέλο που θα μπορούσε να τμηματοποιήσει τους χοίρους και τους σκύλους πιθανότατα δεν θα μπορούσε να τμηματοποιήσει τα μήλα και τα αχλάδια. . .

Μόλις βγήκε το SAM λεγόταν «διαίρει τα πάντα», και πολλοί το έλεγανΤο οπτικό πεδίο του υπολογιστή πρόκειται να διαταραχθεί。

Είναι πράγματι ακριβώς όπως το όνομα Μπορεί να τμηματοποιήσει το ίδιο αντικείμενο από την εικόνα, οικείο ή όχι, και μπορεί επίσης να κόψει οποιοδήποτε αντικείμενο στην εικόνα.

Την εποχή που κυκλοφόρησε για πρώτη φορά, τα νέα ήταν αρκετά σπάνια στον κλάδο. Μέσα σε λίγες μέρες, πολλά βίντεο δημοσιεύτηκαν στον ιστότοπο Β, διδάσκοντας στους χρήστες του Διαδικτύου πώς να αναπτύξουν το SAM.

Επιπλέον, οι χρήστες του Διαδικτύου χρησιμοποιούν το SAM για να φτιάχνουν τα μαλλιά τους το ένα μετά το άλλο, και ακόμη και η αλλαγή του χρώματος των μαλλιών τους θεωρείται βασικό.

Μπορείτε επίσης να δέσετε τα ξανθά μαλλιά σας ή να τους δώσετε ένα dreadlock.

Μπορεί επίσης να αντιμετωπιστεί σταθερά στον τομέα της μόδας Όχι μόνο μπορεί να αλλάξει το σακάκι, αλλά και η εσωτερική φθορά μπορεί να αλλάξει κατά βούληση.

Ακόμη και ο Jim Fan, ένας επιστήμονας τεχνητής νοημοσύνης στη Nvidia, χρησιμοποιεί " Χρόνος GPT-3 ” για να το περιγράψω.

Και μόλις τις προηγούμενες μέρες, η Meta ανακοίνωσε ότι η δεύτερη γενιά του SAM κυκλοφόρησε.

Αυτή τη φορά δεν μπορείτε μόνο να επεξεργαστείτε φωτογραφίες, αλλά και βίντεο και οι δυνατότητες είναι ισχυρότερες και πιο ευέλικτες από την προηγούμενη γενιά.

Το πιο σημαντικό, ο Xiao Zha εξακολουθεί να είναι ένας καλός άνθρωπος που θα το κάνει μέχρι τέλους, και το SAM2 είναι επίσης ανοιχτού κώδικα και δωρεάν στη χρήση. Το demo έχει επίσης ανακοινωθεί και μπορείτε να το παίξετε στην επίσημη ιστοσελίδα. Ο Shichao το δοκίμασε επίσης και διαπίστωσε ότι το αποτέλεσμα ήταν πολύ καλό.

Όσον αφορά την ακρίβεια του βίντεο κλιπ, το SAM2 μπορεί ήδη να κληθείΕπιλέξτε όπου κάνετε κλικ.

Ανεβάσαμε πρώτα ένα βίντεο "μια ομάδα ψαριών που κολυμπούν στο νερό" και στη συνέχεια μπορείτε να το χειριστείτε απευθείας επιλέγοντας τον στόχο που θέλετε να επιλέξετε.

Και αν πιστεύετε ότι υπάρχουν πάρα πολλοί στόχοι για κατάργηση, μπορείτε επίσης να κάνετε κλικ στο κουμπί "Κατάργηση".Αφαιρέστε την περίσσεια, για παράδειγμα, ο Shichao μπορεί να επιλέξει με ακρίβεια τα σημάδια ενός από τα ψάρια.

Κάντε κλικ στο Επόμενο για να δείτε το εφέ Όχι μόνο εντόπισε με ακρίβεια τα σημάδια στα καθορισμένα ψάρια, αλλά ακόμα κι αν τελείωσε το πλαίσιο, τα επιλεγμένα σημάδια δεν έτρεχαν σε άλλα ψάρια.

Ας δούμε το βίντεο του skateboarding Εάν θέλετε να διαλέξετε τους ανθρώπους σε αυτό μεμονωμένα, το SAM2 μπορεί επίσης να το κάνει στα χέρια σας.

Όχι μόνο αυτό, ακόμα κι αν υπάρχει στο βίντεοΠολλά παρόμοια αντικείμενα , το SAM2 δεν θα μπερδευτεί κατά την επιλογή. Όπως αυτό το παιχνίδι που αλλάζει κύπελλα, ανεξάρτητα από το πώς το αλλάζετε, εξακολουθεί να είναι εντός του εύρους του SAM2.

Και ανάμεσα στις μικρές μπάλες που μοιάζουν όλες ίδιες, μπορεί να ακολουθήσει και τη μπάλα που επιλέξαμε.

Σε αυτήν την περίπτωση, ας κάνουμε το SAM2 λίγο πιο δύσκολο. Δεν υπάρχουν πρόσφατα οι Ολυμπιακοί Αγώνες του Παρισιού.

Στη συνέχεια, ανεβάστε ένα βίντεο με τον Xiaopang και τον Zhang Benzhi να παίζουν ο ένας εναντίον του άλλου και δείτε αν το SAM2 μπορεί να ξεθάψει τις μπάλες του πινγκ πονγκ «υψηλής ταχύτητας τρεξίματος».

Δεν περίμενα ότι έχει όντως δύο πινέλα, ακόμα κι ανΗ οθόνη κόπηκε στη μέση, όταν η μπάλα του πινγκ πονγκ επιστρέψει ξανά, το SAM2 μπορεί να το συλλάβει με ακρίβεια.

Επιπλέον, σε αυτό το demo που κυκλοφόρησε από το Meta, μπορούμε να παρακολουθήσουμε και το βίντεοΚάντε μερικές απλές επεξεργασίες, εκτός από την αλλαγή των επιλεγμένων αντικειμένων, μπορείτε επίσης να προσαρμόσετε το φόντο.

Για παράδειγμα, στο παραπάνω παιχνίδι, το World Super LeagueΤο φόντο διαγράφεται , και πρόσθεσε επίσης ένα προσκήνιο στη διαδικασία της μάχης τους. Από τη μεταφόρτωση του βίντεο μέχρι την εξαγωγή του βίντεο, χρειάστηκαν λιγότερο από πέντε λεπτά.

Εάν πιστεύετε ότι η μπάλα του πινγκ πονγκ δεν είναι αρκετά ευδιάκριτη, μπορούμε επίσης να τη χρησιμοποιήσουμεΑλλαγή σε πακέτο emoticon, ή δώστε του μια ξεχωριστή έμφαση.

Αν υπάρχει υπόβαθρο μπορούμε να το δώσουμε και εμείςΠροσθέστε κείμενο και φίλτραΚάτι τέτοιο.

Ωστόσο, υπάρχουν ακόμα στιγμές που το SAM2 ανατρέπεται. Για παράδειγμα, σε αυτό το βίντεο, αυτό που επέλεξε η World Super League είναι ένας τροχός στο μπροστινό μέρος του skateboard.

Αλλά όταν το skateboard έφυγε από το οπτικό πεδίο και επέστρεψε, το SAM2 με κάποιο τρόπο κόλλησε στους τροχούς στο πίσω μέρος.

Επίσης, όταν η ταχύτητα είναι πολύ γρήγορη, οι λεπτομέρειες του βίντεο που κλιπ από το SAM2 θα είναι επίσης κακές.λίγο τραχύ。

Αλλά αυτά δεν είναι μεγάλα προβλήματα.Χειροκίνητη ρύθμιση。

Ο Shichao ζήτησε επίσης από τους φίλους που κάνουν το post-production του κακού βίντεο. Συνήθως χρησιμοποιούν το roto brush που συνοδεύει το AE για να κόψουν το βίντεο χειροκίνητα.

Εκτός από τη διαδικασία απόδοσης, συνήθως χρειάζονται δέκα ή είκοσι λεπτά για να αποκοπεί ένα βίντεο ενός λεπτού. Εάν το αντικείμενο που θέλετε να διαλέξετε βγει από το πλαίσιο κατά τη διάρκεια της διαδικασίας, θα πρέπει να διαλέξετε ξανά αυτό το πλαίσιο όταν επιστρέψετε.

Συγκριτικά, τουλάχιστον όσον αφορά την αποτελεσματικότητα της επεξεργασίας βίντεο,SAM2 Είναι μια δύσκολη απόφαση.

Τέλος πάντων, σε λίγες μόνο μέρες, το UP άρχισε να εμφανίζεται στον ιστότοπο Β.Χρησιμοποιήστε το SAM2 για να το συνδυάσετε με άλλο AITutorials, βίντεο για το ντύσιμο, την αλλαγή φόντου, τα πάντα.

Προηγουμένως, η Meta χρησιμοποιούσε επίσης τις λειτουργίες της γενιάς SAM στα δικά της μέσα κοινωνικής δικτύωσης για να προσθέσει φόντο στις φωτογραφίες. Ίσως οι λειτουργίες SAM2 να ενσωματωθούν στο INS.

Αλλά μην νομίζετε ότι το SAM μπορεί να χρησιμοποιηθεί μόνο στα πεδία της επεξεργασίας φωτογραφιών και της επεξεργασίας βίντεο. Έχει επίσης πολλές χρήσεις σε άλλα πεδία.

Για παράδειγμα, η γενιά SAM βασίζεται αποκλειστικά σεΠροσδιορίστε εικόνεςΜε τις δυνατότητές της έχει ήδη μπει στους τομείς της θάλασσας, του περιβάλλοντος και της ιατρικής.

Δεν φτιάχνω ψέματα, όλα αυτά είπε ο Meta Τον περασμένο χρόνο, η SAM όχι μόνο μπόρεσε να αναλύσει τους κοραλλιογενείς υφάλους μέσω εικόνων, αλλά μπορεί επίσης να χρησιμοποιήσει δορυφορικές εικόνες για ανακούφιση από καταστροφές. Μπορεί επίσης να τμηματοποιήσει τις κυτταρικές εικόνες, για να βοηθήσει στην ανίχνευση του καρκίνου του δέρματος.

Αλλά τώρα το αναβαθμισμένο SAM2 όχι μόνο μπορεί να κάνει όλες αυτές τις εργασίες, αλλά και να βρει κάποιες νέες χρήσεις.

Για παράδειγμα, μπορεί να βοηθήσει με τεχνητή νοημοσύνη βίντεο και αυτόνομη οδήγησηδεδομένα εκπαίδευσηςΚάντε σχολιασμούς.

Λίγο πιο προχωρημένο, από το βίντεο που τράβηξε το drone,Παρακολούθηση ζώων υπό εξαφάνιση, για να βοηθήσει κατά τη διάγνωση και τη θεραπείαΤοποθέτηση της λαπαροσκοπικής κάμεραςπεριοχές, κ.λπ., είναι όλες οι εργασίες που μπορεί να κάνει το SAM2.

Μερικοί ευφάνταστοι χρήστες του Διαδικτύου είπαν στο X ότι το SAM2 μπορεί επίσης να κάνει τις συσκευές XR πιο ακριβείς. . .

Εν ολίγοις, σε μια εποχή που η ανάπτυξη των μοντέλων παραγωγής ανθίζει, η Meta μπορεί επίσης να επιστήσει την προσοχή όλων στη SAM, η οποία μπορεί να θεωρηθεί ως παράπλευρη απόδειξη της δύναμής της. Ο Shichao ανυπομονεί επίσης να χρησιμοποιήσει αυτή τη λειτουργία στις κοινωνικές πλατφόρμες μια μέρα.

Παρεμπιπτόντως, όταν κυκλοφόρησε το SAM2 πριν από δύο ημέρες, ο Xiao Zha εμφανίστηκε επίσης για να εξηγήσει το θέμα του "ανοιχτού κώδικα".

Αυτό δεν είναι μόνο από καλοσύνη, αλλά μετά από ανοιχτό κώδικα, με τη βοήθεια όλων, μπορεί επίσης να βοηθήσειΦτιάξτε το δικό σας οικοσύστημα。

Αλλά ανεξάρτητα από το τι, άλλοι κατασκευαστές θα πρέπει να μάθουν από αυτό το μοτίβο.

Γράψτε ένα άρθρο:σκίουρος

επεξεργασία: Jiang Jiang

Καλλιτεχνικός συντάκτης:Xuanxuan

Εικόνες, πηγές：

Μέτα, Ολυμπιακοί Αγώνες Παρισιού