Μια πιο προσεκτική ματιά στους Big-Name Developers της Google πίσω GPT-4 και ποιες νεοφυείς επιχειρήσεις λειτουργούν σήμερα
Εν συντομία
Οι δημιουργοί της αρχιτεκτονικής νευρωνικών δικτύων Transformer άφησαν την Google για να ανοίξει τις δικές τους επιχειρήσεις, οι οποίες έχουν συγκεντρώσει εκατομμύρια δολάρια και η αξία τους ξεπερνά το 1 δισεκατομμύριο δολάρια.
Εάν παρακολουθήσατε τη σειρά "Silicon Valley" και δεν χάσατε το τελευταίο επεισόδιο, τότε θυμηθείτε πώς τελείωσαν όλα: η ομάδα συγκεντρώνεται είκοσι χρόνια αργότερα, αναπολώντας το παρελθόν.
Ας δούμε τι απέγιναν οι συγγραφείς της αρχιτεκτονικής νευρωνικών δικτύων Transformer που βρίσκεται στη βάση ChatGPT και GPT-4. Η ομάδα ήταν featured στο άρθρο "Η προσοχή είναι το μόνο που χρειάζεστε” από την Google Research (Ιούνιος 2017). Οι συγγραφείς παρατίθενται παρακάτω με την ίδια σειρά όπως στο άρθρο της Google.
Ασίς Βασβάνι εγκατέλειψε την Google στα τέλη του 2021 για να ξεκινήσει Έμπειρος, η οποία έχει συγκεντρώσει 415 εκατομμύρια δολάρια και η αξία της μέχρι στιγμής ξεπερνά το 1 δισεκατομμύριο δολάρια. Ωστόσο, ο Ashish έφυγε από το Adept πριν από λίγους μήνες - τον Δεκέμβριο του 2022, αμέσως μετά την κυκλοφορία του ChatGPT— και ίδρυσε μια νέα startup. Προς το παρόν, η startup είναι ακόμα ανώνυμη και δεν είναι σαφές πόσα άτομα έχουν ενταχθεί στην εταιρεία και σε τι εργάζονται.
Πίσω στη Google, ο Vaswani εργάστηκε στο σχεδιασμό του μοντέλου στα αρχικά στάδια και προγραμμάτισε το όλο θέμα.
Noam Shazeer εργάστηκε στη Google για περισσότερα από 20 χρόνια, από τον Δεκέμβριο του 2000. Τον Οκτώβριο του 2021, παραιτήθηκε και ίδρυσε την startup Χαρακτήρας.ai. Έκτοτε, η εταιρεία έχει ήδη συγκεντρώσει 200 εκατομμύρια δολάρια και έφτασε σε αποτίμηση σχεδόν 1 δισεκατομμυρίου δολαρίων. Σύμφωνα με το LinkedIn, εκεί εργάζονται περίπου 20 υπάλληλοι, οπότε η αξία ανά δολάριο είναι εντυπωσιακή. Ήταν ο Noam που εισήγαγε την ιδέα των διαφορετικών «κεφαλιών» στον μηχανισμό προσοχής.
| Διαβάστε περισσότερα: Πώς να το χρησιμοποιήσετε: ChatGPT (GPT-4) δωρεάν για πάντα |
Νίκη Παρμάρ, η μόνη γυναίκα συν-συγγραφέας του άρθρου, ήταν ερευνήτρια προσωπικού στην ομάδα του Google Brain μέχρι τον Νοέμβριο του 2021. Στη συνέχεια, εντάχθηκε στον Ashish Vaswani στο Adept. Ωστόσο, όπως ήδη γνωρίζουμε, δεν έμειναν για πολύ καιρό εκεί και έφυγαν μαζί για να ξεκινήσουν ένα νέο έργο. Η Niki έχει κάνει πολλά πειράματα εκπαίδευσης και επικύρωσης μοντέλων.
Jakob Uszkoreit — πολλοί τον αποκαλούν τον κύριο εγκέφαλο πίσω από την εφεύρεση της αρχιτεκτονικής του Transformer. Ήταν αυτός που πρότεινε την αντικατάσταση των επαναλαμβανόμενων δικτύων με έναν παρόμοιο μηχανισμό «προσοχής» και άρχισε να δημιουργεί πρωτότυπα την πρώτη προσέγγιση. Έφυγε από την Google στα μέσα του 2021 και ίδρυσε Διορατική Ζωή, όπου η ομάδα εργάζεται στη μοντελοποίηση νευρωνικών δικτύων του mRNA. Το mRNA είναι αυτό που (μερικές φορές) στηρίζει τα εμβόλια (για παράδειγμα, το εμβόλιο Covid-19 της Pfizer-BioNTech).
Λάιον Τζόουνς είναι το μόνο άτομο σε αυτήν τη λίστα που εργάζεται στην Google μέχρι σήμερα. Σύμφωνα με τον ίδιο, ήταν αυτός που πρότεινε τον τίτλο του άρθρου, το οποίο έγινε μιμίδιο και έδωσε αφορμή για δεκάδες άλλα άρθρα με το μοτίβο «X is all you need». Ήταν επίσης υπεύθυνος για τη βελτιστοποίηση των συμπερασμάτων μοντέλων και της οπτικοποίησης για πειράματα και άρθρα.
| Διαβάστε περισσότερα: Τα καλύτερα εργαλεία ανίχνευσης περιεχομένου AI το 2023 |
Aidan Gomez εγκατέλειψε την Google το φθινόπωρο του 2019 για να ιδρύσει Cohere.ai. Η εταιρεία συνεχίζει να εργάζεται σε μοντέλα γλώσσας. ορισμένα από τα προϊόντα τους είναι παρόμοια με τις περιπτώσεις χρήσης που είχαν οι άνθρωποι τις πρώτες ημέρες μετά την κυκλοφορία του ChatGPT. Κατάφερε να προσελκύσει περισσότερα από 400 εκατομμύρια δολάρια σε επενδύσεις και να αυξήσει την εταιρεία σε σχεδόν 200 υπαλλήλους.
Λούκας Κάιζερ, μετά από περισσότερα από επτά χρόνια στη Google, έφυγε το καλοκαίρι του 2021 για να εργαστεί OpenAI. Το αρχικό άρθρο αναφέρει ότι ο Lukasz ήταν υπεύθυνος για την ανάπτυξη και τη βελτιστοποίηση του κώδικα. Είναι ένας από τους συν-συγγραφείς του TensorFlow, μιας βιβλιοθήκης για τη δημιουργία και την εκπαίδευση νευρωνικών δικτύων. Είναι ένας πολύ δυνατός μηχανικός - και τώρα εργάζεται GPT 👀 Ως μέρος της εργασίας στο Transformer, συνεργάστηκε με τον Aidan Gomez για τη βελτίωση της βάσης κωδικών και την επιτάχυνση των επαναλήψεων στην ερευνητική εργασία (μέσω της ευκολότερης αλληλεπίδρασης και δημιουργίας πρωτοτύπων).
Ηλία Πολοσουκίν άφησε την Google το 2017, πριν από την κυκλοφορία του άρθρου, για να ιδρύσει Κοντά, ένα πρωτόκολλο blockchain που είναι ουσιαστικά ανταγωνιστής του Ethereum. Η τρέχουσα αποτίμησή του είναι περίπου 2 δισεκατομμύρια δολάρια και σε μόλις έξι χρόνια, περισσότερα από 375 εκατομμύρια δολάρια συγκεντρώθηκαν ως επενδύσεις.
Διαβάστε περισσότερα για το AI:
Αποποίηση ευθυνών
Σύμφωνα με το Οδηγίες του έργου Trust, σημειώστε ότι οι πληροφορίες που παρέχονται σε αυτήν τη σελίδα δεν προορίζονται και δεν πρέπει να ερμηνεύονται ως νομικές, φορολογικές, επενδυτικές, χρηματοοικονομικές ή οποιαδήποτε άλλη μορφή συμβουλής. Είναι σημαντικό να επενδύσετε μόνο ό,τι έχετε την πολυτέλεια να χάσετε και να αναζητήσετε ανεξάρτητες οικονομικές συμβουλές εάν έχετε οποιεσδήποτε αμφιβολίες. Για περισσότερες πληροφορίες, προτείνουμε να ανατρέξετε στους όρους και τις προϋποθέσεις, καθώς και στις σελίδες βοήθειας και υποστήριξης που παρέχονται από τον εκδότη ή τον διαφημιστή. MetaversePost δεσμεύεται για ακριβείς, αμερόληπτες αναφορές, αλλά οι συνθήκες της αγοράς υπόκεινται σε αλλαγές χωρίς προειδοποίηση.
Σχετικά με το Συγγραφέας
Ο Damir είναι ο αρχηγός της ομάδας, ο διευθυντής προϊόντων και ο συντάκτης στο Metaverse Post, καλύπτοντας θέματα όπως AI/ML, AGI, LLMs, Metaverse και Web3-σχετικά πεδία. Τα άρθρα του προσελκύουν ένα τεράστιο κοινό άνω του ενός εκατομμυρίου χρηστών κάθε μήνα. Φαίνεται να είναι ειδικός με 10ετή εμπειρία στο SEO και το ψηφιακό μάρκετινγκ. Ο Damir έχει αναφερθεί στο Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto και άλλες εκδόσεις. Ταξιδεύει μεταξύ των ΗΑΕ, της Τουρκίας, της Ρωσίας και της ΚΑΚ ως ψηφιακός νομάδας. Ο Damir απέκτησε πτυχίο στη φυσική, το οποίο πιστεύει ότι του έχει δώσει τις δεξιότητες κριτικής σκέψης που απαιτούνται για να είναι επιτυχής στο συνεχώς μεταβαλλόμενο τοπίο του Διαδικτύου.
Περισσότερα άρθρα
Ο Damir είναι ο αρχηγός της ομάδας, ο διευθυντής προϊόντων και ο συντάκτης στο Metaverse Post, καλύπτοντας θέματα όπως AI/ML, AGI, LLMs, Metaverse και Web3-σχετικά πεδία. Τα άρθρα του προσελκύουν ένα τεράστιο κοινό άνω του ενός εκατομμυρίου χρηστών κάθε μήνα. Φαίνεται να είναι ειδικός με 10ετή εμπειρία στο SEO και το ψηφιακό μάρκετινγκ. Ο Damir έχει αναφερθεί στο Mashable, Wired, Cointelegraph, The New Yorker, Inside.com, Entrepreneur, BeInCrypto και άλλες εκδόσεις. Ταξιδεύει μεταξύ των ΗΑΕ, της Τουρκίας, της Ρωσίας και της ΚΑΚ ως ψηφιακός νομάδας. Ο Damir απέκτησε πτυχίο στη φυσική, το οποίο πιστεύει ότι του έχει δώσει τις δεξιότητες κριτικής σκέψης που απαιτούνται για να είναι επιτυχής στο συνεχώς μεταβαλλόμενο τοπίο του Διαδικτύου.
