Ultramans neuestes Interview beim OpenAI London Developer Day wurde endlich vollständig veröffentlicht!
Während des 40-minütigen Interviews sprach Altman nicht nur über die zukünftige Modellentwicklungsrichtung von OpenAI, Agent und seine angesehensten Konkurrenten (dies sind die Themen, die zuvor in Teilen durchgesickert waren), sondern auch über das Skalierungsgesetz, die Halbleiterlieferkette, Es wurden mehr als zehn Fragen gestellt und schnell beantwortet, beispielsweise zu den Kosten des Modellwettbewerbs und der Frage, welche Altersgruppe von Mitarbeitern eingestellt werden sollte .
Auf die Frage, worauf er in der Position des CEO von OpenAI vollständig vorbereitet war und was nicht.
Ultraman sagte ohne zu zögern: Produkt!
Insgesamt liegt meine Schwäche beim Produkt.
Jetzt braucht das Unternehmen mich, um in diesem Bereich eine stärkere und klarere Vision zu haben.
Interessant ist, dass der 39-jährige Ultraman, wenn er zu seinem 23. oder 24. Lebensjahr zurückkehren dürfte, darüber nachdenken würde , etwas mit KI in vertikaler Richtung zu tun .
Zum Beispiel KI-Tutoren, die Menschen beim Lernen helfen, oder KI-Anwälte, KI-CAD-Ingenieure usw.
Der vollständige Text dieses wunderbaren Interviews ist unten beigefügt. Einige Absätze wurden gelöscht, ohne die ursprüngliche Bedeutung zu ändern.
Zum Abschluss gibt es noch 11 kurze Fragen und Antworten~
Kurzübersicht zum Inhalt
Interview mit Ultraman beim OpenAI London Developer Day
F1: Wenn wir in die Zukunft blicken, wird OpenAI in Zukunft mehr Modelle wie o1 haben, oder können wir Modelle mit größeren Parametern erwarten?
A: Natürlich hoffen wir, umfassend voranzukommen, aber die Richtung der Inferenzmodelle ist uns besonders wichtig . Wir hoffen, mit Argumenten viele Dinge lösen zu können, auf die wir uns seit vielen Jahren gefreut haben.
Beispielsweise können Inferenzmodelle zu neuen wissenschaftlichen Erkenntnissen beitragen und dabei helfen, schwierigen Code zu schreiben – was meiner Meinung nach die Welt in großem Maße voranbringen kann.
Sie können sich also auf die rasante Verbesserung der O-Serienmodelle freuen, die von großer Bedeutung sein wird.
F2: Wie können Sie als nicht-technischer Gründer, auch basierend auf den Zukunftsplänen von OpenAI, KI-Anwendungen durch die Entwicklung von No-Code-Tools erstellen und erweitern?
A: Dieser Tag wird es auf jeden Fall geben.
Unser erster Schritt besteht darin, diejenigen, die wissen, wie man Code schreibt, produktiver zu machen, aber am Ende hoffen wir immer noch, wirklich hochwertige No-Code-Tools bereitzustellen.
Es gibt einige sinnvolle (No-Code-)Tools, aber es wird einige Zeit dauern, ein Startup komplett ohne Code aufzubauen.
F3: Einer der Gründer fragte: Derzeit ist OpenAI offensichtlich irgendwo im Technologie-Stack. Ist es Zeitverschwendung, viel Zeit in die Optimierung des RAG-Systems zu investieren, da OpenAI diesen Teil der Anwendung irgendwann abdecken wird?
A: Normalerweise antworten wir, dass OpenAI sein Bestes geben wird und glauben fest daran, dass wir die von uns eingeführten Modelle immer besser machen werden.
Wenn Sie ein Unternehmen aufbauen, das seinen Lebensunterhalt damit verdient, „kleine Fehler zu beheben“, wird es keinen großen Einfluss auf Sie haben, ob OpenAI seine Arbeit reibungslos und korrekt vorantreibt.
Anders ausgedrückt: Wenn Ihr Unternehmen erfolgreicher wird, weil „die Modelle von OpenAI immer besser werden“, werden Sie sich bestimmt darüber freuen.
Wenn Oracle Ihnen beispielsweise heimlich sagt, dass o4 von OpenAI leistungsfähiger sein wird, als Sie sich vorstellen, werden Sie auf jeden Fall glücklich sein.
Wenn Sie natürlich darauf bestehen, einen Bereich auszuwählen, in dem o1-preview keine gute Leistung erbringt, um sich damit zu befassen und sich kaum darauf zu stützen, werden Sie sicherlich das Gefühl haben, dass unser Modell der nächsten Generation nicht so gut funktionieren wird, wie Sie es sich vorgestellt haben.
——Das möchte ich Startups sagen.
Wir glauben, dass sich OpenAI auf einem sehr steilen Verbesserungskurs befindet und die Mängel des aktuellen Modells durch Nachzügler behoben und ausgeglichen werden.
F4: Wo wird OpenAI aus der Sicht eines Gründers wahrscheinlich erfolgreich sein (und nicht andere)? Ich glaube, dass auch Anleger dieses Problem verstehen wollen und niemand möchte durch Investitionen Geld verlieren.
A: OpenAI wird einen Marktwert in Billionenhöhe schaffen. Insbesondere wird es durch den Einsatz von KI zur Entwicklung von Produkten und Dienstleistungen neue Höchstwerte schaffen.
Wir hoffen, ein Modell auf den Markt zu bringen, das so großartig ist, dass sich die Benutzer keine Sorgen machen müssen und einfach das tun können, was sie wollen.
Im Zeitalter von GPT-3.5 wetten 95 % der Startups und Menschen, dass das Modell nicht besser wird.
Tatsächlich haben wir schon lange vorhergesehen, dass GPT-4 mit dem umgehen kann, was sie tun, und es besser macht, und dass es keine Fehler wie bei den Modellen in der 3.5-Ära geben wird. Wenn Unternehmer/Entwickler lediglich einen Mangel einer bestimmten Generation von Modellen ausgleichen, werden Sie feststellen, dass dieser Mangel immer unbedeutender wird.
Hat jeder vergessen, wie schlecht die Modelle von vor ein paar Jahren waren? Tatsächlich ist es erst ein paar Jahre her.
Aber Möglichkeiten gibt es überall, daher scheint das Patchen vorhandener Modelle auf den ersten Blick eine gute Gelegenheit zu sein (ich werde also kein KI-Lehrassistent oder KI-medizinischer Berater).
Deshalb habe ich gesagt, dass am Anfang 95 % der Leute definitiv geglaubt haben, dass sich das Modell nicht mehr verbessern würde, und nur 5 % der Leute darauf gewettet haben, dass das Modell immer besser werden würde.
Aber ich denke, das ist nicht mehr der Fall.
Jeder denkt jetzt, dass die Geschwindigkeit, mit der sich GPT-3.5 zu GPT-4 entwickelt, die Norm sein wird, aber das ist nicht der Fall. Das Gute daran ist, dass unsere internen Mitarbeiter sehr fleißig sind und wir wissen, was uns erwartet.
F5: Masayoshi Son von SoftBank sagte, dass KI jedes Jahr einen Wert von 9 Billionen US-Dollar schaffen wird, was seiner Meinung nach jährliche Ausgaben von 9 Billionen US-Dollar ausgleichen wird. Was denken Sie, wenn Sie diese Aussage sehen?
A: Von der Größenordnung her ist es jetzt fast dasselbe. KI wird offensichtlich einen hohen Kapitalaufwand verursachen und gleichzeitig viel Wert schaffen.
Das passiert bei jeder großen technologischen Revolution, und KI ist offensichtlich eine davon.
Nächstes Jahr wird ein Jahr sein, in dem OpenAI energisch in Richtung der nächsten Systemgeneration voranschreitet.
Wir haben gerade darüber gesprochen, wann der No-Code-Software-Agent erscheinen wird. Ich kann keinen genauen Zeitpunkt nennen, aber Sie können sich vorstellen, wie viel Wirtschaftswachstum dies für die Welt bringen wird, wenn jemand den Wert der Software beschreiben kann, die er für das gesamte Unternehmen haben möchte .
Bei gleichem Wert, umfassender verfügbar, leichter zugänglich und kostengünstiger wäre das sehr leistungsstark.
Es gibt andere Beispiele, wie das Gesundheitswesen und die Bildung, die ich bereits erwähnt habe, zwei Bereiche, die für die Welt Billionen Dollar wert sind.
Wenn KI dies wirklich auf eine andere Art und Weise als in der Vergangenheit erreichen kann, kommt es meiner Meinung nach überhaupt nicht auf die konkrete Menge an wirtschaftlichem Wert an, die sie mit sich bringt, geschweige denn darauf, ob die Einführung 9 Billionen oder 1 Billion beträgt.
Sicher ist jedoch, dass der durch KI geschaffene Wert wirklich unglaublich ist.
F6: Open Source ist ein sehr wichtiger Ansatz. Welche Rolle wird Open Source Ihrer Meinung nach in der Zukunft der künstlichen Intelligenz spielen? Gibt es bei OpenAI eine interne Diskussion zum Thema „Sollten wir alle Modelle oder einige davon als Open Source veröffentlichen?“?
A: Es besteht kein Zweifel, dass Open-Source-Modelle im Ökosystem sehr wichtig sind und es auch sehr gute Open-Source-Modelle auf dem Markt gibt.
Aber ich denke, es macht auch Sinn, gute Dienste und APIs bereitzustellen – es macht Sinn und die Leute werden entscheiden, was für sie funktioniert.
F7: Was halten Sie heute von der Definition von Agent? Was ist für Sie ein Agent?
A: Ich habe dieses Problem noch nicht vollständig berücksichtigt, aber ich kann dem Agenten eine langfristige Aufgabe geben und seine Ausführung so wenig wie möglich überwachen.
F7: Glauben Sie, dass die Ansichten der Leute über Agent tatsächlich falsch sind?
A: Vielleicht haben wir nicht alle ein genaues Verständnis, aber wir alle kennen einige wichtige Indikatoren.
Wenn zum Beispiel über KI-Agenten gesprochen wird, die in ihrem Namen handeln, geben sie oft als Beispiel an, dass sie den Agenten bitten, eine Restaurantreservierung vorzunehmen. Der Agent kann online eine Reservierung vornehmen oder das Restaurant anrufen, um eine Reservierung vorzunehmen.
Tatsächlich kann Agent einiges tun, um Zeit zu sparen. Aber ich denke, das wirklich Interessante ist, den Agenten etwas tun zu lassen, was Menschen nicht tun oder können.
Anstatt beispielsweise ein bestimmtes Restaurant anzurufen, um eine Reservierung vorzunehmen, kontaktiert der Agent 300 Restaurants, um herauszufinden, welches für mich am besten geeignet ist. Es wäre noch cooler, wenn alle von Ihnen getätigten Anrufe von einem Agenten entgegengenommen würden! Denn der Mensch kann so etwas nicht parallel im großen Maßstab vorantreiben.
Nehmen wir ein interessanteres Beispiel.
Der Agent ist möglicherweise eher ein sehr kluger Kollege. Sie arbeiten mit ihm an einem Projekt, das 2 Tage oder 2 Wochen dauert. Der Agent kann es selbst erledigen und bei Bedarf mit Ihnen kommunizieren über ein Projekt.
F7: Ändert sich dadurch grundlegend die Art und Weise, wie SaaS-Preise berechnet werden? SaaS wird normalerweise nach der Anzahl der Benutzer bepreist (Platzgebühr) , aber jetzt ersetzt KI tatsächlich die Arbeit. Wie sehen Sie die zukünftige Preisgestaltung?
A: Ich kann nur raten, ich weiß es wirklich nicht.
Ich kann mir eine Welt vorstellen, in der man verlangen könnte: „Ich möchte, dass 1/10/100 GPUs ständig an mir arbeiten“, und der Preis würde nicht pro Sitzplatz berechnet, sondern auf der Rechenmenge basieren, die zur kontinuierlichen Verarbeitung dieses Problems erforderlich ist .
F7: Müssen wir spezifische Modelle für Aengts-Nutzungsszenarien erstellen?
A: Es erfordert sicherlich viel Infrastruktur, aber ich bin der Meinung, dass das o1-Modell den Weg zu einem Modell weist, das Agentenaufgaben gut ausführen kann.
F8: Jeder sagt, dass Modelle an Wert verlieren und die Kommerzialisierung von Modellen weit verbreitet ist. Was sind Ihre Antworten und Gedanken dazu? Wenn wir die ständig steigende Kapitalintensität berücksichtigen, die für die Schulung von Modellen erforderlich ist, werden wir dann eine Umkehrung der Meinung erleben, dass „dies ein Bereich ist, in dem viel Geld benötigt wird, aber nur sehr wenige Leute es tatsächlich tun können“?
A: Models verlieren tatsächlich an Wert, aber das bedeutet nicht, dass sie die Schulungskosten nicht wert sind. Ganz zu schweigen vom positiven Gesamteffekt beim Trainieren eines Modells, der es Ihnen ermöglicht, das nächste Modell besser zu trainieren.
Die tatsächlichen Einnahmen, die wir mit dem Modell erzielen, rechtfertigen die Investition – natürlich kann das nicht jeder, und es gibt viele Leute, die das Rad neu erfinden, wenn es um das Training von Modellen geht.
Wenn das Modell, das Sie trainieren, hinterherhinkt oder Sie kein überzeugendes und wertvolles Produkt haben, kann es schwierig sein, eine Kapitalrendite zu erzielen.
OpenAI hat großes Glück, ChatGPT zu haben, da Hunderte Millionen Benutzer unsere Modelle verwenden.
Selbst wenn die Kosten hoch sind, können wir diese astronomische Zahl auf eine große Anzahl von Benutzern verteilen und sie verwässern.
F9: Wie differenzieren sich OpenAI-Modelle im Laufe der Zeit weiter? Auf welche Bereiche würden Sie sich am liebsten auf die Ausweitung dieser Differenzierung konzentrieren?
A: Inferenz ist derzeit unser wichtigster Schwerpunkt, und ich denke, dass dies den nächsten großen Sprung in der Wertschöpfung ermöglichen wird.
Wir werden die Modelle also in verschiedenen Aspekten verbessern, multimodal arbeiten und weitere Funktionen hinzufügen , die unserer Meinung nach für die Art und Weise, wie Menschen diese Modelle nutzen möchten, wichtig sind.
F9: Wie sehen Sie Argumentation und multimodale Arbeit, einschließlich der Herausforderungen und Ziele, die Sie erreichen möchten?
A: Ich hoffe, dass es wahr wird. Dies erfordert natürlich einige Anstrengungen.
Aber Menschen im Säuglings- und frühen Kindesalter, bevor sie sich mit der Sprache auskennen, können immer noch ziemlich ausgefeiltes visuelles Denken leisten.
F9“: Wie werden sich die visuellen Fähigkeiten mit dem neuen Denkparadigma von o1 erweitern?
A: Ohne etwas zu verraten, gehe ich davon aus, dass bildbasierte Modelle schnell wachsen werden.
Sie können mit schnellen Fortschritten bei den Bildmodellen rechnen .
F10: Wie erzielt OpenAI Durchbrüche im Kernargumentieren? Besteht die Notwendigkeit, Reinforcement Learning als Ansatz oder andere neue Technologien neben Transformers voranzutreiben?
A: Das sind zwei Fragen: Wie machen wir das und was kommt nach dem Transformer.
Erstens ist es unser Geheimnis, wie wir es machen.
Einer der Gründe dafür, dass es wirklich einfach ist, etwas zu kopieren, von dem bekannt ist, dass es funktioniert, liegt darin, dass man darauf vertrauen kann, dass man weiß, was möglich ist. Nachdem Forscher etwas getan haben, können Sie es reproduzieren, auch wenn Sie nicht wissen, wie sie es getan haben. Dies kann in Replikaten von GPT-4 und o1 überprüft werden.
Das wirklich Schwierige und Worauf ich an OpenAI am meisten stolz bin, ist, dass wir immer wieder etwas Neues und völlig Unbewiesenes tun.
Viele Institutionen und Organisationen behaupten, dazu in der Lage zu sein, aber tatsächlich tun es nur wenige, auch außerhalb des KI-Bereichs.
In gewisser Weise denke ich, dass dies eine der wichtigsten Investitionen in den menschlichen Fortschritt ist.
Ich freue mich darauf, nach meiner Pensionierung ein Buch zu schreiben, ein Buch darüber, was ich gelernt habe, und meine Erfahrungen darüber zu teilen, wie man eine Organisation und Unternehmenskultur aufbaut, die dies leisten kann (im Gegensatz zu einer Organisation, die einfach die Arbeit von anderen kopiert). andere).
Ich denke, die Welt braucht mehr Organisationen wie diese, auch wenn ihre Zahl durch den menschlichen Einfallsreichtum begrenzt sein wird.
Aber die Realität ist , dass viel Talent verschwendet wird, weil die Welt nicht gut darin ist, Organisationen wie diese aufzubauen. Aber ich wünschte immer noch, dass es mehr Organisationen wie diese gäbe.
F11: Wie wird Talent verschwendet?
A: Es gibt viele talentierte Menschen auf der Welt, aber weil sie für schlechte Unternehmen arbeiten oder aus anderen Gründen, können sie ihr volles Potenzial nicht ausschöpfen.
Eines der Dinge, die mich an der KI am meisten begeistern, ist die Hoffnung, dass sie es uns ermöglichen wird, jedem besser dabei zu helfen, sein höchstes Potenzial auszuschöpfen.
Dieses Ziel ist noch lange nicht erreicht.
Ich bin sicher, dass viele Menschen auf der Welt hervorragende KI-Forscher wären, wenn ihre Lebensverläufe etwas anders verlaufen würden.
F12: In den letzten Jahren haben Sie eine unglaubliche Erfahrung gemacht, die zu einem unglaublich schnellen Wachstum geführt hat. Sie haben erwähnt, dass Sie nach Ihrer Pensionierung Memoiren schreiben werden. Wenn Sie also auf die letzten 10 Jahre zurückblicken, welche bedeutenden Veränderungen haben sich in Ihrem Führungsstil ergeben?
A: Für mich ist das Außergewöhnlichste an den letzten Jahren die Geschwindigkeit, mit der sich die Dinge verändert haben.
In einem normalen Unternehmen haben Sie genügend Zeit, um den Umsatz von null auf 100 Millionen US-Dollar zu steigern, dann von 100 Millionen US-Dollar auf 1 Milliarde US-Dollar und schließlich auf 10 Milliarden US-Dollar. Sie müssen diesen Prozess nicht in zwei Jahren erreichen. Wir sind definitiv kein Silicon-Valley-Startup im herkömmlichen Sinne;
Wir mussten so schnell dort sein, und es gab viele Dinge, für die ich mehr Zeit hätte aufwenden sollen, um sie zu lernen (was ich aber nicht tat).
F12: Gibt es etwas, das Sie nicht wissen und von dem Sie sich gewünscht hätten, dass Sie mehr Zeit damit verbracht hätten, es zu lernen?
A: Lassen Sie mich eines sagen: „Lassen Sie das Unternehmen sich darauf konzentrieren, die nächsten zehn Mal zu wachsen“, anstatt nur um 10 % zu wachsen.
Wie viel Aufwand ist dafür erforderlich? Wie schwierig ist das?
Wenn es das nächste Wachstum von 10 % ist, wird das, was vorher funktioniert hat, immer noch funktionieren. Aber damit ein Unternehmen mit einem Umsatz von 1 Milliarde US-Dollar auf 10 Milliarden US-Dollar wachsen kann, kann man nicht einfach wiederholen, was man zuvor getan hat. Es sind viele Veränderungen erforderlich.
In einer Welt, in der die Menschen nicht einmal die Zeit haben, sich die Grundlagen anzueignen, weil das Wachstum so schnell ist, habe ich den Aufwand ernsthaft unterschätzt, der nötig ist, um zum nächsten Schritt voranzuschreiten, ohne alles andere, was wir tun müssen, aus den Augen zu verlieren.
F13: Keith Rabois (Silicon Valley-Investor, ehemaliger Vizepräsident von Paypal) sagte, dass man sehr junge Leute einstellen sollte, unter 30 Jahren, was ihm Peter Thiel (Gründer von Paypal) beigebracht hat, um ein großartiges Unternehmensgeheimnis aufzubauen. Ich bin gespannt, was haltet Ihr von dieser Perspektive? Wie gelingt es Ihnen, die Einstellung junger, energischer, aber unerfahrener Leute mit der Einstellung erfahrenerer Leute in Einklang zu bringen?
A: Als wir OpenAI gründeten, war ich etwa 30 Jahre alt, also nicht besonders jung.
Aber bisher scheint der Fortschritt von OpenAI ziemlich gut zu sein~
F13: Was halten Sie davon, Menschen unter 30 Jahren einzustellen? Sind sie jung, energisch, ehrgeizig, aber weniger erfahren (und einige sind vielleicht reich) ?
A: Die offensichtliche Antwort ist, dass Sie erfolgreich sein können, indem Sie zwei Arten von Menschen einstellen.
Unser Team hat kürzlich einen jungen Mann eingestellt, der großartige Arbeit leistet. Ich verstehe nicht, wie diese Leute in so jungen Jahren so gute Arbeit leisten können? ! Aber genau das ist es.
Wenn Sie solche Menschen finden, bringen sie erstaunliche neue Perspektiven, Energie und mehr mit.
Wenn es andererseits darum geht, einige der komplexesten und teuersten Computersysteme zu entwerfen, die je gebaut wurden, bin ich nicht bereit, auf jemanden zu wetten, der gerade erst am Anfang steht.
Es muss also beides sein.
Ich denke, was Sie wirklich wollen, ist ein extrem hoher Standard an Talenten aus Menschen jeden Alters und eine Strategie, die besagt, dass ich nur jüngere Leute oder nur ältere Leute einstellen werde.
Eines der Dinge, die ich an Y Combinator am meisten schätze, ist, dass „mangelnde Erfahrung nicht gleichbedeutend mit mangelndem Wert ist.“
Es gibt einige vielversprechende Menschen, die schon früh in ihrer Karriere enorme Werte schaffen können, und es ist großartig, dass wir auf diese Menschen setzen sollten.
F15: Jemand hat mir gesagt, dass das Modell von Anthropic manchmal besser für Codierungsaufgaben geeignet ist. Halten Sie diese Einschätzung für fair? Wann sollten Entwickler OpenAI anstelle anderer Modellanbieter wählen?
A: Ja, Anthropic hat ein sehr beeindruckendes Modell zum Schreiben von Code.
Ich denke , dass Entwickler die meiste Zeit mehrere Modelle verwenden werden , und da Agenten immer wichtiger werden, weiß ich nicht, wie sich das in Zukunft entwickeln wird.
Ich denke, KI wird überall sein, und die Art und Weise, wie wir derzeit darüber reden oder denken, fühlt sich nicht richtig an. Wenn ich es klar beschreiben müsste, würden wir von Modellen zu Systemen übergehen, aber das dauert einige Zeit.
F16: Wenn wir Skalenmodelle betrachten, wie viele Modelliterationen glauben Sie, wird das Skalierungsgesetz noch gelten? Man ging allgemein davon aus, dass es nicht lange anhalten würde, aber es scheint länger gedauert zu haben, als man dachte.
A: Ich verstehe, dass der Kern dieser Frage lautet: „Wird die Verbesserung der Modellfähigkeiten dieselbe sein wie in der Vergangenheit?“
Ich glaube, die Antwort lautet „Ja“, und das wird noch lange so bleiben.
F16: Haben Sie jemals daran gezweifelt?
A: Überhaupt nicht.
F16: Warum?
A: Wir sind auf Verhalten gestoßen, das wir nicht verstanden haben, wie etwa fehlgeschlagene Trainingsläufe oder verschiedene andere Dinge.
Wenn wir uns dem Ende eines Paradigmas nähern, müssen wir das nächste herausfinden.
F16: Welches ist am schwierigsten zu kontrollieren?
A: Als wir GPT-4 studierten, gab es ein sehr schwieriges Problem und wir wussten wirklich nicht, wie wir es lösen sollten.
Obwohl wir endlich eine Lösung fanden, wussten wir lange Zeit nicht, wie wir mit dem Projekt weitermachen sollten.
Später wandten wir uns der Richtung zu, die uns schon seit langem interessierte, nämlich o1 und Inferenzmodelle, aber davor hatten wir einen langen und mühsamen Forschungsweg hinter uns.
F17: Ist es schwierig, die Moral aufrechtzuerhalten? Wie können Sie die Moral aufrechterhalten/steigern?
A: Wie Sie wissen, freuen sich viele unserer Mitarbeiter sehr über den Aufbau von AGI, was eine sehr direkte Motivation darstellt.
Niemand erwartet, dass der Weg zum Erfolg einfach und geradlinig ist.
Es gibt ein gutes Sprichwort, das wahrscheinlich so lautet: „Ich bete nie, dass Gott auf meiner Seite ist, ich bete immer und hoffe, dass ich auf Gottes Seite sein werde.“
In gewisser Weise fühlt es sich an, als ob man auf der Seite der Engel steht, wenn man auf Deep Learning setzt, und obwohl man auf dem Weg auf einige große Stolpersteine stößt, wird man irgendwann feststellen, dass es immer zu klappen scheint.
Deshalb wirkt sich ein tiefer Glaube daran sehr positiv auf die Moral des Teams aus.
F18: Kann ich eine wirklich seltsame Frage stellen? Ich habe kürzlich ein großartiges Zitat gehört: „Die schwersten Dinge im Leben sind nicht Eisen oder Gold, sondern die Entscheidungen, die nicht getroffen werden.“ Welche nicht getroffene Entscheidung stört Sie am meisten?
A: Die Entscheidungen, die ich treffe (und auch nicht treffe), variieren jeden Tag, aber keine davon ist eine „große“ Entscheidung.
Es gibt große Dinge wie die Frage, ob wir auf das nächste Produkt wetten sollen oder nicht, oder ob wir unseren nächsten Computer auf die eine oder andere Weise bauen möchten – das sind so etwas wie einseitige Portale mit hohen Einsätzen, die ich wie alle anderen aufschieben werde.
Aber das Schwierige ist vor allem, dass es jeden Tag etwas gibt, das mich dazu bringt, Ja zu sagen, selbst wenn die Abstimmung 51:49 ist. Diese Dinge mögen an sich 51:49 sein, und ich glaube nicht, dass ich es besser machen kann als andere, aber ich muss die endgültige Entscheidung treffen.
F18: Wen rufen Sie normalerweise an, wenn Sie in diesen 51:49-Angelegenheiten Entscheidungen treffen müssen?
A: Keine konkrete Person.
Ich denke, es wäre falsch, sich bei allem auf eine Person zu verlassen . Der richtige Ansatz für mich besteht darin, mich von 15 oder 20 Personen beraten zu lassen, von denen jeder über ein gutes Gespür oder einen guten Hintergrund in einem bestimmten Bereich verfügt.
Anstatt sich für alles auf eine Person zu verlassen, können Sie die besten Experten auf diesem Gebiet anrufen.
F19: Als nächstes möchte ich über die Halbleiterlieferkette sprechen. Wie besorgt sind Sie über die Halbleiter-Lieferkette?
A: Ich weiß nicht, wie ich diese Besorgnis quantifizieren soll.
Zugegebenermaßen gibt es Bedenken, aber es ist nicht meine Hauptsorge, aber es gehört zu den oberen 10 % aller Bedenken.
Wir stecken in zu großen Schwierigkeiten, um uns darüber Sorgen zu machen.
Bis zu einem gewissen Grad dachte ich, dass alles klappen würde, aber im Moment kommt es mir so vor, als gäbe es ein sehr komplexes System, bei dem jede Ebene unabhängig voneinander funktioniert. Das Gleiche gilt für OpenAI und für jedes Team.
Um Ihnen das Beispiel der Halbleiter zu geben: Sie müssen die Verfügbarkeit von Strom mit guten Netzwerkentscheidungen und der Fähigkeit, rechtzeitig genügend Chips zu erhalten, in Einklang bringen. Außerdem müssen Sie alle möglichen Risiken recherchieren und darauf vorbereitet sein, sich mit ihnen auseinanderzusetzen, damit Sie Sie sind nicht völlig überrumpelt oder unvorbereitet. Es handelt sich um ein unausnutzbares System.
„Lieferkette“ klingt zu sehr nach einer Pipeline, aber die Komplexität des gesamten Ökosystems auf jeder Ebene habe ich noch nie zuvor in einer Branche gesehen.
Nun, das ist wahrscheinlich meine größte Sorge.
F20: Viele Menschen vergleichen diese KI-Welle mit dem Internet, insbesondere im Hinblick auf Aufregung und Begeisterung. Ich denke, dass die Höhe der ausgegebenen Gelder zwischen den beiden immer noch etwas unterschiedlich ist. Larry Ellison (Gründer von Oracle) sagte, es würde 100 Milliarden US-Dollar kosten, den Startpunkt des grundlegenden Modellrennens zu erreichen. Stimmen Sie dem zu? Ist das vernünftig?
A: Nein, ich denke, es wird weniger kosten.
Die Kosten für den Wettbewerb im Basismodellbereich werden weniger als 100 Milliarden US-Dollar betragen.
Ein interessantes Phänomen ist, dass jeder gerne frühere technologische Revolutionen als Beispiele verwendet, um über neue Technologien zu sprechen. Ich denke, das ist eine schlechte Angewohnheit, aber ich verstehe, warum Menschen das tun.
Meiner Meinung nach sind die Analogien, die Menschen zur Herstellung von KI verwenden, besonders schlecht. Es ist offensichtlich, dass das Internet und die KI sehr unterschiedlich sind.
Sie haben etwas über die Kosten gesagt und darüber, ob man 100 Milliarden US-Dollar ausgeben muss, um wettbewerbsfähig zu sein, aber das Charakteristische an der Internet-Revolution ist, dass sie damals wirklich einfach zu starten war, und für viele Unternehmen ist diese Welle nur eine Fortsetzung des Internets .
Es ist, als ob jemand diese KI-Modelle herstellt und man damit alle möglichen tollen Dinge bauen kann, aber wenn man versucht, die KI selbst zu bauen, ist das eine ganz andere Geschichte.
Ein weiteres Beispiel, das oft zum Vergleich von KI herangezogen wird, ist Elektrizität. Aus vielen Gründen halte ich das auch nicht für sinnvoll.
Meine Lieblingsanalogie ist der Transistor.
Es war eine neue physikalische Entdeckung mit unglaublichen Skalierungseigenschaften, die sich schnell überall verbreitete.
Wir können uns jetzt Dinge wie das Mooresche Gesetz vorstellen, eine Reihe von Gesetzen für künstliche Intelligenz, die uns sagen, wie schnell sie besser wird.
Jeder profitiert davon, die gesamte Tech-Branche profitiert davon. Es gibt viele Transistoren in Produkten und Dienstleistungen, aber man betrachtet sie nicht wirklich als Transistorunternehmen.
Es handelt sich um einen sehr komplexen, sehr teuren industriellen Prozess mit einer riesigen Lieferkette.
Auf der Grundlage dieser sehr einfachen Entdeckung der Physik hat es auf lange Sicht ein enormes Wirtschaftswachstum gegeben – auch wenn man die meiste Zeit nicht darüber nachdenkt.
Sie sagen nicht „Das ist ein Transistorprodukt“, Sie denken nur „Okay, dieses Ding kann Informationen für mich verarbeiten“.
Sie ignorieren sogar ganz selbstverständlich die Existenz von Transistoren.
Schnelle Fragen und Antworten Easter Egg
F1: Wenn Sie jetzt Anfang 20 wären und heute unsere Infrastruktur nutzen würden, was würden Sie tun?
A: In einem bestimmten KI-gestützten vertikalen Bereich würde ich einen KI-Lehrassistenten oder den besten KI-Anwalt, KI-medizinischen Berater oder etwas Ähnliches wählen, das ich mir vorstellen kann.
F2: Wenn Sie ein Buch schreiben würden, wie würden Sie es nennen?
A: Ich habe noch keinen fertigen Titel, und ich habe das Buch bis auf einige Dinge, worüber ich schreiben möchte, noch nicht vollständig konzipiert.
Aber ich denke, es wird um das menschliche Potenzial gehen.
F3: Was hat im Bereich der KI nicht genügend Aufmerksamkeit erhalten, dem aber jeder mehr Zeit widmen sollte?
A: Eine Art KI, die Ihr gesamtes Leben verstehen kann. Ich würde gerne viele verschiedene Möglichkeiten sehen, dieses Problem anzugehen.
Es muss nicht wirklich ein unendlicher Kontext sein, aber irgendwie können Sie einen KI-Agenten haben, der alles über Sie weiß und Zugriff auf alle Ihre Daten hat.
F4: Was hat dich letzten Monat überrascht, Sam?
A: Eine Studie, über die ich nicht sprechen kann, aber sie ist erschreckend gut.
F5: Welchen Konkurrenten respektieren Sie am meisten? Warum sie?
A: Ich würde sagen, dass ich derzeit jeden in diesem Bereich respektiere.
Ich denke, dass es in diesem gesamten Bereich sehr talentierte und sehr fleißige Menschen gibt.
Ich weiche der Frage nicht aus, ich kann darauf hinweisen, dass es überall supertalentierte Leute gibt, die supertolle Arbeit leisten.
F6: Sagen Sie mir, was ist Ihre Lieblings-OpenAI-API?
A: Ich finde die neue Echtzeit-API großartig. Wir haben jetzt ein riesiges API-Geschäft mit vielen guten Dingen.
F7: Wen respektieren Sie heute im KI-Bereich am meisten?
A: Lassen Sie mich das Cursor-Team begrüßen.
Es gibt viele Leute, die unglaubliche Arbeit im Bereich KI leisten, aber was den Einsatz von KI und die Bereitstellung wirklich erstaunlicher Erlebnisse durch KI angeht, die eine Menge Wert schaffen, setzt Cursor die Teile auf eine Weise zusammen, an die die Leute noch nie gedacht haben. und ich finde das ziemlich erstaunlich.
Diese Antwort schließt Personen von OpenAI aus, sonst müsste ich eine lange Liste nennen.
F8: Wie sehen Sie den Kompromiss zwischen Latenz und Genauigkeit?
A: Es ist ein Maßstabsstandard zwischen Latenz und Genauigkeit erforderlich. Wir machen schnelle Fragen und Antworten, und ich versuche nicht, es zu beschleunigen, aber ich versuche, es nicht zu lange zu dauern.
In diesem Fall wünschen Sie sich eine (geringere) Latenz. Wenn Sie neue wichtige Entdeckungen in der Physik machen wollten, wären Sie bereit, noch ein paar Jahre zu warten.
Die Antwort ist, dass der Benutzer diesen Kompromiss kontrollieren sollte.
F9: Ich glaube, dass sich jeder in Bezug auf seine Führung unwohl fühlen wird. Wenn Sie als Leiter und CEO von OpenAI Ihre Führungsbereiche verbessern möchten, welche Aspekte möchten Sie am meisten verbessern?
A: Die Liste ist lang … Ich versuche herauszufinden, wer die Nummer eins ist.
Was mich diese Woche am meisten stört, ist, dass ich mir über die Details unserer Produktstrategie noch unsicherer bin als in der Vergangenheit.
Ich denke, das Produkt im Allgemeinen ist meine Schwäche, und jetzt braucht das Unternehmen eine stärkere, klarere Vision von mir in diesem Bereich.
Wir haben einen großartigen Produktvorsprung und ein großartiges Produktteam, aber ich wünschte, ich wäre in diesem Bereich stärker.
F10: Sie haben Kevin Weil eingestellt (als CPO) . Ich kenne Kevin seit vielen Jahren und er ist großartig. Was lässt Sie denken, dass Kevin ein Weltklasse-Produktführer ist?
A: „Disziplin“ ist das erste Wort, das mir in den Sinn kommt.
Wir werden uns auf die Dinge konzentrieren, zu denen wir „Nein“ sagen, wir werden wirklich versuchen, im Namen des Benutzers zu sagen, warum wir etwas tun oder nicht tun werden, und wirklich versuchen, desillusioniert zu sein.
F11: Sam, Sie haben viele Interviews geführt.
Abschließend möchte ich über unseren Fünf-Jahres-Ausblick und unseren Zehn-Jahres-Ausblick für OpenAI sprechen.
A: Wenn wir Recht haben, könnten wir innerhalb der nächsten zwei Jahre problemlos mit dem Aufbau von Systemen beginnen, um die Wissenschaft voranzubringen.
In fünf Jahren wird der technologische Fortschritt von OpenAI unglaublich schnell sein und kann als verrückt bezeichnet werden.
Der zweite Punkt ist, dass sich die Gesellschaft selbst eigentlich kaum verändert hat.
So wie man vor fünf Jahren alle fragte, ob ein Computer den Turing-Test bestehen würde, schüttelten alle den Kopf.
Wenn Sie sagen, ein Orakel sagt Ihnen, was passieren wird, werden sie sagen: Oh, das wird eine verrückte, erstaunliche soziale Veränderung sein.
Nun haben wir den Turing-Test tatsächlich bestanden und die Gesellschaft hat sich nicht viel verändert.
Alles verging wie im Flug.
Ich erwarte, dass es weiterhin Fortschritte gibt, wissenschaftlichen Fortschritt, Fortschritte, das Übertreffen aller Erwartungen auf eine Art und Weise, die ich für gut und gesund halte, während sich die Gesellschaft nicht so sehr verändert.