🍎 Apples WWDC Konferenz: What are they cooking?!

Die langersehnte WWDC Konferenz von Apple fand gestern statt. Was dort passiert ist? Darum gehts jetzt!

Peanuts für heute:

• 🍎 Apples WWDC Konferenz: What are they cooking?!

• 🪖 Eric Schmidt entwickelt KI-Drohnen für das US Militär.

• 🛠️ Afforai ist ein All-In-One Tool für wissenschaftliches Arbeiten

🥜 Die größte Nuss:

🍎 Apples WWDC Konferenz: What are they cooking?!

Die lang ersehnte Entwicklerkonferenz von Apple, die WWDC 2024, fand gestern Abend statt. Die Gerüchteküche hatte ordentlich gebrodelt, denn Apple musste in Sachen KI endlich nachziehen. Nach einem Fallschirmsprung in den Apple Park hinein, schwang die Kamera galant auf Apple-CEO Tim Cook, der die Zuschauer auf dem Dach des Apple-HQ begrüßte. Um ihn herum tausende Solarpanels. Kein besonders toller Ausblick, aber die Message war klar: Leute, wir benutzen auch Solarstrom. Tim versprach von Anfang an, es gäbe „profound new intelligence capabilities“. Natürlich nimmt Apple das Wort AI nicht in den Mund. Sowas machen alle anderen, nicht Apple. Wie sie diesen Zwist umgehen? Dazu später mehr.

Dann musste man sich erst mal durch locker eine Stunde Nebensächlichkeiten zwingen. Die Vision Pro hat nun bald Spatial Fotos, also Fotos mit mehr Tiefe, die man sich mit ALL seinen Freunden angucken kann, die ebenfalls ein paar Tausender rumliegen hatten, um sich Bilder in VR anzusehen. Liest man den Sarkasmus raus? Ich will es hoffen. Ach ja... die Vision Pro kommt ab dem 12. Juli auch nach Deutschland. Was noch? In iOS 18 kann man nun einstellen, dass einzelne Apps nochmals FaceID verlangen. Also auch wenn jemand meinen Code kennt, kann er oder sie meine Nachrichten nicht lesen. Außerdem kann ich einzelne Apps verstecken, sodass man diese nur mit FaceID auf meinem iPhone installiert sehen kann. Sorry, aber gibt es einen anderen Usecase, als damit seine Seitensprünge zu verbergen? Tinder verstecken und WhatsApp blocken, oder? Wofür gibt es das sonst. Aber nun gut.
Cheating made simple – created by Apple.

UND dann kam endlich wieder Tim! Er kündigte an, dass Apple bereits seit Jahren an AI arbeitet. AI bei Apple müsse besonders mächtig sein, intuitiv, fest integriert, persönlich und vor allem sicher. Könnte ein Hieb in Richtung OpenSource sein, allerdings war das schon seit Jahren ein wichtiges Argument für Apple.

Und dann kam das große Announcement: Apple Intelligence. Abkürzung natürlich AI. Es könnte nicht mehr Apple sein. Alle reden von AI, aber wenn Apple von AI redet, meinen sie damit zwar das Gleiche, aber irgendwie auch nicht. Ich weiß nicht, ob das cheesy oder genial ist. Das lassen wir die Crowd-Intelligence entscheiden.

Und was macht Apple Intelligence jetzt? In Teilen ist es wirklich, was man sich immer gewünscht hat. Wenn man nun nach Nachrichten, Bildern oder Videos sucht, dann findet man sie. Ich kann also Siri fragen: “Wie hieß das Buch, das Person X mir letztes Jahr empfohlen hat?” Und Siri sucht diese Nachricht tatsächlich raus. Das Gleiche gilt für Dateien auf dem Mac. Wenn ich einen Blick auf meinen überfüllten Downloads-Ordner und Desktop werfe, dann ist das ein sehr willkommenes Feature.

Was noch? Jede KI-gestützte Schreib-App hat sich nach dieser Keynote in die Hose gemacht. Jede App auf dem iPhone und Mac, in der geschrieben wird, inklusive Notes und Mail, kann man nun mit Apple Intelligence korrigieren oder freundlicher oder besser umschreiben lassen. Nichts Bahnbrechendes, aber dadurch, dass es fest auf den Apple-Geräten integriert ist, wahnsinnig praktisch. Dazu gehört auch, dass Nachrichten nun zusammengefasst und automatisch priorisiert werden – die für mich wichtigste Nachricht also oben.

Was sehr beeindruckend war, waren die Smart Replies. Ich bekomme eine Mail mit verschiedenen Fragen, und die kann ich dann in einem Click-Menü beantworten, aus dem meine Antwort geschrieben wird. Es gibt auch einen neuen Nicht-Stören-Modus namens „Reduce Interruptions“ und es werden nur Nachrichten durchgelassen, von denen Siri ausgeht, dass sie wichtig für mich sind. Wenn das klappt, ebenfalls super.

Apple Intelligence macht auch einen kleinen Schritt in Richtung Agents. Es können also app-übergreifend und in persönlichen Kontexten Aktionen ausgeführt werden. Ich werde Siri zum Beispiel fragen können: “Wann kommt das Flugzeug meiner Mutter an und wann soll ich losfahren um sie abholen?” Siri sucht nun in den Nachrichten mit meiner Mutter nach Fluginformationen, vergleicht diese mit Real-Time-Flugdaten und rechnet meinen Weg zum Flughafen aus. Siri funktioniert jetzt auch besser, wenn man sich verspricht oder wenn man das Gewünschte länger erklärt. Und vor allem immer in meinem eigenen Kontext. Siri weiß, wer meine wichtigsten Freunde sind, wer meine Familie ist und so weiter. Dieser Kontext kann wahnsinnig mächtig sein für eine personal AI.

Wichtig war es Apple, ein Dutzend Mal auf Privacy hinzuweisen. Alle Daten werden, wenn möglich, on-Device verarbeitet und bei komplizierteren Aufgaben mit einem LLM, das auf eigenen, dafür angelegten privaten Servern bearbeitet wird. Über das Modell von Apple selbst wissen wir nichts. Aber das scheint Apple auch nicht zu stören. Denn wenn das Apple-LLM nicht weiter weiß, dann kommt OpenAI’s ChatGPT ins Spiel.

Apple und ChatGPT haben eine klare Partnerschaft. Wenn Siri nicht weiterweiß, gibt es die Anfrage an ChatGPT weiter. Das wird komplett kostenlos sein, dennoch wird es möglich sein, seinen PLUS-Account bei ChatGPT zu integrieren, um die Premium Features zu benutzen.

Hat das gereicht, um Apple im Thema KI nach vorn zu bringen? Die Investoren waren nicht wahnsinnig beeindruckt, aber ein großer Abfall war es nicht. Das hätte viel schlimmer laufen können. Ein paar Coding Features, die noch kommen werden, hatte Tim Cook noch zum Schluss angekündigt. Aber das kann noch dauern. Man kann auch sehr basic Bilder generieren und eigene Emojis entwerfen – aber das sieht nach Spielereien aus. Sam Altman jedenfalls twitterte sofort, dass er sich auf die Kooperation freut. Das glaube ich ihm und OpenAIs Schatzkammer auch. Was denkt Microsoft wohl darüber?

[Die ganze Keynote]

🛠️ Trai it out:

Afforai — Ein Tool das beim wissenschaftlichen Arbeiten, oder auch allgemein bei der Recherche unterstützt - mit eingebautem KI-Assistenten. Dieser hilft z.B. beim Zusammenfassen und Verstehen von Papern, aber vor allem auch beim Finden von relevanten Informationen. Schön gemacht und in ein sinnvolles “All-in-One”-Konzept integriert.

Weitere Neue Tools, Updates & Demos:

• Fax-KI — (Leider) kein Witz - mit dieser KI könnt ihr per Fax interagieren. Kommt natürlich aus 🇩🇪
  

• DeutschlandGPT — Ein KI-Assistent à la ChatGPT aber mit deutschem Datenschutz und Sprachverständnis
  

• NOX — (Waitlist) - dieser KI-Assistent sieht vielversprechend aus
  

• Mentals — Für Entwickler - Ein Coding Framework für KI-Agenten
  

• Harvey — KI für Anwaltskanzleien
  

• Luxi — Diese KI hilft dir dabei mit deinen Klamotten den richtigen Style zu treffen
  

🍭🍬 Gemischte Tüte

👩‍💻 Tech-News:

• Wie reagiert Elon auf Apple’s KI-Ankündigungen? Er will Apple Geräte wegen der Partnerschaft mit OpenAI in seinen Firmen verbieten. Na viel Erfolg dabei. Link
  

• Kling ist eine zumindest in den Demo-Videos sehr beeindruckend aussehende Video-KI aus China. Link
  

• Sam Altman besitzt keine Anteile an OpenAI, aber laut WSJ ist sein Startup-Investmentportfolio 2,8 Milliarden Dollar wert. Link
  

• Die interessanteste Demo bei Microsofts On-Device-AI-Event vor zwei Wochen war „Recall“, die versucht, alles, was man auf dem PC getan hat, über Screenshots zu suchen und diese mit einem LLM zu indizieren. Klingt aber leider auch nach hohem Sicherheitsrisiko, und jetzt überarbeitet Microsoft das Konzept und macht optional Link
  

• Eric Schmidt entwickelt KI-Drohnen für das US Militär. Link
  

• Zwei Berichte über Startups, die generative KI verwenden, um massenhaft „Nachrichten“-Inhalte zu produzieren, von denen viele mehr oder weniger erfunden sind. Link
  

• Analyse des Kampfes der US-Regierung, mit dem privaten Sektor um KI-Talente zu konkurrieren. Link
  

• WhatsApp hat mehrere neue ‘KI Funktionen’ für Unternehmen angekündigt, einschließlich eines Tools, das automatisch die Fragen von Kunden beantwortet. Link
  

• Ein weiterer Versuch herauszufinden, wann das Training von KI an menschlich generierten Daten enden wird. Link
  

• Der Umsatz von TSMC sprang im Mai um 30% auf 7,1 Milliarden Dollar, da Technologieunternehmen weiterhin um die begehrten KI-Chips des Unternehmens kämpften. Link

• Nach Anthropics Paper letzter Woche über die ‘inneren Machenschaften’ eines Sprachmodells hat OpenAI etwas Ähnliches veröffentlicht – erstellt vom mittlerweile aufgelösten Alignment-Team. Link
  

• Technische Analyse des generativen AI-Laufzeitsystems CoPilot, das Microsoft in Windows integriert. Link

👷 Work:

• Googles interner Einsatz von KI für Softwareentwicklung. Link
  

• McKinsey-Umfrage zur Einführung generativer KI in großen Unternehmen. Viele Versuche, aber die Aussage, dass viele Unternehmen generative KI in irgendeiner Abteilung „verwenden“, sagt uns fast nichts – wie viel wird es genutzt? Link

🆕 Neue Anwendungsfelder:

• Jemand hat behauptet, dass die Punktzahl von ChatGPT in der US Anwaltsprüfung möglicherweise überbewertet wurde. Link

🔐 Cybersecurity:

• Offenbar plant das Gesichtserkennungssystem in Shanghai, täglich 26 Millionen Gesichter zu erfassen, mit der Möglichkeit, diese mit einer zentralen Datenbank von 50-60 Millionen Menschen abzugleichen und nach Merkmalen wie "Geschlecht, Altersgruppe und uigurischer Ethnizität zu suchen. Link
  

• The Information berichtet, dass chinesische Unternehmen die Beschränkungen beim Kauf der neuesten Nvidia-Chips umgehen, indem sie einfach Trainingszeiten auf US-Cloud-Providern mieten. Link
  

• China baut KI-Trainingsdatensätze basierend auf Bildern von US-Kriegsschiffen auf. Link

🖼️ Kreativindustrie:

• Nach heftiger Kontroverse um die neuen Adobe ABGs stellt Adobe stellt klar, dass es seine Firefly Gen KI-Modelle nicht auf Kundeninhalten trainiert. Link

🧂 Salty Memes:

w