This Copilot Feature is Awesome & did Apple drop the ball? (+ more AI News!)

Es war wieder eine interessante Woche in der Welt der KI. Meta hat eine wahnsinnige Akquisition getätigt. Wir haben angefangen, Videos über Midjourney zu empfangen und euer Kühlschrank ist jetzt mit mehr KI ausgestattet. Wir werden in den heutigen KI News auf all das und mehr eingehen. Aber beginnen wir zunächst mit den wahrscheinlich größten Neuigkeiten dieser Apples. WWDC, auch bekannt als World Wide Developers Conference. Dies ist eine jährliche Veranstaltung, die Apple jedes Jahr veranstaltet und auf der alle Fortschritte vorgestellt werden, die das Unternehmen seit letztem Jahr an seiner Software erzielt hat. Die WWDC des letzten Jahres war voll mit KI Ankündigungen. Dieses Jahr war es etwas weniger ein Fest der KI AnkündigungEN, aber es wurde trotzdem einiges über KI gesprochen. Die wichtigste KI Funktion war wohl die Live Übersetzung. Die Live Übersetzung kann Nutzern helfen, beim Schreiben von Nachrichten oder Sprechen in verschiedenen Sprachen zu kommunizieren. Gerätebasierte Apple Modelle ermöglichen die Nutzung der in Nachrichten, FaceTime und telefonintegrierten Funktion. Ihre Unterhaltungen werden also nicht direkt an eine Cloud gesendet und dann an sie zurückgesendet. Schauen wir uns das mal an. Hier ist ein Screenshot aus einer Nachricht, in der jemand eine Nachricht auf Spanisch geschickt hat, die dann automatisch ins Englische übersetzt wurde. Diese Person hat, glaube ich, auf Englisch geantwortet und die Antwort wurde ihr dann automatisch auf Spanisch geschickt. Hier ist ein weiterer Screenshot, der jemanden zu zeigen scheint, der über Facetime spricht. Es sieht so aus, als würde die Konversation automatisch übersetzt, während sie geführt wird. Und hier können wir es in einem echten Telefongespräch sehen, bei dem die Übersetzung direkt auf dem Bildschirm erfolgt, während die Person auf Lautsprecher geschaltet ist. Sie kann also mit jemandem auf Deutsch sprechen und der Text wird direkt auf ihrem Telefon transkribiert und übersetzt, damit sie das Gespräch fortsetzen kann. Sie haben auch eine neue Genuji Funktion vorgestellt, bei der man zwei Bilder wie eine Glühbirne und ein Faultier eingeben kann und sie dann in ein Faultier mit Glühbirne umwandelt. Wer das also braucht, wird es schon bald haben. Sie haben dem Bildspielplatz ein paar neue Stile hinzugefügt, sodass man stattdessen mehr KI verwenden kann. Sie haben ihre visuelle Intelligenz vorgeführt. In diesem kleinen Clip hier sieht man ein Bild mit einer kleinen Lampe. Sie haben diese Lampe markiert und dann wurde Etsy durchsucht, um eine ähnliche Lampe zu finden.

Ich liebe Lampen. Für mich ähnelt das sehr der Suchfunktion von Google, die jetzt auch bei Apple eingeführt wird. Man kann ChatGPT auch nach Dingen fragen, die man auf dem Bildschirm sieht. Sie stellen eine z. B. In welchen Rocksongs dieses Instrument vorkommt. Auf dem Bildschirm ist dann eine Mandoline zu sehen. Dann antwortet ChatGPT mit verschiedenen Songs, in denen Mandolinen vorkommen. In einem anderen Beispiel haben sie einen Screenshot von einem Poster für die Sebastapole Bluegrass Weste gemacht, auf dem Datum und Uhrzeit stehen. Mit Hilfe von Key konnten sie Datum, Uhrzeit und Ort zu einem Kalender hinzufügen. Das Apple WatchOS wurde um einige neue Key Funktionen erweitert, insbesondere fürs Training. Sie hilft einem beim Laufen, seine Spliss zu berechnen. Es gratuliert dir, wenn du neue Meilensteine und Dinge wie diese erreichst. Und falls du Entwickler bist, haben sie außerdem angekündigt, dass dir jetzt die On Device Apple Intelligence zur Verfügung steht. Du kannst also tatsächlich Apps entwickeln, die Apples interne Modelle auf dem Telefon nutzen. Wenn du also eine App entwickeln möchtest, die sich mit einer Key verbindet, die nicht wie ChatGPT oder Gemini oder ähnliches ist, die die Cloud anpingen müssen, kannst du jetzt tatsächlich Apps entwickeln, die dieses integrierte Key Modell im iPhone verwenden. Sie haben auch gezeigt, dass Kurzbefehle über Key Funktionen verfügen. Wir sehen das Beispiel auf dem Bildschirm, wo sie eine Reihe von Notizen haben und dann siehst du rechts einen Workflow, den sie in Kurzbefehle integriert haben. Dieser kann die Kurzbefehl Eingabe tatsächlich in Text umwandeln und dann verwendet er das Private Cloud Computing Modell, um nach wichtigen Punkten in der Vorlesungsaufzeichnung zu suchen und fügt dann die Antworten hier zu den Notizen hinzu. Du kannst also jetzt diese kleinen Automatisierungen erstellen, die KI in deinem Automatisierungs Workflow nutzen. Natürlich gab es auf der WWDC noch eine ganze Reihe weiterer Ankündigungen. Das waren nur die wichtigsten KI Ankündigungen. Apple hat diese Woche außerdem einige Forschungsergebnisse veröffentlicht, die zeigen, dass das Unternehmen an einem eigenen neuen Bilderzeugungsmodell arbeitet, das mit Modellen wie Dolly oder Midjourney vergleichbar ist. Das ist nur eine Forschungsarbeit. Sie ist noch nicht öffentlich verfügbar, erschien aber am 6. Juni Wenn wir hier heranzoomen, können wir einige der Bilder sehen, die es generieren kann. Hier sind noch ein paar mehr und wenn ich ehrlich bin, ist es den anderen Bilderzeugungsmodellen, die es gibt, ziemlich ebenbürtig. Ich würde nicht sagen, dass es etwas Bahnbrechendes oder Besonderes ist, das wir nicht schon einmal gesehen haben, aber dieses Modell stammt nun einmal von Apple.

Entschuldigung.

In den letzten Apple Neuigkeiten haben sie auch Vision OS angekündigt. Das ist das aktualisierte Betriebssystem für Apple Vision Pros. Wenn Sie also zu den wenigen Menschen gehören, die ein Apple Vision Pro besitzen, stehen Ihnen einige neue Funktionen zur Verfügung. Eine der coolsten und am häufigsten genannten Funktionen ist wahrscheinlich die Möglichkeit, Widgets zu platzieren, die in verschiedenen Bereichen ihrer Umgebung bestehen bleiben. Sie können beispielsweise ein Fenster an die Wand hängen, das aussieht, als würde es nach Hawaii blicken. Wenn Sie dann dorthin zurückkehren, ist dieses Fenster immer da, selbst wenn Sie Ihr Vision Pro aus und wieder einschalten. Dies funktioniert auch mit Dingen wie Kalendern, die Sie an die Wand hängen oder an einer bestimmten Stelle in Ihrem Zimmer schweben lassen können. Von diesem Zeitpunkt an ist dieser Kalender immer da, wenn Sie Ihr Vision Pro eingeschaltet haben, wenn Sie dorthin schauen. Es wurden auch einige Funktionen hinzugefügt, die die Zusammenarbeit verbessern, da Sie und Ihre Kollegen tatsächlich dasselbe sehen. Sie können also gemeinsam Filme ansehen, sich unterhalten und ähnliches. Klare Verbesserung für Apple Vision Pro dringend nötig. Die räumlichen Szenen wurden verbessert. Wenn man also solche Umgebungsszenen aufnimmt, sieht es viel dreidimensionaler aus und man kann sich ein bisschen besser umsehen. Außerdem hat Apple Vision Pro noch ein paar weitere ziemlich coole Updates erhalten, darunter mehr Key wie die Möglichkeit, den Image Playground direkt in Apple Vision Pro zu verwenden. Diese Woche haben wir außerdem von einem potenziell großen Schritt von Meta gehört. Das ist zwar noch nicht zu 100 Prozent bestätigt, aber offenbar plant Meta fast 15 Milliarden US Dollar für einen 49-prozentigen Anteil an Scaleye zu zahlen. Erinnert ihr euch an letztes Wochenvideo? Ich sprach über ein KI Unternehmensnetzwerk, verflochten wie ein Spinnennetz. Scaleye ist ein Unternehmen, das Trainingsdaten kennzeichnet und So ziemlich alle KI Unternehmen verwenden die gekennzeichneten Trainingsdaten von Scaleye. Unternehmen, die die Arbeit von Scaleye tatsächlich nutzen, sind also Unternehmen wie OpenAI, Microsoft, Nvidia und natürlich Meta. Deshalb ist das meiner Meinung nach so ein großer Deal, denn dieses Unternehmen das mit allen großen Keyplayern zusammenarbeitet, wird nun die gleiche Art von Beziehung haben, die beispielsweise OpenAI und Microsoft miteinander haben. Meta wird nun zu 49 Prozent Eigentümer sein und Alexander Wang, der CEO von Scaleye, wird möglicherweise als eine Art Leiter einer neuen KI Abteilung für Superintelligenz bei Meta einsteigen. Es stellt sich also heraus, dass das keine Spekulation mehr ist. Hier ein kleines kurzes Update. Scaleye hat bestätigt, dass dieser Deal zustande kommt. In einem Blogbeitrag hier auf der Scales Website heißt es, dass Scales Gründer Alexander Wang zu Meta wechselt, um an Metas Key Bemühungen mitzuarbeiten. Hier heißt es, dass Scale ein unabhängiger Marktführer im Bereich KI bleibt, der sich der Bereitstellung branchenführender KI Lösungen verpflichtet fühlt. Scale wird weiterhin mit führenden KI Laboren, multinationalen Unternehmen und Regierungen zusammenarbeiten, um fachkundige Daten und Technologielösungen bereitzustellen. Ob diese Unternehmen angesichts der engen Verbindungen zu Meta weiterhin mit Scale zusammenarbeiten wollen, bleibt abzuwarten. In diesem Artikel aus den Informationen heißt Meta würde Wang zusammen mit anderen hochkarätigen technischen Mitarbeitern die Leitung eines neuen Superintelligenzlabors übertragen, das mit einigen seiner Kunden und Freunde, darunter auch OpenAI CEO Sam Allman, konkurrieren soll. Es stellt sich wirklich die Frage, was mit Skulls bestehendem Kundenstamm geschieht. Und auch hier scheint es sich um eine Art Plan von Meta zu handeln, ein neues KI Labor zur Erforschung von Superintelligenz zu gründen. AGI Künstliche Allgemeine Intelligenz. Kennen Sie das? Wahrscheinlich schon? Die KI kann dann im Prinzip alles, was ein Mensch auch kann. Superintelligenz ist die Phase darüber hinaus, wenn die KI mehr Dinge besser kann als ein Mensch.

Mir gefällt nicht, wie Meta damit reich wird.

Jetzt möchte ich es Ihnen mitteilen. Ich bin neugierig. Was halten Sie davon, dass Meta ein Unternehmen übernimmt, das für alle anderen KI Unternehmen, die es da draußen gibt, so bedeutsam ist? So ziemlich alle von ihnen nutzen Scaleye. Und nun wird Meta möglicherweise zu 49 Prozent an diesem Unternehmen beteiligt und der CEO wird nun wieder Metas Leiter der Superintelligenz. Ich meine, ich habe wirklich das Gefühl, dass dies gerade ein ziemlich entscheidender Moment in der KI Zeitleiste sein könnte.

Von allen Zeitleisten ist dies eindeutig die dunkelste.

Oder sprechen wir über Key Video Nachrichten, denn es gibt eine Handvoll Fortschritte und Updates in dieser Welt. Kehren wir zunächst zu Meta zurück. Sie haben eine neue Funktion eingeführt, mit der sie Videos mit Metai bearbeiten können. Sie können jetzt voreingestellte Key Video Bearbeitungsanweisungen verwenden, um ihr Outfit, ihren Standort, die Beleuchtung und mehr zu verändern. Wir sehen hier ein Beispiel, in dem sie ein Video von einem tanzenden Typen mit einer durchsichtigen Pufferjacke versehen haben und sie können sehen, wie dieser Stil von einem Video auf das andere übertragen wurde. Sehr ähnlich wie bei Runway Gen 1 und den neuen Funktionen zum Ändern von Videos, die wir von Luma sehen. Das kann jetzt jeder kostenlos nutzen, wenn er zu MetaEye geht. Und ich habe dieses Video hochgeladen, das ich aufgenommen habe, als ich letzte Woche eine Demo gemacht habe, in der ich einfach diese seltsamen Bewegungen hier mache und ich wollte ein paar der Stile testen. In der linken Seitenleiste seht ihr alle möglichen vorigen gestellten Stile. Im Gegensatz zu Gen 1 und Lumas Modifikationsvideo könnt ihr hier keine Eingabeaufforderung nutzen. Ihr müsst eine der vorigen gestellten Eingabeaufforderungen hier auswählen, wie z. B. Pelzmantel, Huhn oder Space Kadett und so weiter. In meinem Video habe ich als erstes Pelzmantel getestet und so sehe ich in einem Pelzmantel aus. Wenn ich diese Bewegungen mache, dann wollte ich Böse Hexe ausprobieren, warum auch nicht? Und so sehe ich als Böse Hexe aus. Anscheinend sind die Details meines Gesichts dadurch ziemlich gut erhalten geblieben. Hier unten seht ihr einen Stil namens Alpha Wolf, den werde ich mal ausprobieren. Hier ist die Alpha Wolf Version, die ich von Meta Eye erhalten habe Und schließlich habe ich hier den Anime getestet und das ist die Anime Version von mir. Um einiges weniger beeindruckend als die anderen, die ich getestet habe, wenn ich ehrlich bin. Wir hören seit einiger Zeit, dass Midjourney es euch ermöglichen soll, Videos zu generieren, aber bis diese Woche haben wir noch nichts Konkretes dazu gesehen. Midjourney hat diese Woche seine Videobewertungspartie angekündigt. Wenn ihr Midjourney Abonnent seid, könnt ihr euch bei MIT Journey anmelden und es werden euch Videos angezeigt, die mit MIT Journey generiert wurden. Ihr erhaltet zwei Videos und könnt das Video auswählen, das euch besser gefällt. Auf diese Weise kann das Modell trainiert und ihm mitgeteilt werden, welche Videostile es basierend auf all den abgegebenen Stimmen stärker bevorzugen soll. Ihr müsst mit Journey Abonnent sein, um tatsächlich.