Google arbeitet an einem neuen Pixel-Feature, mit dem Apps automatisch und sogar im Hintergrund bedient werden können, wahrscheinlich durch Gemini und nicht durch den Nutzer selbst. Die ersten Details klingen spannend.
In den kommenden Wochen und Monaten wird es immer mehr KI-Funktionen auf unseren Android-Geräten geben, der Trend ist nicht aufzuhalten und Google ist vorn mit dabei. Das nächste große Ding für den Alltag mit KI ist ganz klar die Bereitstellung sogenannter Agenten, die nicht einfach Fragen und Aufgaben beantworten, sondern Anwendungen selbst bedienen können.
Das einfachste Beispiel für solche Agenten sind Browser-gesteuerten Funktionen, die sich dann z.B. selbst durch einen Onlineshop klicken und das Produkt bestellen – Gemini ist für Chrome bereits geplant. Aber ein solcher Agent könnte auch ein umfangreiches Videoschnitt-Programm bedienen, nach euren persönlichen Kriterien durch Tinder wischen und vieles mehr.
Jedenfalls werden diese Möglichkeiten nun auch zunehmend auf unsere Android-Smartphones kommen, Google hat dabei sehr viel Fokus auf der Pixel-Reihe. In der allerneuesten Android 16 QPR3 Beta 2 sind neue Entwicklungen zu sehen, die bereits einiges über die Funktionsweise verraten.
Die neue Berechtigung für den speziellen App-Zugriff nennt sich „Bildschirmautomatisierung“ und wird so beschrieben: „Apps dürfen Ihnen bei der Erledigung von Aufgaben helfen, indem sie mit den Bildschirminhalten anderer Apps interagieren.“
Computer Control: Google will, dass sich Android-Apps selbst bedienen können
Diese Funktion wird im Quellcode als „computer_control“ bezeichnet und soll es Apps ermöglichen, Aufgaben zu erledigen, indem sie eigenständig mit den Inhalten anderer Apps interagieren. Die Berechtigung erlaubt der entsprechenden Anwendung, Bildschirminhalte zu lesen und Klicks, Texteingaben sowie Scroll-Gesten auszuführen – selbst wenn die betroffenen Apps im Hintergrund laufen.
<string name=”request_computer_control_access_dialog_description”>This app will be able to see and interact with other apps\’ screen content to help you complete tasks, even when the apps are in the background</string>Ziel dürfte sein, dass Google die angesprochenen KI-Agenten auf unsere Android-Smartphones bringt. Bislang ist die Google-App die einzige App, die dafür aktuell in Frage kommt, aber die Entwicklung der „Screen automation“ ist noch im vollen Gange und der Release vermutlich erst im Android 17-Zyklus geplant.
Der gefundene Code verrät laut 9to5Google heute schon, dass das neue Feature auch im Hintergrund Apps steuern kann, sich das Smartphone derweil also anderweitig verwenden lässt. Google bezeichnet die Durchführung als „Aufgabe“, die der Nutzer startet und jederzeit den Fortschritt auch selbst während der Durchführung prüfen kann.
Das klingt nach einer elementaren Neuerung für das Android-Betriebssystem und dürfte sich langfristig nicht allein auf die Pixel-Telefone beschränken. Es wird auch spannend zu sehen sein, welche Apps dafür noch in Frage kommen werden, derzeit konnte nur die Google-App als unterstützt identifiziert werden.
Der Trend ist nicht aufzuhalten aber man muss ihm nicht folgen.
Macht euch nur alle schön abhängig von der KI und wenn ihr eines Tages vergessen habt wie man ohne lebt wird euch das auf die Füße fallen.
Alle die sowas schreiben, merken in der Regel gar nicht ihre eigene Abhängigkeit von gewissen Dingen, sehen sich selbst aber immer so frei. Bisschen wie die Bargeld-Verfechter.
Ich bin abhängig von Menschen, Nahrung, Wasser, Luft, meinem Telefon ohne das ich nicht kommunizieren kann….
Soll ich weiter machen oder bist du fertig mir etwas zu unterstellen nur weil dir meine Meinung nicht passt?
Sieh KI nur als deinen heiligen Gral aber jammer nicht wenn sie irgendwann mal nicht funktioniert oder Fehler macht.
Nennt man Fortschritt! Du kannst auch gerne noch mit Kutsche und Fackel zur Arbeit fahren.
Nicht alles neue ist Fortschritt.
Richtig und dabei ist die KI nicht mal das Problem denn sie wird nur falsch eingesetzten.
KI kann im Büro oder als Assistent für Content Creator sehr nützlich sein aber auf meinem privaten Telefon ist sie in der Masse zumindest unnötig.
Zum Ko….. Ich kann „KI“ echt nicht mehr lesen.