Aktion per Mausklick verwalten

Suchen Sie Informationen für Verbraucher? Siehe Aktion per Mausklick: Machen Sie mehr aus dem, was auf Ihrem Bildschirm angezeigt wird.

Aktion per Mausklick hilft Benutzern, Aufgaben schneller zu erledigen, indem es Texte und Bilder erkennt, die sich aktuell auf ihrem Bildschirm befinden, sodass sie Aktionen darauf ausführen können. Dieser Artikel enthält Informationen zu Aktion per Mausklick und deren Verwaltung in einer kommerziellen Umgebung.

Was ist Aktion per Mausklick?

Aktion per Mausklick analysiert den Inhalt des Bildschirms und ermöglicht es den Benutzern, den Text oder das Bild auszuwählen, für das sie Maßnahmen ergreifen möchten. Benutzer können Aktion per Mausklick mit der Windows-Taste + Q oder mit der Windows-Tastemit der Maustaste + öffnen. Weitere Einstiegspunkte für Aktion per Mausklick sind das Wischen mit der rechten Maustaste auf Touch-fähigen PCs, das Snipping Tool, Suchergebnisse und das Startmenü.

Die Analyse von Screenshots erfolgt immer lokal auf dem Gerät. Die Analyse beginnt erst, nachdem Benutzer sich aktiv mit Klick-und-Do beschäftigt haben, und endet, wenn sie die Aktion per Mausklick beenden. Aktion per Mausklick identifiziert nur Text und Bilder, nicht den Inhalt dieser Texte oder Bilder. Es analysiert keine Inhalte in beispielsweise minimierten Anwendungen, die nicht auf dem Bildschirm angezeigt werden.

Inhalte werden nur freigegeben, wenn Benutzer eine Aktion wie "Im Web suchen" ausführen möchten. Wenn Aktion per Mausklick aktiv ist, ist der Cursor blau-weiß. Auch der Cursor ändert seine Form je nach Art der darunter liegenden Informationen. Was Benutzer mit den Informationen tun können, hängt davon ab, welche Art von Inhalten per Mausklick erkannt werden. Die folgenden Aktionen sind derzeit verfügbar:

• Mehrere Inhaltstypen: kopieren, öffnen mit, im Web suchen, Microsoft Copilot fragen

• Text: Zusammenfassen, Aufzählung erstellen, umschreiben, Entwurf mit Copilot in Word, Üben im Lesecoach, Lesen mit Plastischer Reader

• Bilder: Teilen, Speichern, visuelle Suche mit Bing, Hintergrund mit Fotos weichzeichnen, Objekte mit Fotos löschen, Hintergrund mit Paint entfernen

• E-Mail-/Teams-Aktionen: E-Mail an [E-Mail-Adresse] senden, mehr über [E-Mail-Adresse] anzeigen, eine Nachricht mit Teams senden, eine Besprechung mit Teams planen

Die intelligenteren Textaktionen von Aktion per Mausklick, die von Phi Silica unterstützt werden, werden auf dem Gerät ausgeführt und sind derzeit in drei Sprachen verfügbar. Englisch unterstützt den vollständigen Satz – Zusammenfassen, Erstellen einer Aufzählung und Umschreiben (Casual, Formal, Refine). Französisch und Spanisch bieten eine fokussierte Teilmenge: Zusammenfassen, Aufzählung erstellen und verfeinern. Da sich die Modellqualität verbessert, planen wir, die Sprachabdeckung zu erweitern

Systemanforderungen

Für Aktion per Mausklick gelten für die folgenden Mindestanforderungen:

• Einen Copilot+ PC oder einen berechtigten Cloud-PC

• 40 TOPs NPU (Neuronale Verarbeitungseinheit)

  • 16 GB RAM
  • 8 logische Prozessoren
  • 256 GB Speicherkapazität

Um den Klick-Aufgaben-Einstiegspunkt aus dem Snipping Tool anzuzeigen, ist Snipping Tool Version 11.2411.20.0 oder höher erforderlich.

Richtlinie für Aktion per Mausklick konfigurieren

Bei Aktivierung erstellt Aktion per Mausklick einen Screenshot des Bildschirms des Benutzers und analysiert ihn, um Aktionen darzustellen. Aktion per Mausklick endet, wenn Benutzer sie verlassen, und es können keine Screenshots erstellt werden, während sie geschlossen ist. Die Screenshot-Analyse wird immer lokal auf dem Gerät durchgeführt. Aktion per Mausklick ist für Benutzer standardmäßig aktiviert.

Mit der folgenden Richtlinieneinstellung können Sie festlegen, ob Aktion per Mausklick für Benutzer auf ihrem Gerät verfügbar ist:

• Wenn die Richtlinie aktiviert ist, stehen die Aktion per Mausklick-Komponente und die Einstiegspunkte für Benutzer nicht zur Verfügung.
• Wenn die Richtlinie deaktiviert oder nicht konfiguriert ist, steht den Benutzern Aktion per Mausklick auf ihrem Gerät zur Verfügung.

Aktion per Mausklick verwalten

Aktion per Mausklick und Apps

Wenn Sie Informationen von Aktion per Mausklick an eine Anwendung wie Paint senden möchten, speichert Aktion per Mausklick diese Informationen vorübergehend, um die Übertragung abzuschließen. Aktion per Mausklick erstellt eine temporäre Datei an folgendem Ort:

• C:\Users\{username}\AppData\Local\Temp

Temporäre Dateien können auch gespeichert werden, wenn Sie Feedback senden. Diese temporären Dateien werden nicht langfristig gespeichert. Aktion per Mausklick speichert nach Abschluss der angeforderten Aktion keine Inhalte auf Ihrem Bildschirm, aber einige Diagnosedaten werden gesammelt, um Aktion per Mausklick sicher, aktuell und funktionsfähig zu halten.

Im Einklang mit dem Engagement von Microsoft für Datenschutz und Sicherheit werden alle gespeicherten Bilder und verarbeiteten Daten auf dem Gerät aufbewahrt und lokal verarbeitet. Mit Aktion per Mausklick haben Sie jedoch die Wahl, ob Sie online weitere Informationen zu Ihren ausgewählten Inhalten erhalten möchten. Wenn Sie eine der folgenden Aktion per Mausklick-Aktionen auswählen, wird der ausgewählte Inhalt von Ihrem lokalen Gerät an den Onlineanbieter gesendet, um Ihre Anforderung abzuschließen. Beispiel:

• Im Web suchen: Sendet den ausgewählten Inhalt mithilfe von Microsoft Edge an Bing

• Website öffnen: Öffnet die ausgewählte Website in Ihrem Standardbrowser

• Visuelle Suche mit Bing: Sendet den ausgewählten Inhalt an Bing Visuelle Suche mit Ihrem Standardbrowser

Aktion per Mausklick und App-Steuerelemente
Bei Aktionen, die Apps beinhalten (z. B. Microsoft Copilot, Word, Teams, Fotos), werden diese nur als Optionen angezeigt, wenn diese Apps auf dem Gerät des Benutzers installiert sind. Für Organisationen, die diese Apps für ihre Benutzer entfernen, werden die entsprechenden Aktionen im Aktion per Mausklick-Menü ebenfalls entfernt.

Besuchen Sie die Anwendungssteuerung für Windows, um mehr über die IT-Richtlinien zum Verhindern der App-Installation und App-Kontrolle zu erfahren. Benutzer können die Aktionen, die sie nicht wünschen, deaktivieren, indem sie zu Einstellungen -> Apps -> Aktionen wechseln.

Sie können die Apps auswählen, die als Anbieter für die von Aktion per Mausklick vorgeschlagenen Aktionen dienen sollen (falls zutreffend). Nachdem Sie die Aktion und den Anbieter für die Aktion ausgewählt haben, liegen die Ergebnisse dieser Aktion in der Verantwortung des Anbieters. Beispielsweise können Sie unter Aktion per Mausklick die Aktion "Hintergrund mit Paint entfernen" auswählen, was bedeutet, dass Sie Paint als Anbieter für die Aktion ausgewählt haben. Nachdem Sie die Aktion aus dem Aktion per Mausklick-Kontextmenü ausgewählt haben, wird die Paint-Anwendung gestartet und das ausgewählte Bild mit Paint bearbeitet.

Aktion per Mausklick und Phi Silica
Die weiteren intelligenten Textaktionen von Aktion per Mausklick, darunter Zusammenfassen, Umschreiben (zwanglos),Umschreiben (formell),Umschreiben (verfeinern) und Erstellen einer Aufzählung, werden von einem hochmodernen kleinen Sprachmodell namens Phi Silica unterstützt. Phi Silica nutzt die NPU, und das Sprachmodell wird lokal auf Copilot+ PCs ausgeführt. Phi Silica wird im Posteingang mit Windows auf Copilot+ PCs ausgeliefert.

Wenn ein Benutzer auf die Textaktionen "Aktion per Mausklick" klickt, werden der ausgewählte Text und die ausgewählte Aktion als Teil einer Eingabeaufforderung an Phi Silica gesendet. Phi Silica schreibt den ausgewählten Text gemäß der Anforderung des Benutzers intelligent um und streamt die Antwort aus dem Modell zurück. Phi Silica antwortet schnell und effizient und verbraucht dabei wenig Energie. Weitere Informationen finden Sie unter Phi Silica, kleines, aber feines SLM auf dem Gerät.

Verpflichtung von Microsoft zu verantwortungsvoller KI und Datenschutz

Microsoft arbeitet seit 2017 daran, KI verantwortungsbewusst weiter zu entwickeln, als wir unsere KI-Prinzipien zum ersten Mal definiert und später unseren Ansatz mit unserem Responsible AI Standard operationalisiert haben. Datenschutz und Sicherheit sind grundlegende Prinzipien bei der Entwicklung und Bereitstellung von KI-Systemen. Wir bemühen uns unseren Kunden zu helfen, unsere KI-Produkte verantwortungsvoll zu nutzen, unsere Erkenntnisse zu teilen und vertrauensbasierte Partnerschaften aufzubauen. Weitere Informationen zu unseren Bemühungen um verantwortungsvolle KI, den Grundsätzen, die uns leiten, und den Tools und Fähigkeiten, die wir geschaffen haben, um sicherzustellen, dass wir KI-Technologie verantwortungsvoll entwickeln, finden Sie unter Verantwortungsvolle KI.

Um Klarheit über die Funktionsweise der einzelnen KI-Features zu schaffen, ist es wichtig, dass Sie die Funktionen und Einschränkungen kennen. Sie sollten sich mit den Optionen vertraut machen, die Ihnen in einem KI-Feature zur Verfügung stehen, und der Verantwortung, die mit diesen Entscheidungen verbunden ist.

Aktion per Mausklick verwendet die optische Zeichenerkennung (Optical Character Recognition, OCR) auf Ihrem PC, um Textentitäten auf Screenshots zu erkennen. Weitere Informationen zu OCR finden Sie unter Transparenzhinweis und Anwendungsfälle für OCR.

Die intelligenten Textaktionen von Aktion per Mausklick verwenden ein kleines Sprachmodell namens Phi Silica. Weitere Informationen zu Phi Silica finden Sie unter Erste Schritte mit Phi Silica im Windows App SDK. Informationen zu den Prinzipien der verantwortungsvollen KI, die die Bereitstellung von Phi Silica und die Sicherheitsmaßnahmen bei der Verwendung von generativen Sprachmodellen leiten, finden Sie unter Verantwortungsvolle generative KI-Entwicklung unter Windows.

Die Modelle von Click to Do wurden neben umfassenden Bewertungen der verantwortungsvollen KI, der Sicherheit und des Datenschutzes auch Fairnesseinschätzungen unterzogen, um sicherzustellen, dass die Technologie effektiv und gerecht ist und gleichzeitig den Best Practices von Microsoft für verantwortungsvolle KI entspricht.

Verwandte Links

• Richtlinien-CSP – WindowsAI
• Verantwortungsvolle KI