Alle Folgen › Folge 33
KI-Pflicht im JobWas der Chef beim KI-Einsatz nachprüfen darf
Proton wollte seine Beschäftigten zur KI-Nutzung befragen – auch mit Folgen für den Job – und sagte das nach Protest ab, Accenture zählt Log-ins und Amazon warnt vor Token-Ranglisten. Paul und Paula ordnen ein, was Arbeitgeber in Deutschland verlangen und kontrollieren dürfen: Weisungsrecht, Betriebsrat, DSGVO und AI Act, Stand November 2026.
Lieber lesen? Der Artikel zur Folge →
Kurz erklärt
Die Folge zum Nachlesen
Transkript der gesendeten Folge in Lesefassung.
Paula: Vom vierten bis zum 11. November hätten bei Proton, der Schweizer Firma hinter Proton Mail, fast alle Beschäftigten zum Nachgespräch antreten sollen. Thema: Wie nutzt du KI? In der internen Mail stand, dabei gehe es auch um die weitere Beschäftigung.
Paul: Und, wie ist es gelaufen?
Paula: Gar nicht. Abgesagt, nach Protest.
Paul: KI News Kompakt – Folge 33. Ich bin Paul.
Paula: Und ich bin Paula. Heute: KI-Pflicht im Job. Was passiert, wenn der Chef den KI-Einsatz nachprüft – und was er in Deutschland dabei darf.
Paul: Bekannt wurde das durch ein US-Rechercheportal. Am 26. Oktober verschickte Proton die Mail: Die Gespräche seien „folgenreich“ – bis hin zur Frage der weiteren Beschäftigung.
Paula: Was mussten die Leute vorweisen?
Paul: Laut TechRadar konkrete Beispiele, wie KI ihre Arbeit verändert hat, und was dabei herauskam. Prüfen sollten Führungskräfte mit, Zitat, „starker KI-Kompetenz“. Proton betonte: kein Stellenabbau, man wolle wissen, wer Unterstützung braucht.
Paula: Und warum dann der Aufstand?
Paul: Wegen der Sicherheit.
Paula: Wieso?
Paul: Das Portal legte nach. Gestützt auf neun aktuelle und frühere Beschäftigte und auf Slack-Verläufe. Demnach hatte Firmenchef Andy Yen im August Sicherheitsbedenken im Team als „Verlierer-Denken“ abgetan. Man solle aufhören, den Code liebevoll von Hand zu schreiben.
Paula: Bei einer Firma, die mit Sicherheit wirbt. Gute Idee.
Paul: Am 30. Oktober sagte Yen die Gespräche ab. Danach versprach Proton: KI nie auf Kosten der Sicherheit. Und keine Software auf den Laptops, die misst, wie viel Code von der KI stammt.
Paula: Ist der Druck damit weg?
Paul: Eher nicht. Am 1. November hat Technikchef Bart Butler sein internes KI-Manifest veröffentlicht. Kernsatz: Proton stecke fast völlig in Phase eins fest – KI beschleunigt einzelne Handgriffe, die Abläufe bleiben dieselben.
Paula: Ist Proton ein Einzelfall?
Paul: Nein. Bei der Beratung Accenture zählt seit Februar, wie oft sich Senior Manager pro Woche in die KI-Werkzeuge einloggen. Laut Financial Times fließt das in Beförderungen ein. Ausgenommen sind allerdings Beschäftigte in einigen europäischen Ländern.
Paula: In wie vielen?
Paul: Zwölf.
Paula: Zwölf. Steht da auch, warum?
Paul: Nein, das sagt Accenture nicht. Ehrlich gesagt finde ich Log-ins zählen nicht falsch. Wer nie reinschaut, kann das Werkzeug ja kaum gut nutzen —
Paula: Außer, die Leute klicken nur noch, um gezählt zu werden. Genau das ist bei Amazon passiert. Dort gab es eine interne Rangliste für KI-Nutzung, und laut Berichten haben Mitarbeiter das Werkzeug mit Kleinkram gefüttert, um aufzusteigen.
Paul: Tokenmaxxing heißt das inzwischen.
Paula: Im Mai wurde die Rangliste abgeschaltet. Und am 27. Oktober hat Amazon neue Leitlinien für seine Entwickler veröffentlicht: Mehr verbrauchte Token heißen nicht mehr Wert. Nutzungszahlen als Zielvorgabe? Verleiten zu Verschwendung. Gemessen werden soll das Ergebnis.
Paul: Gut, ich nehme das zurück. Wer Log-ins belohnt, bekommt Log-ins. Keine bessere Arbeit.
Paula: Das passt zu Folge 18: Viel Einsatz, wenig Messung. Nur dass jetzt manche das Falsche messen. Wie ist das bei uns? Darf ein Arbeitgeber in Deutschland KI überhaupt vorschreiben?
Paul: Also — grundsätzlich ja. Das Weisungsrecht in Paragraf 106 der Gewerbeordnung erlaubt ihm, Inhalt, Ort und Zeit der Arbeit nach billigem Ermessen festzulegen. Dazu gehört auch das Werkzeug.
Paula: Und das Nachprüfen?
Paul: Gibt es einen Betriebsrat, hat er nach Paragraf 87 Betriebsverfassungsgesetz mitzubestimmen, wenn eine technische Einrichtung Verhalten oder Leistung überwachen kann. Laut Fachliteratur reicht schon, dass sie dazu geeignet ist. Auf die Absicht kommt es nicht an.
Paula: Ein Dashboard mit Log-ins pro Kopf wäre also so ein Fall?
Paul: In der Regel ja. Und über geplanten KI-Einsatz muss er den Betriebsrat ohnehin rechtzeitig informieren – Paragraf 90.
Paula: Wobei es eine Ausnahme gibt. Das Arbeitsgericht Hamburg hat im Januar 2024 entschieden: Darf man ChatGPT freiwillig über private Konten im Browser nutzen, hat der Betriebsrat kein Mitbestimmungsrecht. Der Arbeitgeber sieht ja keine Daten.
Paul: Sobald er aber Firmenkonten mit Protokollen hat, sieht er sie. Und dann kommt der Datenschutz dazu.
Paula: Genau. Nutzungsprotokolle sind personenbezogene Daten. Sie auszuwerten braucht nach DSGVO eine Rechtsgrundlage und muss verhältnismäßig sein. Und Europa?
Paul: Der AI Act verlangt seit Februar 2025 KI-Kompetenz. Allerdings abgeschwächt: Seit dem 27. Juli müssen Firmen nur noch Maßnahmen ergreifen, die diese Kompetenz fördern. Ein bestimmtes Niveau garantieren müssen sie nicht.
Paula: Also eine Pflicht zur Schulung, keine Pflicht zur Nutzung.
Paul: Genau. Und bewertet ein KI-System selbst Leistung oder Verhalten, gilt es als Hochrisiko. Dann müssen Arbeitgeber Beschäftigte und ihre Vertretung vorher informieren. Diese Pflicht greift aber erst ab dem 2. Dezember 2027.
Paula: Wichtig: Das ist der Stand November 2026 und keine Rechtsberatung. Im Einzelfall entscheiden Arbeitsvertrag, Betriebsvereinbarung und Gerichte.
Paul: Bleibt die große Angst dahinter: Wer nicht mitzieht, fliegt raus, weil KI den Job übernimmt?
Paula: Für Deutschland hat das IAB am 13. Oktober nachgerechnet. Bei Zwanzig- bis Neunundzwanzigjährigen ist Vollzeitbeschäftigung in stark KI-nahen Berufen seit 2022 um 3,8 % gesunken, in anderen um 2,6.
Paul: Also doch?
Paula: Nein. Der Zusammenhang ist statistisch nicht signifikant. Deutlich stärker drückt die schwache Konjunktur. Nur in der Industrie und in nichtakademischen Berufen sieht das IAB einen klar negativen Zusammenhang.
Paul: Was heißt das jetzt für dich?
Paula: Erstens: Wenn dein Arbeitgeber KI verlangt, frag nach, welche Daten dabei erfasst werden und wer sie sieht. Gibt es einen Betriebsrat, frag ihn, ob es eine Betriebsvereinbarung zur KI gibt.
Paul: Zweitens: Nutze die Werkzeuge, die die Firma freigibt. Firmendaten in private Chatbots zu kippen, ist das größere Risiko.
Paula: Und drittens: Halte fest, was KI bei dir konkret verbessert hat und wo sie nichts bringt. Genau das wollte Proton in den Gesprächen hören. Und auch Amazon schreibt inzwischen: Wenn ein Werkzeug bei einer Aufgabe nicht hilft, ist das eine nützliche Information – kein Versagen.
Kurzmeldungen
Paul: Und dann noch die Kurzmeldungen. Erstens: Die EU-Kommission hat am 11. November den Digital Fairness Act vorgestellt – ein Gesetzespaket gegen Tricks im Onlinehandel.
Paula: Was hat das mit KI zu tun?
Paul: Zwei Punkte. Wer einen Vertrag hat, soll im Kundenservice immer einen Menschen erreichen können, nicht nur einen Chatbot. Und wer einen KI-Agenten für sich einkaufen lässt, soll klare Verbraucherrechte bekommen.
Paula: Und sonst?
Paul: Druckmaschen wie „nur noch zwei Stück auf Lager“ sollen verboten werden, endloses Scrollen soll sich abschalten lassen. Bei großen Fällen will die Kommission selbst Strafen verhängen – bis zu 6 % des weltweiten Umsatzes.
Paula: Noch ist das ein Vorschlag. Parlament und Mitgliedstaaten müssen zustimmen, und deutsche Zeitungsverleger protestieren schon.
Paul: Zweitens: Google DeepMind hat mit KI-Agenten den Code hinter dem Signal-Protokoll mathematisch überprüft. Das ist die Verschlüsselung in Signal und Google Messages.
Paula: Was heißt mathematisch überprüft?
Paul: Die Agenten haben bewiesen, dass der echte Code bestimmte Sicherheitsversprechen hält – etwa, dass Nachrichten geschützt bleiben, auch nachdem ein Gerät kurz gehackt war. Laut DeepMind dauerte das 4 Wochen statt wie früher Jahre.
Paula: Herstellerangabe. Aber Signal lobt das Ergebnis, und jeder Beweis wird von einem Prüfprogramm nachgerechnet. Er gilt allerdings nur für das, was Fachleute vorher festgelegt haben. Die gute Nachricht: Auch Verteidiger bekommen starke KI-Werkzeuge.
Paul: Das war KI News Kompakt. Neue Folgen gibt es montags bis freitags.
Paula: Bleibt neugierig – und bleibt kritisch.
Quellen zu dieser Folge
Jede Aussage der Folge haben wir vor der Aufnahme an diesen Quellen geprüft. Angaben von Herstellern kennzeichnen wir in der Folge als solche.
- Proton kündigte am 26.10.2026 per interner Mail „Re-Interviews“ fast aller Beschäftigten zur KI-Nutzung an; Gespräche „consequential“, möglich seien „changes in roles, responsibilities, and continued employment“
404media.cotechradar.com - Zeitraum der Gespräche 04.–11.11.2026; Beschäftigte sollten konkrete Beispiele und Ergebnisse vorweisen; Prüfer = Führungskräfte mit „strong AI capability“
aiweekly.co - 404-Media-Recherche (29.10.): acht aktuelle und ein früherer Beschäftigter, Slack-Verläufe, Mitschnitte; Yen im August im Sicherheits-Slack: „bullshit and loser thinking“, „stop lovingly handcrafting all our code and use AI more“
404media.co - Yen sagte die Gespräche am 30.10.2026 ab (Freitag, nach der Recherche)
techradar.com - CTO Bart Butler veröffentlichte am 01.11.2026 sein internes KI-Manifest: Proton „almost completely stuck at phase 1“ (LLMs beschleunigen Aufgaben in bestehenden Abläufen), Phase 2 = Abläufe umbauen; keine Nutzungspflicht, keine Nutzungsmess…
proton.medigidai.github.io - Accenture: seit Februar 2026 werden wöchentliche Log-ins in KI-Werkzeuge von Associate Directors und Senior Managers erfasst; „Use of our key tools will be a visible input to talent discussions“; Beförderung in Leitungsrollen nur bei „regul…
fortune.com - Amazon: interne Rangliste zur KI-Nutzung, Mitarbeiter fütterten das Werkzeug mit trivialen Aufgaben („Tokenmaxxing“); Rangliste im Mai abgeschaltet
fortune.comtomshardware.com - Rückverweis Folge 18 „KI im Unternehmen – viel Einsatz, wenig Messung“
ki-news-kompakt.de - § 106 Satz 1 GewO: „Der Arbeitgeber kann Inhalt, Ort und Zeit der Arbeitsleistung nach billigem Ermessen näher bestimmen“, soweit nicht Vertrag, Betriebsvereinbarung, Tarifvertrag oder Gesetz festgelegt; Werkzeugvorgabe = Inhalt der Arbeits…
gesetze-im-internet.de - § 87 Abs. 1 Nr. 6 BetrVG: Mitbestimmung bei „Einführung und Anwendung von technischen Einrichtungen, die dazu bestimmt sind, das Verhalten oder die Leistung der Arbeitnehmer zu überwachen“
gesetze-im-internet.de - Weite Auslegung durch BAG/Kommentarliteratur: objektive Eignung zur Überwachung genügt, Absicht nicht erforderlich; KI-Systeme in der Regel geeignet → meist Betriebsvereinbarung nötig
cms.law - § 90 Abs. 1 Nr. 3 BetrVG: Unterrichtung des Betriebsrats „rechtzeitig“ über die Planung von Arbeitsverfahren und -abläufen „einschließlich des Einsatzes von Künstlicher Intelligenz“
gesetze-im-internet.de - ArbG Hamburg, Beschl. v. 16.01.2024 – 24 BVGa 1/24: freiwillige Nutzung von ChatGPT über private Konten im Browser nicht mitbestimmungspflichtig (Nr. 1, 6, 7), weil Arbeitgeber keinen Zugriff auf die Nutzungsdaten hat
beck-aktuell.degleisslutz.com - Nutzungsprotokolle = personenbezogene Beschäftigtendaten; Verarbeitung braucht Rechtsgrundlage und muss verhältnismäßig sein (Art. 5, 6, 88 DSGVO; nach EuGH C-34/21 v. 30.03.2023 nationale Generalklauseln eingeschränkt)
eur-lex.europa.eucms.law - AI Act Art. 4 (KI-Kompetenz) gilt seit 02.02.2025; neu gefasst durch VO (EU) 2026/1744 („Digital Omnibus on AI“) vom 08.07.2026, ABl. 24.07.2026, in Kraft 27.07.2026: „Providers and deployers … shall take measures to support the development…
eur-lex.europa.eukpmg.comlawandtechnology.eu - Hochrisiko nach Anhang III Nr. 4 b: KI-Systeme, die u. a. Beförderung/Kündigung entscheiden oder „monitor and evaluate the performance and behaviour“ von Beschäftigten
artificialintelligenceact.eu - Art. 26 Abs. 7 AI Act: Arbeitgeber als Betreiber informieren Arbeitnehmervertreter und betroffene Beschäftigte vor Inbetriebnahme/Nutzung eines Hochrisiko-KI-Systems am Arbeitsplatz
artificialintelligenceact.eu - IAB (Arntz/Dinelli/Schlenker, IAB-Forum 13.10.2026): BA-Daten 2021–2025, ca. 22,3 Mio. Vollzeitbeschäftigte; 20–29-Jährige: Vollzeitbeschäftigung 2025 vs. 2022 in stark KI-exponierten Berufen −3,8 %, in weniger exponierten −2,6 % (deskripti…
iab-forum.de - EU-Kommission legt am 11.11.2026 den Vorschlag für einen Digital Fairness Act (DFA) vor, Update des EU-Verbraucherschutzrechts gegen unfaire Praktiken online → „Die EU-Kommission hat am elften November den Digital Fairness Act vorgestellt –…
ec.europa.eueuronews.comdig.watch - „Consumers will have the right to communicate with a human in customer service and will have clear rights when using an AI agent to buy products on their behalf.“ (dpa: Kundenhotlines, die ausschließlich von Technik wie KI gesteuert werden,…
yahoo.comeunews.it - Google DeepMind (Kohli, Chaudhuri u. a.) stellt am 10.11.2026 AlphaProof Code vor: KI-Agenten (Gemini Carbon) beweisen formal Sicherheitseigenschaften des tatsächlichen libsignal-Codes (PQXDH-Handshake, Triple Ratchet); Signal-Protokoll sch…
deepmind.googledeepmind.googletheregister.com - Signal-CTO Ehren Kret lobt den Ansatz („gives us even greater confidence“); jeder Beweis wird vom Lean-Kernel geprüft; Experten haben jede Spezifikation geprüft; Ergebnis setzt perfekte Kryptografie voraus und gilt nur für die spezifizierte…
qodo.ai