use_caseArticlemaschinenlesbar

KI in der Kindeswohl- und Jugendhilfeentscheidung: Risikoklasse und Pflichten im EU-KI-Recht

MenschMarkdown öffnen

KI-Systeme, die in Entscheidungen der Kinder- und Jugendhilfe eingreifen (Risikoeinschätzung bei Kindeswohlgefährdung, Platzierungs-/Inobhutnahme-Empfehlungen, familiengerichtliche Gutachten-Unterstützung), sind nach Anhang III Nr. 5/6 AI Act HOCHRISKANT. Sie unterliegen spätestens am 2. Dezember 2027 (verschoben durch AI Omnibus 2026) dem Pflichtenbündel aus Art. 8–15 mit Schwerpunkt Daten-Governance/Bias-Prüfung (Art. 10), menschlicher Aufsicht (Art. 14 — sozialpädagogische/richterliche Letztverantwortung) und Aufzeichnung (Art. 12). Öffentliche Jugendämter als Betreiber müssen vor Inbetriebnahme eine Grundrechts-Folgenabschätzung erstellen (Art. 27 AI Act). Überlagert: Grundrecht des Kindeswohls (Art. 24 GRCh, UN-Kinderrechtskonvention), SGB VIII (Kinder- und Jugendhilfe), Familienverfahrensrecht (FamFG), DSGVO (besondere Datenkategorien Art. 9). Vollautomatische Inobhutnahmen sind rechtlich und ethisch ausgeschlossen.

Rechtliche Klarheit entsteht, wenn Definition, Artikelbezug, Quelle und eigene Einordnung zusammenkommen.
Steve Baka
hochrisiko

Hochrisiko nach Anhang III Nr. 5/6

Anhang III Nr. 5 erfasst KI zur Bewertung und Einordnung beim Zugang zu wesentlichen öffentlichen Dienstleistungen und Sozialleistungen (dazu gehört die Jugendhilfe); Nr. 6 kann Risikobewertungen in justiziellen/familiengerichtlichen Kontexten erfassen. Beispiele: Risiko-Scoring bei Kindeswohlgefährdung (§ 8a SGB VIII), Prognose-Tools für Wiederholungsrisiko, Unterstützung familiengerichtlicher Gutachter,Matching-Algorithmen für Pflegeplatz-Zuweisung. Grund: Eingriffe in Familie und Kindeswohl sind grundrechtsrelevant (Art. 6, 24 GRCh, UN-KRK); fehlerhafte/hochriskant-biased KI kann Familien zerstören oder Kinder gefährden. Volles Pflichtenbündel aus Art. 8–15 spätestens am 2. Dezember 2027 (verschoben durch AI Omnibus 2026).

pflichten grundrechte

Pflichten und Grundrechts-Folgenabschätzung

Art. 8–15 mit Schwerpunkt: Daten-Governance mit Bias-Prüfung (Art. 10 — besonders wichtig, da historische Fall-Daten soziale/ethnische Verzerrungen spiegeln); menschliche Aufsicht mit sozialpädagogischer/richterlicher Letztverantwortung (Art. 14); Aufzeichnung (Art. 12); Genauigkeit/Robustheit (Art. 15). Öffentliche Jugendämter als Betreiber: vor Inbetriebnahme Grundrechts-Folgenabschätzung nach Art. 27 AI Act (Art. 26 Abs. 7) — betroffene Personen/Gruppen (Kinder, Familien), spezifische Risiken, Maßnahmen, menschliche Aufsicht, Beschwerdeweg. Überlagert: SGB VIII (Verfahrensregelungen, §§ 8a, 42, 50), Familienverfahrensrecht (FamFG — Anhörung/Beteiligung), UN-KRK, DSGVO Art. 9 (Gesundheitsdaten, besondere Daten). Eine KI darf nicht ersetzen, sondern nur unterstützen — die sozialpädagogische/richterliche Verantwortung bleibt.

praxis bias

Praxis: Bias und internationale Vorfälle

KI in der Jugendhilfe ist besonders fehler- und biasanfällig. Internationale Vorfälle (z. B. das amerikanische APPROACH/Allegheny-System) haben gezeigt, dass Risiko-Scoring systematisch benachteiligte Familien (geringes Einkommen, Alleinerziehende, ethnische Minderheiten) überrepräsentiert — die KI lernt historische Überwachungsschwerpunkte und verstärkt sie (Feedback-Schleife). Art. 10 verlangt Bias-Prüfung; Art. 14 menschliche Aufsicht; Art. 22 DSGVO (Recht auf menschliche Prüfung bei automatisierten Entscheidungen mit rechtlicher/ähnlich weitreichender Wirkung — Kindeswohl-Entscheidungen sind „ähnlich weitreichend"). Praktisch erforderlich: repräsentative Fall-Daten, Bias-Audits an Untergruppen, transparente Score-Faktoren, klare Begründung individueller Empfehlungen, menschliche Letztverantwortung, Beschwerdeweg. Eine KI als „Entscheidungs-Werkzeug" ist die Leitplanke; vollautomatische Inobhutnahme ist ausgeschlossen.

Sources

Quellen

Verordnung (EU) 2024/1689 (AI Act) — EUR-Lex

Amtsblatt der Europäischen Union. Verbindlicher Primärtext des EU AI Act (konsolidierte Fassung).

EU AI Office

Europäische Kommission. Zentrale EU-Behörde für AI-Act-Durchsetzung, GPAI-Aufsicht und Leitlinien.

Verordnung (EU) 2023/2854 (Data Act) — EUR-Lex

Amtsblatt der Europäischen Union. Verbindlicher Primärtext des EU Data Act zur Datenweitergabe an verbundenen Produkten.

Datenschutz-Grundverordnung (DSGVO) — EUR-Lex

Amtsblatt der Europäischen Union. Verbindlicher Primärtext der DSGVO; maßgeblich für KI-Verarbeitung personenbezogener Daten.

AI Act — konsolidierter Lesetext (ai-act-law.eu)

Future of Life Institute / Konsortium. Breit genutzte inoffiziell-konsolidierte, artikelgenaue Darstellung des AI Act.

European Data Protection Supervisor (EDPS)

EDPS. EU-Datenschutzaufsicht; Stellungnahmen zum AI Act und Schnittstelle KI/Datenschutz.

European Data Protection Board (EDPB)

EDPB. Gremium der EU-Datenschutzbehörden mit Leitlinien zur KI-Verarbeitung.

EU AI Pact

Europäische Kommission. Freiwillige Frühumsetzung des AI Act; Indikator für Markterwartungen.

Bundesamt für Sicherheit in der Informationstechnik (BSI)

BSI. IT-Sicherheitsbehörde Deutschland; relevant für Cybersecurity-Pflichten des AI Act und CRA/NIS2.

Datenschutzkonferenz (DSK)

DSK. Zusammenschluss der deutschen Aufsichtsbehörden; Orientierungshilfen auch zu KI.

Der Bundesbeauftragte für Datenschutz (BfDI)

BfDI. Bundesweiter Datenschutzbeauftragter Deutschland.

Rat für Künstliche Intelligenz (Österreich)

Bundesministerium AT. Beratendes Gremium und Ministerium für KI-Politik in Österreich.

Eidgenössischer Datenschutz- und Öffentlichkeitsbeauftragter (EDÖB)

EDÖB / FDPIC. Schweizer Datenschutzbehörde; Bezug zu EU-KI-Recht für die Schweiz.

Cyber Resilience Act (VO (EU) 2024/2847) — EUR-Lex

Amtsblatt der Europäischen Union. Schnittstellen-Rechtsakt zur Cybersicherheit von Produkten mit digitalen Elementen (KI-relevant).

Richtlinie (EU) 2022/2555 (NIS2) — EUR-Lex

Amtsblatt der Europäischen Union. Schnittstellen-Rechtsakt zu IT-Sicherheitsanforderungen für kritische Sektoren.

FAQ

Häufige Fragen

Ist Jugendhilfe-KI hochriskant?

Ja. Anhang III Nr. 5/6 erfasst Risiko-Scoring und Entscheidungs-Unterstützung in der Kinder-/Jugendhilfe. Volles Pflichtenbündel aus Art. 8–15 ab 2. Aug. 2026.

Muss eine Grundrechts-Folgenabschätzung erstellt werden?

Ja für öffentliche Jugendämter (Art. 27 AI Act i.V.m. Art. 26 Abs. 7): betroffene Personen (Kinder/Familien), spezifische Risiken, Maßnahmen, Aufsicht, Beschwerdeweg.

Welche Bias-Risiken bestehen?

Historische Fall-Daten spiegeln soziale/ethnische Verzerrungen; die KI verstärkt sie (Feedback-Schleife, vgl. APPROACH/Allegheny). Art. 10 verlangt Bias-Prüfung. Vollautomatische Inobhutnahme ist ausgeschlossen.

Compliance für deinen Fall

Rechtskonforme Umsetzung für KI in der Kindeswohl- und Jugendhilfeentscheidung?

Wenn du KI in der Kindeswohl- und Jugendhilfeentscheidung rechtskonform einführen oder prüfen willst, entwickle ich mit dir die passende Compliance-Strategie — von der Risikoklassifizierung bis zum Nachweis.

Jetzt beraten lassen
Related