Data Management

HammerHAI Data Management unterstützt Unternehmen und Forschungsprojekte bei der Organisation, Dokumentation und sicheren gemeinsamen Nutzung von Daten für KI-Anwendungen. Der Dienst kombiniert private Datenkataloge, kontrollierte Zugriffsrechte und maschinenlesbare Datenmanagementpläne, um Transparenz, Nachvollziehbarkeit und Compliance über den gesamten KI-Lebenszyklus zu verbessern.

A filing cabinet drawer with documents above it, connected to glowing technical boxes linked to files labeled “CAD Data,” “Machine Sensor Data,” “Production Logs,” “Images,” and “Maintenance Reports.”

Zielgruppen

  • Unternehmen, die KI-Anwendungen entwickeln oder einsetzen und ihre Daten sicher und strukturiert verwalten möchten
  • Forschungs- und Innovationsprojekte mit Anforderungen an Datendokumentation und Zusammenarbeit
  • KI-Entwickler:innen und Data Scientists, die Datenherkunft, Trainingsdaten und Nutzungsrechte dokumentieren möchten
  • Projektverantwortliche und Data Stewards, die für Data Governance und Datenmanagementplanung zuständig sind

Beschreibung

Ein effektives Datenmanagement ist entscheidend für die Entwicklung zuverlässiger und vertrauenswürdiger KI-Anwendungen. Häufig sind Daten über verschiedene Systeme und Organisationen verteilt. Die Übersicht über verfügbare Datensätze, deren Zugriffsrechte und ihre Verwendung in KI-Modellen zu behalten, kann dabei eine Herausforderung darstellen. HammerHAI bietet hierfür eine integrierte Plattform für das KI-Datenmanagement. Der Service verbindet eine benutzerfreundliche Oberfläche zur Verwaltung von Datankatalogen mit einer sicheren Datenfreigabe und einer strukturierter Datenmanagementplanung.

Grundlage ist eine erweiterte Version der Open-Source-Datenkatalogplattform Piveau mit zusätzlicher Zugriffskontrolle. Unternehmen und Projekte können damit private Datenkataloge aufbauen, ohne sensible Informationen öffentlich zugänglich zu machen. Für den sicheren Datenaustausch unterstützt die Plattform S3-kompatiblen Objektspeicher mit öffentlichen oder eingeschränkten Zugriffsrechten. So lassen sich Datensätze gezielt mit Projektpartnern teilen.

Über die Integration des Data Stewardship Wizard können Datenmanagementpläne (DMPs) über eine benutzerfreundliche Oberfläche erstellt und gepflegt werden. Die Pläne sind maschinenlesbar und können in automatisierte Prozesse eingebunden werden. Ein besonderer Schwerpunkt liegt auf KI-spezifischen Anforderungen. Dazu gehören die Dokumentation der Datenherkunft (Data Provenance), die Nachvollziehbarkeit verwendeter Trainingsdaten und die Unterstützung bei Fragen zu Nutzungsrechten, Lizenzen und regulatorischen Anforderungen.

Der HammerHAI Datenmanagement Dienst bietet folgende Funktionen:

Private Datenkataloge

  • Datensätze innerhalb von Projekten und Organisationen strukturiert erfassen und verwalten.
  • Metadaten standardisiert dokumentieren und Zugriffsrechte gezielt steuern.
  • Daten auffindbar und wiederverwendbar machen, ohne sie öffentlich bereitzustellen.

Sicherer Datenaustausch

  • Datensätze über S3-kompatiblen Objektspeicher bereitstellen und austauschen.
  • Öffentliche und eingeschränkte Zugriffsrechte verwalten.
  • Daten kontrolliert zwischen Projektpartnern und Organisationen teilen.

Datenmanagementplanung

  • Datenmanagementpläne mit dem Data Stewardship Wizard erstellen und pflegen.
  • Datenerhebung, Speicherung, Zugriff und Weitergabe strukturiert dokumentieren.
  • Maschinenlesbare Datenmanagementpläne für automatisierte Prozesse bereitstellen.

KI-Provenienz und Compliance

  • Herkunft und vorgesehene Nutzung von Trainingsdaten dokumentieren.
  • Zusammenhänge zwischen Datensätzen, Trainingsprozessen und KI-Modellen nachvollziehen.
  • Fragen zu Nutzungsrechten, Lizenzen und Compliance-Anforderungen unterstützen.
  • Reproduzierbarkeit und Transparenz von KI-Entwicklungsprozessen verbessern.

Anwendungsbereiche

Der Dienst richtet sich insbesondere an Unternehmen und Verbundprojekte, die KI-Anwendungen mit mehreren Datenquellen, Projektpartnern oder regulatorischen Anforderungen entwickeln. Typische Anwendungsfälle sind:

  • Datenmanagement für KI-Projekte: Datensätze über den gesamten KI-Lebenszyklus organisieren und dokumentieren.
  • Sichere Projektzusammenarbeit: Daten kontrolliert zwischen Unternehmen, Forschungseinrichtungen und Projektpartnern austauschen.
  • KI-Provenienz und Nachvollziehbarkeit: Dokumentieren, welche Daten zum Training und zur Evaluation von KI-Modellen verwendet wurden.
  • Data Governance und Compliance: Informationen zu Datenherkunft, Lizenzen, Nutzungsrechten und Zugriffsbeschränkungen für Compliance-Prüfungen bereitstellen.
  • Maschinenlesbares Datenmanagement: Datenmanagementpläne in Projektabläufe integrieren und automatisierte Prüfungen ermöglichen.

Zugang

HammerHAI stellt die Plattform für strukturiertes und sicheres Datenmanagement bereit. Das HammerHAI-Team unterstützt bei der Einrichtung und Nutzung sowie bei der Umsetzung projektspezifischer Anforderungen.

Der Zugang zu data.hammerhai.eu erfolgt über ein HammerHAI-Benutzerkonto.

Per E-Mail: Beantragen Sie den Zugang unter access@hammerhai.eu mit einer kurzen Beschreibung Ihres KI-Anwendungsfalls.

Angeboten von

Logo of HLRS (Höchstleistungsrechenzentrum Stuttgart). The abbreviation letters in black are accompanied only by a light blue computer cursor symbol (a vertical bar with horizontal lines extending from the top and bottom) in between the R and the S.
Logo of the HammerHAI project. Above the project title (with "Hammer" in black and "HAI" in three different shades of blue) three slightly curved lines in the same shades of blue remind the viewer of a hammerhead shark - the namesake of the project in German.

Kontakt

Miroslav Puskaric

HLRS

access@hammerhai.eu

Finanzierung

Der Dienst wird durch HammerHAI (European High Performance Computing Joint Undertaking, Fördervereinbarung Nr. 101234027) unterstützt.

Haftungsausschluss

Der Dienst bietet technische Infrastruktur und Unterstützung für Datenmanagement, Dokumentation und Compliance-Prüfungen. Er ersetzt keine Rechtsberatung und garantiert keine Einhaltung geltender Datenschutz-, Lizenz- oder KI-Vorschriften. Die Verantwortung für die rechtmäßige Nutzung von Daten und KI-Modellen liegt bei den jeweiligen Organisationen.

Förderung

Die Beschaffung und der Betrieb des KI-optimierten EuroHPC-Supercomputers werden gemeinsam von der EuroHPC Joint Undertaking über das Programm „Digitales Europa“ der Europäischen Union sowie vom Bundesministerium für Forschung, Technologie und Raumfahrt (BMFTR) und dem Ministerium für Wissenschaft, Forschung und Kunst Baden-Württemberg gefördert.

Die geäußerten Ansichten und Meinungen sind ausschließlich die der Autorinnen und Autoren und spiegeln nicht zwangsläufig die der Europäischen Union oder der EuroHPC JU wider. Dieses Projekt wird von der European High Performance Computing Joint Undertaking im Rahmen der Fördervereinbarung Nr. 101234027 gefördert. Dieses Projekt wird von der Europäischen Kommission, dem Bundesministerium für Forschung, Technologie und Raumfahrt (BMFTR), dem Ministerium für Wissenschaft, Forschung und Kunst des Landes Baden-Württemberg, dem Bayerischen Staatsministerium für Wissenschaft und Kunst und dem Niedersächsischen Ministerium für Wissenschaft und Kultur kofinanziert.

Logo of the Federal Ministry of Research, Technology and Space of Germany. A black eagle icon (coat of arms of Germany) on the left, a vertical strip in the colors of the German flag (black, red, yellow) to the right of it and even further to the right the wordmark "Bundesministerium für Forschung, Technologie und Raumfahrt".
Logo of the Federal Ministry of Research, Technology and Space of Germany. A black eagle icon (coat of arms of Germany) on the left, a vertical strip in the colors of the German flag (black, red, yellow) to the right of it and even further to the right the wordmark "Bundesministerium für Forschung, Technologie und Raumfahrt".