ESKIMO
Zwei Bauleiter mit Helmkamera und Tablet vor einem Neubau
BMBF-Forschungsprojekt · 2020–2022

Mit Künstlicher Intelligenz die Baustelle genau im Blick.

ESKIMO hat untersucht, wie KI Bilder von der Baustelle auswertet – für Qualitätssicherung, Leistungsabgleich und Baulogistik.

Ergebnisse ansehen

Worum es ging

ESKIMO steht für „Entwicklung von Systembausteinen der Künstlichen Intelligenz für eine digitale mobile Wertschöpfungskette für die Bauausführung“.

Auf Baustellen entstehen täglich Tausende Fotos – mit Helmkameras, Smartphones und Tablets. Elf Partner aus Bauwirtschaft und Forschung haben zwei Jahre lang untersucht, wie Künstliche Intelligenz diese Bilder auswertet: Bauteile und ihre Merkmale erkennen, optische Mängel wie Kratzer oder Risse finden, das Ergebnis mit dem BIM-Modell abgleichen.

So entsteht ein laufend aktualisiertes Abbild des Bauzustands. Darauf bauen die drei Pilot-Module auf, die im Projekt entwickelt und auf Baustellen der Anwendungspartner erprobt wurden.

Laufzeit
1. April 2020 – 30. Juni 2022
Förderung
Bundesministerium für Bildung und Forschung
Förderkennzeichen
16IS20011A
Gesamtvolumen
2,4 Mio. €
Koordination
Open Experience GmbH, Karlsruhe

Drei Pilot-Module

Jedes Modul übernimmt eine Aufgabe der Bauüberwachung, die heute viel Handarbeit kostet.

01

Technische Qualitäts­sicherung

Optische Abweichungen vom Soll – Beschädigungen, Flecken, Verfärbungen – und strukturelle Unterschiede zum BIM-Modell, etwa fehlende oder falsch eingebaute Bauteile, werden automatisch erfasst.

Pilot: Open Experience
02

Kaufmännische Qualitäts­sicherung

Regelmäßige Ist-Aufnahmen zeigen, wann ein Bauteil eingebaut wurde. Daraus entstehen ein stets aktuelles Raumbuch, eine teilautomatisierte Rechnungsprüfung und die automatische Bautenstandsermittlung.

Pilot: PMG, auf Basis von PAVE
03

Intelligente Baulogistik

Logistische Abläufe inner- und außerhalb der Baustelle: Lagerplätze und Verfahrenswege so planen, dass Flächen und Ressourcen bestmöglich genutzt werden.

Pilot: Actimage und Frankfurt Economics

Die Basistechnologien

Unter den Piloten liegen Bausteine, die Forschungseinrichtungen entwickelt haben.

  • KITAdaptive Erkennung von Bauobjekten aus Bild- und Sensordaten
  • Fraunhofer IOSBTopologischer Abgleich von BIM-Modell und Realität
  • Hochschule DarmstadtEchtzeit-Positionsermittlung zur Optimierung der Bauabläufe
  • TU DarmstadtArbeitswissenschaft und Datenschutz aus Sicht der Nutzer
Bauleiter mit Helmkamera bedient ein Tablet

Was ESKIMO gezeigt hat

Mehr als 100.000 Baustellenfotos wurden gesichtet, sortiert und verschlagwortet. Die damit trainierte KI erkennt optische Mängel, bestimmt die Aufnahmeposition und macht Personen unkenntlich.

360-Grad-Aufnahme eines Rohbauraums, die KI hat Fenster und Auffälligkeiten mit Rahmen markiert
360°-Bild
Tablet mit Foto einer Wanddose, die KI meldet: Abdeckung fehlt
Mangel erkannt
Software zeigt ein 360-Grad-Foto neben dem Grundriss mit der automatisch bestimmten Aufnahmeposition
Position aus dem Bild
Baustellenfoto, auf dem eine Person automatisch verpixelt ist
Personen verpixelt
100.000+Baustellenfotos gesichtet und sortiert
218.223Annotationen auf 14.819 Fotos realer Baustellen
3Pilot-Module, erprobt mit echten Daten

Was daraus wurde: DIGIBAU 360 → KI auf der Baustelle heute →

Veröffentlichungen

Tagungsband und Abschlussbericht sind in der Reihe „Digitale Transformation“ erschienen (ISSN 2512-8108, Herausgeber Konstantin Krahtov).

Titelseite Digitale Transformation, Ausgabe 6

Ausgabe 6 · 2022

Systembausteine der Künstlichen Intelligenz für die Bauausführung

Tagungsband zur öffentlichen Veranstaltung: adaptive Bauobjekterkennung, bildbasierte Lokalisierung, Echtzeit-Positionierung, technische Qualitätssicherung und Praxisbeiträge.

Titelseite Digitale Transformation, Ausgabe 7

Ausgabe 7 · 2023

Abschlussbericht zum Forschungsprojekt ESKIMO

Aufgabenstellung, Ablauf und Ergebnisse aller Partner, Nutzen und Verwertbarkeit sowie die Datenschutzbetrachtung einer KI-Anwendung für die Baubranche.

Bestellbar unter forum@openexperience.de · Die Reihe erscheint zum Forum Digitale Transformation.

Chronik

  1. Startschuss

    Kick-off des Konsortiums – wegen der Corona-Krise als Online-Treffen. Drei Pilot-Module, drei Basistechnologien, zwei Jahre Zeit.

    Videokonferenz mit den Teilnehmenden des ESKIMO-Kick-offs

  2. Halbzeit

    Über 100.000 Bilder bereitgestellt, Tausende sortiert und verschlagwortet, rund 55.000 Labels erstellt. Fraunhofer IOSB und Hochschule Darmstadt legen erste Prototypen zur Positionserkennung vor.

  3. Umsetzungsphase

    Die Module werden zu den drei Piloten zusammengeführt und auf Baustellen mit echten Daten erprobt.

  4. Öffentliche Veranstaltung

    Die Partner stellen ihre Ergebnisse vor. Der Tagungsband erscheint als Ausgabe 6 der Reihe „Digitale Transformation“.

  5. Projektende

    Nach 27 Monaten endet die Förderphase.

  6. Abschlussbericht

    Der Bericht aller Partner erscheint als Ausgabe 7.

Partner

Bauwirtschaft, Softwarehäuser und Forschung – koordiniert von Open Experience in Karlsruhe.

Projektpartner beim Pressetermin auf einer Baustelle in Darmstadt

Piloten

Open Experience GmbHKoordination PMG Projektraum Management GmbH Actimage GmbH Frankfurt Economics

Basistechnologien

Karlsruher Institut für Technologie Fraunhofer IOSB Hochschule Darmstadt Technische Universität DarmstadtUnterauftrag MDT technologies GmbHIndustriepartner

Anwendung

Bauunternehmung Karl Gemünden GmbH & Co. KG Ed. Züblin AG Implenia Hochbau GmbHassoziiert
Gefördert vom Bundesministerium für Bildung und Forschung

Das Verbundprojekt ESKIMO wurde vom Bundesministerium für Bildung und Forschung gefördert, Förderkennzeichen 16IS20011A. Die Verantwortung für den Inhalt dieser Seite liegt beim Projektkonsortium.

Fragen zu ESKIMO?

Zu Ergebnissen, Daten oder Abschlussbericht antwortet die Projektkoordination.

info@openexperience.de Open Experience