🔬 Werde Teil unseres Teams: Studentische Mitarbeit / Praktikum im Bereich Real-time NeRF Training für 3D-Rekonstruktion am Fraunhofer IIS in Erlangen

Stichworte

• NeRF
• 3D-Rekonstruktion
• Echtzeit-Scanning
• Computer Vision
• Python
• C++
• Streaming Pipeline
• Fraunhofer IIS
• Erlangen

Zusammenfassung

Das Fraunhofer-Institut für Integrierte Schaltungen IIS in Erlangen sucht einen engagierten Studenten oder Praktikanten zur Unterstützung im Bereich der neuronalen 3D-Rekonstruktion. Der Fokus liegt auf der Entwicklung und Optimierung von Echtzeit-Scanning-Methoden unter Verwendung von Neural Radiance Fields (NeRFs). Der Kandidat wird bestehende Ansätze evaluieren, eine Streaming-Pipeline implementieren und zur Weiterentwicklung eines innovativen Scanning-Systems beitragen. Es erwartet Sie ein anwendungsbezogenes Forschungsumfeld mit flexiblen Arbeitszeiten und der Möglichkeit zur persönlichen Weiterentwicklung.

Benefits und Qualifikationen

• Anwendungsorientiertes Forschungsumfeld
• Umfassende Betreuung durch wissenschaftliche Mentoren
• Flexible Arbeitszeiten

Stellenausschreibung

Neuronale 3D-Rekonstruktion ist ein wachsendes Feld in der Computer Vision, das sich auf die Generierung von 3D-Darstellungen aus 2D-Bildern oder Videos konzentriert. Lernalgorithmen wie Neural Radiance Fields (NeRFs) spielen bei diesem Ansatz eine wichtige Rolle. NeRFs sind neuronale Netze, die die 3D-Form und -Farbe von Objekten in einem kontinuierlichen 3D-Raum modellieren. Durch das Training mit mehreren 2D-Bildern können NeRFs die Strahlung an jedem 3D-Punkt vorhersagen und so die Erstellung realistischer und detaillierter 3D-Modelle ermöglichen.

Derzeit gibt es nur begrenzte Anwendungen von NeRFs mit Echtzeit-Scanning. Es gibt neuere Arbeiten wie Nerfcapture und Nerf_Bridge, die versuchen, dies zu beheben. Diese Scanning-Apps haben jedoch ihre eigenen Einschränkungen. Wir wollen diese Methoden evaluieren, auf ihren Implementierungen aufbauen und ihre Einschränkungen beseitigen, um ein Scanning-System zu entwickeln, das die folgenden Schritte inkrementell/online ausführt:
Bilderfassung -> Kamerakalibrierung -> Streaming von Daten zur NeRF-Trainingspipeline -> Leistungsüberwachung

Weitere Informationen zu unserer 3D-Rekonstruktionsforschung finden Sie unter
https://www.iis.fraunhofer.de/en/profil/zukunftsinitiativen/artificial-intelligence/dsai.html

Interesse geweckt? Dann schau dir unser Angebot an!

• Du evaluierst modernste Echtzeit-Scanning-Ansätze, die z. B. in Nerfcapture, Nerf_Bridge usw. vorgeschlagen werden, und verstehst ihre Herausforderungen.
• Du baust auf einer bestehenden App auf oder entwickelst unsere eigene App, um ihre Einschränkungen konsequent zu beseitigen.
• Du lernst und implementierst NeRF-Training mit Streaming-Daten.
• Du erwirbst Fachwissen über Best Practices für Echtzeit-Scanning, Erfassung und 3D-Rekonstruktionstechniken und förderst ein tiefes Verständnis des Themas.
• Du dokumentierst gründlich alle erfassten Datensätze, rekonstruierten Modelle und Experimente, die während des Projekts durchgeführt wurden.

• Du studierst derzeit Medienproduktion, Elektrotechnik, Informatik, Informations- und Kommunikationstechnologien oder ein verwandtes Fachgebiet.
• Du hast Erfahrung in der Programmierung mit Sprachen wie Python, C++, Java usw.
• Du bist daran interessiert, eine Streaming-Pipeline auf Basis von Data Distribution Systems (DDS) aufzubauen.

Optional:

• Du kennst die Grundlagen der Bildverarbeitung und 3D-Computer Vision, z. B. Kamerakalibrierung, Multi-View-Geometrie usw.
• Du bist mit Tools wie Git, IDE (z. B. VSCode) usw. vertraut.

• Ein interessantes, anwendungsorientiertes Forschungsfeld mit innovativen Projekten und modernster Laborumgebung.
• Umfassende professionelle Unterstützung durch wissenschaftliche Mentoren.
• Flexible Arbeitszeiten, die es dir ermöglichen, dein Studium und deine Berufserfahrung in Einklang zu bringen.
• Ein offenes und freundliches Arbeitsumfeld.
• Ausreichend Gelegenheit, deine Interessen und Fähigkeiten zu entwickeln.

Die wöchentliche Arbeitszeit wird nach Vereinbarung festgelegt. Du kannst ab sofort beginnen (als studentische Hilfskraft von 10 bis 20 Stunden pro Woche oder als Praktikant für einen Zeitraum von mindestens drei Monaten). Du kannst deine Stunden vor Prüfungen reduzieren und in den Semesterferien erhöhen. Du kannst die Arbeitstage flexibel bestimmen. Nach deinem Studium hast du die Möglichkeit, Voll- oder Teilzeit bei uns zu arbeiten.

Gerne bieten wir dir die Möglichkeit, in Zusammenarbeit mit uns eine Bachelorarbeit (für einen Zeitraum von sechs Monaten) im oben genannten Themenbereich zu verfassen. Die Vergabe und Durchführung der Arbeit erfolgt nach den Regeln deiner Universität. Bitte besprich die Arbeit daher mit einem Professor, der dich im Laufe des Projekts beraten kann.

Wenn du Fragen zu diesem Stellenangebot hast, wende dich bitte an:
Ashutosh Mishra (ashutosh.mishra@iis.fraunhofer.de), Telefon: +49 9131 / 776-6789

Wir schätzen und fördern die Vielfalt der Fähigkeiten unserer Mitarbeiter und begrüßen daher alle Bewerbungen - unabhängig von Alter, Geschlecht, Nationalität, ethnischer und sozialer Herkunft, Religion, Weltanschauung, Behinderung, sexueller Orientierung und Identität.

Bewirb dich jetzt online (PDF: Anschreiben, Lebenslauf, Zeugnisse). Wir freuen uns darauf, dich kennenzulernen!

Fraunhofer-Institut für Integrierte Schaltungen IIS
www.iis.fraunhofer.de/en