Wissenschaftliche Mitarbeitende (m/w/d) im Bereich Computer Vision und Sprachmodelle

Das Deutsche Forschungszentrum für Künstliche Intelligenz (DFKI) ist eines der weltweit größten Forschungsinstitute für Softwaretechnologie auf der Basis von Methoden der Künstlichen Intelligenz (KI). Der Forschungsbereich Augmented Vision in Kaiserslautern unter Leitung von Prof. Dr. Didier Stricker befasst sich im Allgemein mit den Themengebieten Rechnersehen (Computer Vision), Bildverarbeitung, Bildverstehen, Augmented Reality und 3D-Rekonstruktion aus Kamerabildern u.a. mit Ansätzen wie Deep-Learning.

Ihre Aufgaben

Entwicklung und Implementierung fortgeschrittener Algorithmen für Computer Vision und Sprachmodelle, einschließlich Objekterkennung, Bildsegmentierung und Verstehen natürlicher Sprache auch in Zero-Shot-Einstellungen.

Sammeln, Vorverarbeiten und Kommentieren großer Datensätze für das Training und die Validierung von Bildverarbeitungs- und Sprachmodellen.

Deep-Learning-Modelle Training mit Frameworks wie TensorFlow oder PyTorch und optimierung hinsichtlich Leistung, Genauigkeit und Effizienz.

Bewertung der Modellleistung anhand verschiedener Metriken wie Präzision, Recall, BLEU und Perplexität; Durchführung von strenge Tests, um Robustheit und Zuverlässigkeit zu gewährleisten.

Entwicklung von Prototypen und Implementierung von Lösungen in realen Anwendungen, um praktische Anwendbarkeit und Skalierbarkeit zu gewährleisten.

Erstellung und Pflege von Softwaretools und Bibliotheken, die die Forschung und Entwicklung in den Bereichen Computer Vision und Sprachmodelle erleichtern.

Unsere Anforderungen

Master-Abschluss in Informatik oder einem verwandten Fachgebiet.

Fundierte Kenntnisse des maschinellen Lernens, insbesondere des Deep Learning.

Idealerweise Erfahrung mit LLM für Computer Vision.

Gute Programmierkenntnisse in mindestens einer der Programmiersprachen.

Kreativität, Selbstständigkeit, Teamgeist und eine proaktive Einstellung.

Das Deutsche Forschungszentrum für Künstliche Intelligenz GmbH (DFKI) wurde 1988 als gemeinnützige Public-Private-Partnership (PPP) gegründet. Das DFKI verbindet wissenschaftliche Spitzenleistung und wirtschaftsnahe Wertschöpfung mit gesellschaftlicher Wertschätzung. Das DFKI forscht seit über 35 Jahren an KI für den Menschen und orientiert sich an gesellschaftlicher Relevanz und wissenschaftlicher Exzellenz in den entscheidenden zukunftsorientierten Forschungs- und Anwendungsgebieten der Künstlichen Intelligenz. In der internationalen Wissenschaftswelt zählt das DFKI zu den wichtigsten „Centers of Excellence“.

Schwerbehinderte Bewerberinnen und Bewerber und Gleichgestellte werden bei gleicher Eignung besonders berücksichtigt. Das DFKI beabsichtigt, den Anteil von Frauen im Wissenschaftsbereich zu erhöhen und fordert deshalb Frauen ausdrücklich auf, sich zu bewerben.

Researcher(s) (m/f/d) in the field of Computer Vision and Large Language Models

The German Research Centre for Artificial Intelligence (DFKI) is one of the world’s largest research institutes for software technology based on artificial intelligence (AI) methods. The research area Augmented Vision inKaiserslautern, headed by Prof. Dr. Didier Stricker, is generally concerned with the topics of computer vision, image processing, image understanding, augmented reality and 3D reconstruction from camera images, including approaches such as deep learning.

Your tasks

Develop and implement advanced algorithms for computer vision and language models, including object detection, image segmentation, and natural language understanding also in zero-shot setting.

Collect, preprocess, and annotate large datasets for training and validating both computer vision and language models.

Train deep learning models using frameworks such as TensorFlow or PyTorch, optimizing for performance, accuracy, and efficiency.

Evaluate model performance using various metrics like precision, recall, BLEU, and perplexity; conduct rigorous testing to ensure robustness and reliability.

Stay updated with the latest research papers and technological advancements in both computer vision and natural language processing, proposing innovative solutions to complex problems.

Develop prototypes and implement solutions in real-world applications, ensuring practical applicability and scalability.

Create and maintain software tools and libraries that facilitate research and development in computer vision and language models

Your qualifications

Master’s degree in computer science or a related field.

Sound knowledge of machine learning, especially deep learning.

Ideally, experience with LLM for computer vision.

Good programming skills in at least one of the programming languages.

Creativity, independence, team spirit, and a proactive attitude.

The German Research Center for Artificial Intelligence (DFKI) has operated as a non-profit, Public-Private-Partnership (PPP) since 1988. DFKI combines scientific excellence and commercially-oriented value creation with social awareness and is recognized as a major “Center of Excellence” by the international scientific community. In the field of artificial intelligence, DFKI has focused on the goal of human-centric AI for more than 35 years. Research is committed to essential, future-oriented areas of application and socially relevant topics.

DFKI encourages applications from people with disability; DFKI intends to increase the proportion of female employees in the field of science and encourages women to apply for this position.


Apply here.