With the dramatic growth of the image data on the web, there is an increasing demand of the algorithms capable of understanding the visual information automatically.

This thesis mainly focuses on multimodal understanding and Visual Question Answering (VQA) via deep learning methods. For technical contributions, this thesis first focuses on improving multimodal fusion schemes via multi-stage vision-language interactions.

This thesis mainly focuses on cross-modal retrieval and single-modal image retrieval via deep learning methods, i.e. by using deep convolutional neural networks.

In 2018, the number of mobile phone users will reach about 4.9 billion. Assuming an average of 5 photos taken per day using the built-in cameras would result in about 9 trillion photos annually.

Tomography is a powerful technique to non-destructively determine the interior structure of an object.Usually, a series of projection images (e.g.\ X-ray images) is acquired from a range of different positions.

The invention of neural networks marks a critical milestone in the pursuit of true artificial intelligence. Despite their impressive performance on various tasks, these networks face limitations in learning efficiently as they are often trained from scratch.

In deep reinforcement learning, searching and learning techniques are two important components. They can be used independently and in combination to deal with different problems in AI, and have achieved impressive results in game playing and robotics. These results have inspired research into artificial…

Sewer pipes are an essential infrastructure in modern society and their proper operation is important for public health. To keep sewer pipes operational as much as possible, periodical inspections for defects are performed.

In this thesis we explore machine and deep learning approaches that address keychallenges in high dimensional problem areas and also in improving accuracy in wellknown problems. In high dimensional contexts, we have focused on computational fluid dynamics (CFD) simulations.

Radiography is an important technique to inspect objects, with applications in airports and hospitals. X-ray imaging is also essential in industry, for instance in food safety checks for the presence of foreign objects.

In this thesis, we have studied cell images from two types of cells, including pollen grains and the immune cells, neutrophils. These images are captured using a bright field microscope and a confocal microscope.

Over several decades, a variety of computational methods for drug discovery have been proposed and applied in practice. With the accumulation of data and the development of machine learning methods, computational drug design methods have gradually shifted to a new paradigm, i.e. deep learning methods…

Een intelligente vertaalmachine gebaseerd op nieuwe ontwikkelingen in machine learning gaat de concurrentie aan met grote vertaalservices als die van Google. Maar ook Google maakt grote vorderingen sinds het is het is overgestapt op deep learning, aldus informatica-onderzoeker Suzan Verberne in de V…

Dankzij deep learning schaakt computerprogramma AlphaZero beter dan de beste mens. De computer wint omdat hij door patroonherkenning verder vooruit kan rekenen dan een mens. In NRC bespreekt Aske Plaat deze bijzondere ontwikkeling. Hij verwacht dat de grote techbedrijven er alles aan zullen doen om…

In this thesis, topics relating to the optimization of high-throughput pipelines used for imaging are discussed. In particular, different levels of implementation, i.e., conceptual, software, and hardware, are discussed and the thesis outlines how advances on each level need to be made to make gains…

Hoe is Google’s computerprogramma AlphaGo zo goed geworden in bordspel Go dat het de wereldkampioen kon verslaan? Op 29 juni vertelt ontwikkelaar Aja Huang daarover tijdens een lezing in het Gorlaeusgebouw.

De voorspelling van Jaap van den Herik, directeur van het Leiden Centre of Data Science, is uitgekomen: Google-computer AlpaGo heeft de wereldkampioen Go verslagen met 4-1. In interviews met de Volkskrant en BNR Nieuwsradio vertelt Van den Herik over het toernooi én over de volgende uitdaging: het spel…

Hoe is Google’s computerprogramma AlphaGo zo krachtig geworden? Op 29 juni vertelde ontwikkelaar Aja Huang daarover tijdens een lezing in het Gorlaeusgebouw.

Het ontwikkelen van nieuwe geneesmiddelen is een moeilijk proces. Farmaceutisch wetenschapper Xuhan Liu heeft met behulp van kunstmatige intelligentie methoden ontwikkeld die kunnen helpen bij het sneller en goedkoper ontwerpen van medicijnen. Promotie op 15 februari.

supercomputer ALICE is uitgebreid. Hierdoor kunnen onderzoekers en studenten met zwaardere modellen werken. Van onderzoek naar taal tot scans van hersenactiviteiten, de uitbreiding is goed nieuws voor uiteenlopende onderzoekers.

Optical projection tomography (OPT) is a tomographic 3D imaging technique used for specimens in the millimetre scale.

Hoogleraren Aske Plaat (Data Science) en Catholijn Jonker (Explainable AI), verbonden aan informatica-instituut LIACS van de Universiteit Leiden, spreken in het BNR Nieuwsradioprogramma De Nieuwe Wereld over beslissingen van computers. Van zelfsturende auto's tot intelligente zeeppompjes: moeten we…

Het coronavirus heeft de wereld in zijn greep. Het vinden van een medicijn is nog nooit zo belangrijk geweest. Helaas zijn de ontwikkeling van nieuwe medicijnen en de ontwikkeling van een vaccin complexe, langdurige en vooral kostbare processen. Computermodellen kunnen dit proces versnellen. Wetenschappers…