La segmentation est le processus qui divise une image ou une frame vidéo en régions ou objets distincts, en identifiant et en étiquetant chaque pixel selon le sujet, la zone ou la catégorie auquel il appartient. En imagerie IA, la segmentation crée une carte précise de ce qui se trouve où dans le cadre, permettant d’agir de façon ciblée sur des sujets, arrière-plans ou régions sans modifier le reste de l’image.

Plusieurs types de segmentation sont utilisés dans les flux image et vidéo IA. La segmentation sémantique étiquette chaque pixel avec une catégorie (personne, ciel, route, bâtiment, etc.), en regroupant tous les pixels du même type. La segmentation d’instances va plus loin en distinguant les instances d’une même catégorie (deux personnes dans le cadre sont deux objets distincts). La segmentation panoptique combine les deux en fournissant une compréhension complète de la scène. En pratique, la segmentation sous-tend la suppression de fond, les masques sélectifs, l’inpainting conscient du sujet et l’application ciblée d’effets ou de changements de style. La segmentation vidéo étend ces capacités dans le temps en suivant les régions segmentées de frame en frame.

La segmentation est une capacité fondatrice dont dépendent de nombreuses fonctionnalités visibles de génération et de montage IA sans que la technique soit exposée directement à l’utilisateur.