J’ai avancé aujourd’hui sur l’application d’un floutage par manipulation directe des données JPEG.
Je rappelle que la compression JPEG traite les images par petits blocs de 8x8 pixels.
J’ai tiré parti de cette caractéristique pour:
- extraire une zone à flouter en la limitant aux limites alignés tous les 8 pixels
- réduire la quantité d’information au minimum: un bloc se retrouve avec tous ses pixels d’une couleur
- remplacer les blocs correspondants dans l’image d’origine
L’avantage:
- aucune décompression / recompression de l’image, qui dégrade la qualité de celle-ci et qui nécessite des calculs (donc du CPU)
Voici un exemple, appliqué sur l’image que sort YOLO avec les objets détectés et le taux de confiance.
Ceci permet de mieux repérer les zones floutées:
Tout se fait à l’aide de jpegtran avec les options “crop” et drop", qui sont un peu comme un copier coller, et “scans” qui permet de réduire la quantité d’informations et donc d’obtenir de gros pâtés uniformes de 8x8.
Voici le code magique…
#! /bin/bash
# blur JPEG pictures by manipulating JPEG MCU (8x8 pixels blocks)
ORIGINAL=$1
OUT=$2
W=$3
H=$4
X=$5
Y=$6
TMP=/dev/shm/$BASHPID.jpg
jpegtran -crop "$W"x"$H"+"$X"+"$Y" "$1" | jpegtran -scans scans.txt > $TMP
jpegtran -drop +"$X"+"$Y" $TMP "$1" > $TMP-
mv $TMP- $2
rm $TMP
Vous pouvez voir toute une série ici : https://label-studio.cquest.org/projects/5/data?tab=7
Cela va servir à repérer les images avec des faux négatifs (floutages absents) afin d’améliorer le prochain entraînement, mais on verra ça un peu plus tard 