Blog / Intelligence artificielle

Le marquage par IA est-il fait pour vous ? Essayez-le !

Peter Krogh
Tue Mar 22 2022

Tous les comptes Mediagraph, y compris les comptes d'essai gratuits, bénéficient d'un accès au marquage automatique sans frais supplémentaires.

Il y a beaucoup de buzz autour du marquage automatique via l'intelligence artificielle/le machine learning. Mais dans de nombreux cas, il ne répond pas aux attentes. Pire encore, vous ne le découvrirez peut-être qu'après avoir consacré beaucoup de temps et d'argent à sa mise en œuvre. Ou peut-être que vous vous engagez dans un service qui n'est pas particulièrement adapté à vos besoins. Ne serait-il pas formidable de l'essayer avant de vous engager sérieusement ? MediaGraph rend cela très facile (et gratuit).
Actuellement, nous proposons trois types de marquage automatique :transcription automatique pour vidéos,étiquetage automatique des mots-clés, et détection de contenu sensible. MediaGraph vous permet d'essayer notre marquage automatique, avant même d'avoir payé pour un compte. Vous pouvez télécharger des milliers de fichiers et voir ce que l'IA d'Amazon Rekognition peut faire. En fonction du contenu, de vos besoins et des balises existantes, cela peut être vraiment utile, plutôt utile ou juste moyen.
Voyons voir.

Créer un compte d'essai

Si vous n'avez pas encore de compte, créez un compte d'essai gratuit de 30 jours - aucune carte de crédit n'est nécessaire. Il vous suffit d'aller surcette page, entrez votre adresse e-mail et démarrez le compte. (Si vous avez déjà un compte, passez à l'étape suivante).

Activer le marquage automatique

Accédez à l'onglet Gérer et ouvrez l'onglet Paramètres du site (uniquement disponible pour les administrateurs et les propriétaires de compte). Cliquez sur « Activer le balisage automatique ». Nous vous suggérons de laisser le seuil à 80 % et de laisser la case « Afficher les balises automatiques des membres généraux » décochée. Les paramètres devraient ressembler à ceci.

Vous pouvez ajouter un marquage automatique à n’importe quel compte dans les paramètres du site.

Télécharger des fichiers de test ou baliser automatiquement les fichiers existants

Une fois que vous avez activé le marquage automatique, toutes les images nouvellement téléchargées recevront les balises automatiques. Téléchargez donc simplement vos fichiers de test et laissez-lui un peu de temps pour exécuter le marquage en arrière-plan. Il est utile de télécharger une grande variété de fichiers afin de voir quel type d'informations le marquage automatique peut extraire.
Notez qu'un compte d'essai peut contenir jusqu'à 10 Go. Cela signifie que vous pouvez télécharger environ 8 000 fichiers JPEG dans le compte de démonstration. (Le nombre de 8 000 est basé sur un fichier JPEG de 3 000 pixels, enregistré en qualité #8 dans Photoshop - environ 1,2 mégaoctet chacun). Cela devrait suffire pour comprendre ce que le marquage peut faire.

Téléchargez des fichiers et ils seront automatiquement étiquetés.


Balisage des fichiers existants
Si vous avez déjà un compte avec des images, vous aurez besoin d'une étape supplémentaire pour étiqueter ces fichiers existants. Sélectionnez les images que vous souhaitez étiqueter automatiquement et cliquez sur le menu d'action. Dans leAjouter des métadonnéesflyout, vous verrezExécuter le marquage automatique. Vérifiez cela et cliquez sur Envoyer. (Vous n'aurez pas besoin de le faire pour les fichiers téléchargés à l'avenir.)
Notez que le marquage automatique peut prendre un certain temps, en particulier pour les grands groupes d'images. Il s'agit d'une opération qui s'exécute en arrière-plan. Vous pouvez surveiller la progression en consultant le panneau de filtre de marquage automatique. Il vous indiquera combien de fichiers ont été traités.

Soumettez manuellement les fichiers précédemment téléchargés à l’aide du menu Action.

Revoir les balises

Une fois le balisage terminé, vous pouvez y jeter un œil. Ouvrez le panneau Filtre et recherchez le panneau Balisage automatique. Lorsque vous l'ouvrez, vous verrez une liste des 50 balises les plus courantes pour les fichiers actuellement affichés. Passez-les en revue pour voir les résultats. Vous pouvez cliquer sur l'une des balises pour filtrer uniquement ces éléments. Vous verrez probablement un mélange de résultats - certains bons et d'autres mauvais.
Si vous avez téléchargé beaucoup de fichiers, la limite de 50 balises masquera une grande partie des balises créées. Pour une meilleure évaluation, vous pouvez examiner des groupes de fichiers plus petits, tels que ceux d'un dossier ou d'une collection individuelle.

Quels fichiers ont été manqués ?

Vous pouvez également voir quels fichiers n'ont pas reçu une balise particulière. Cela peut vous indiquer ce que le balisage automatique a manqué. Lorsque vous passez la souris sur la balise dans le panneau de filtrage, vous avez la possibilité de choisir « n'a pas de balise ». Cela masquera tous les fichiers qui ont la balise et laissera les fichiers non balisés affichés. En parcourant les fichiers, vous pouvez voir si le balisage automatique a manqué des fichiers.

Vous pouvez basculer entre « a une balise » et « n'a pas de balise » pour voir avec quelle précision Rekognition trouve un terme particulier. Dans ce cas, la plupart des fichiers marqués comme « extérieur » étaient en fait des prises de vue en extérieur. Un certain nombre d'images extérieures ont été manquées.

Découvrez comment les balises automatiques affectent la recherche

Les balises automatiques sont prises en compte dans les résultats de recherche à partir du champ de recherche principal. Dans la plupart des cas, c'est ainsi que vos membres utiliseront les balises automatiques. Tapez un terme dans le champ de recherche générale et voyez ce qui est trouvé. Vous remarquerez que les balises automatiques ne se complètent pas automatiquement dans le champ de recherche, contrairement aux balises visibles classiques. Les membres verront simplement un ensemble de fichiers correspondants (et probablement aussi quelques fichiers non correspondants).

Les balises automatiques seront prises en compte dans les résultats de recherche, mais les balises elles-mêmes ne sont pas visibles pour les membres généraux (sauf si vous définissez les paramètres du site pour qu'elles s'affichent pour les membres).).

Revoir les balises par image

Lorsque vous double-cliquez sur une image, vous accédez à la vue détaillée de l'actif. L'un des éléments que vous verrez dans les informations rapides est l'ensemble des balises automatiques attribuées au fichier. Vous pouvez supprimer celles qui ne vous conviennent pas si vous le souhaitez.
Examiner les balises avec des scores de confiance inférieurs
Vous verrez également le nombre de balises qui étaient en dessous du seuil de confiance. Lorsque vous passez la souris sur le nombre, une fenêtre contextuelle s'affiche indiquant toutes ces balises. Comme vous le verrez, la plupart des balises en dessous du seuil de 80 % sont assez peu fiables. Cela vous aide à décider si le marquage automatique est utile et si le seuil de 80 % vous convient.

ETVous pouvez voir toutes les balises automatiques qui ont été attribuées à une image dans la vue Détails de l'actif. Supprimez celles qui ne sont pas nécessaires. Vous pouvez également voir toutes les balises qui étaient en dessous du seuil de confiance.

Conversion des balises automatiques en balises intentionnelles

Les balises automatiques peuvent être utiles comme aide au balisage. Vous pouvez filtrer les balises pertinentes et les ajouter en tant que mots-clés « réels » aux fichiers appropriés. Cela peut accélérer considérablement le processus de balisage.
Voici comment procéder.
1. Filtrez sur une balise automatique que vous souhaitez convertir.
2. Passez en revue les photos affichées, il est probable que vous ne souhaitiez pas attribuer la balise à tous les fichiers, en raison d'erreurs dans le balisage automatique.
3. Sélectionnez les fichiers pertinents.
4. Créez un mot-clé « réel » correspondant.
5. Vous pouvez simplement faire glisser les fichiers sélectionnés sur la balise appropriée dans l'arborescence des balises.

Ce GIF montre comment convertir une balise automatique en une balise intentionnelle que vous ajoutez à l'arbre de taxonomie.

Évaluation des balises NSFW

Les gestionnaires de bibliothèque, les gestionnaires de contenu et les administrateurs verront les balises de contenu sensible, que nous plaçons dans le panneau NSFW (Not Safe For Work). Ces balises peuvent vous alerter sur les images répréhensibles, que vous souhaiterez peut-être supprimer ou garder cachées aux membres généraux. Comme pour les balises automatiques ci-dessus, le balisage NSFW est basé sur la probabilité et ne sera pas toujours précis.
Une fois que vous avez exécuté le processus de balisage automatique, vous pouvez trouver tous les éléments avec la balise de contenu sensible dans le panneau NSFW. Cliquez sur une balise pour voir les fichiers correspondants à évaluer. Supprimez ou masquez tous les fichiers que vous souhaitez supprimer de l'accès général.

Suppression des balises NSFW

Vous pouvez facilement supprimer les balises NSFW.

  1. Filtrer sur la balise particulière ou sur toutes les balises NSFW
  2. Sélectionnez les fichiers dont vous souhaitez supprimer la balise
  3. Accédez au menu Action et sélectionnez « Non » dans la liste déroulante des balises NSFW
  4. Appliquer aux fichiers.
  5. Toutes les balises NSFW seront supprimées et l'image sera marquée comme effacée

Vous pouvez supprimer les balises NSFW inappropriées en sélectionnant les fichiers et en supprimant les balises dans le menu d'action. Après la suppression, les fichiers seront marqués comme effacés.

Évaluation de la transcription automatique

Le dernier balisage IA que nous examinerons est la transcription automatique pour la vidéo. Celle-ci est utile pour presque tout le monde. Lorsque vous téléchargez un fichier vidéo, Amazon Rekognition analyse automatiquement l’audio et crée une transcription horodatée. Cette transcription est consultable dans la zone de recherche générale. Vous pouvez également effectuer une recherche de proximité de mots dans le panneau de filtrage, pour trouver des mots proches les uns des autres dans la bande sonore.
Pour voir la transcription complète, double-cliquez sur la vue détaillée des ressources. Vous pouvez activer les sous-titres et suivre la lecture de la vidéo. Vous pourrez vérifier l’exactitude générale de la transcription.
Lorsque vous ouvrez le panneau Transcription, vous verrez une version consultable de la transcription. Vous pouvez rechercher le mot ou la phrase en question et voir toutes les occurrences. En cliquant sur n’importe quelle ligne de la transcription, vous accédez directement à ce point de la vidéo.
Vous verrez que la transcription comporte des erreurs. Le nombre d’erreurs dépend de la clarté du discours, de la langue et du dialecte, ainsi que de la quantité d’argot ou de jargon dans la vidéo.

Ce GIF montre comment fonctionne la transcription automatique avec des fichiers vidéo. Vous pouvez rechercher un mot (dans ce cas, le mot est "mot-clé") et voir tous les fichiers où ce mot apparaît dans la bande sonore. Vous pouvez également effectuer une recherche de proximité (dans ce cas, lorsque Mot-clé et Liste sont à 100 mots ou 10 mots l'un de l'autre). Vous pouvez double-cliquer sur le fichier résultant et trouver où le terme apparaît dans la bande sonore.

Conclure

Nous espérons que la possibilité de voir le marquage automatique en action vous permettra de mieux comprendre ce qui est possible aujourd'hui et comment il pourrait vous être utile. Il est également bon de savoir ce qu'il ne peut pas faire, afin que vous puissiez définir correctement vos attentes.
Nous avons prévu un certain nombre d'autres fonctions de marquage automatique, notamment la reconnaissance optique de caractères (OCR), la reconnaissance faciale et l'utilisation de différents services de marquage. Nous nous concentrons sur celles que nous pensons les plus utiles. Dans tous les cas, nous promettons d'être toujours francs avec vous et de ne jamais exagérer les capacités du service.
Nous serions ravis d'avoir de vos nouvelles. N'hésitez pas à nous écrire et à nous faire part de vos commentaires ou des services que vous recherchez.

Photo de couverture parAmanda Dalbjörn

Mediagraph est-il adapté à votre organisation ?

Découvrons-le ensemble.

Réservez votre démo aujourd'hui