Your Smart TV is Watching What You Watch

Si vous envisagez d’acheter un téléviseur « intelligent » pour les vacances, sachez que votre nouvel appareil capture constamment des instantanés de ce qui est à l’écran et les renvoie au fabricant, même si vous l’utilisez comme ordinateur. surveiller et ne pas regarder la télévision du tout. Les résultats proviennent d’une étude récente menée par des informaticiens de l’Université de Californie à Davis ; Collège universitaire de Londres ; et l’Université Carlos III de Madrid, publié dans les actes de la conférence ACM sur la mesure Internet 2024.

Les téléviseurs intelligents peuvent faire tout ce que font les téléviseurs « stupides » ou linéaires, en plus de fournir une large gamme de services Internet et de chaînes supplémentaires proposées par les fabricants. Vous pouvez également diffuser du contenu à partir d’autres appareils, tels que des ordinateurs portables et des téléphones, sans fil ou avec une connexion HDMI.

Les entreprises technologiques collectent des informations sur notre utilisation d’Internet et les utilisent pour vendre des publicités ciblées. Zubair Shafiq, professeur agrégé d’informatique à l’UC Davis, et Yash Vekaria, étudiant diplômé, voulaient savoir comment les annonceurs vous suivent entre les appareils. Par exemple, vous pourriez regarder la télévision dans le salon, puis aller dans une autre pièce pour travailler sur votre ordinateur portable et voir des publicités liées aux émissions que vous venez de regarder apparaître sur vos flux.

« Pour comprendre le suivi multi-appareils, nous voulions d’abord comprendre comment ces fabricants de téléviseurs ou annonceurs savent ce qui pourrait intéresser l’utilisateur. Lorsque nous avons commencé à nous pencher sur la question, nous sommes tombés sur une technologie appelée ACR, qui signifie reconnaissance automatique de contenu. . Et nous avons constaté que c’est le principal composant responsable de la génération de segments d’audience sur une télévision intelligente », a déclaré Vekaria.

ACR peut reconnaître le contenu sur la base de petits extraits, similaire à l’application Shazam qui peut identifier la chanson et l’artiste si vous lui jouez un morceau de musique. Ce code ACR est intégré au système d’exploitation des téléviseurs intelligents.

Les chercheurs ont examiné les téléviseurs fabriqués par deux grands fabricants, Samsung et LG. Vekaria a mis en place un serveur intermédiaire pour capturer le trafic provenant d’un téléviseur dans le laboratoire et découvrir où il peut se diriger sur Internet. Il a également fouillé le code exécuté sur les appareils.

Ils ont découvert que les téléviseurs intelligents capturaient des instantanés audio ou vidéo toutes les 10 millisecondes, les regroupaient et utilisaient un algorithme pour générer une « empreinte digitale » représentant tout le contenu sur un intervalle de temps, comme la dernière minute. Cette empreinte digitale a été envoyée à un serveur de l’entreprise et comparée à une base de données de tout le contenu disponible via le service TV.

«Ils effectuent une comparaison avec la base de données pour déterminer quel élément exact de contenu cet utilisateur diffuse à ce moment-là. Lorsqu’ils font cela sur une période de temps, ils peuvent en déduire que, disons, cette personne regarde la NFL de 21 heures à midi, mais qu’elle regarde généralement les informations l’après-midi », a déclaré Vekaria.

Les sociétés de télévision peuvent ensuite utiliser ces informations pour vendre des publicités ciblées sur leur plateforme.

« Ces plateformes publicitaires pour téléviseurs intelligents présentent un vaste profil de chaque client TV, et les publicités sur chaque téléviseur sont personnalisées en fonction de ce profil », a déclaré Shafiq.

Capturer des types de contenu

Les chercheurs ont étudié cinq types de contenus : la télévision « linéaire », une chaîne de télévision unique diffusée par antenne ; FAST (Free Ad-Supported TV), essentiellement une chaîne de télévision diffusée sur Internet ; OTT (over the top), applications de streaming telles que Netflix ou Prime, diffusées sur Internet ; contenu provenant d’un ordinateur portable ou d’une console de jeu connecté par câble HDMI ; et du contenu screencast mis en miroir à partir d’un ordinateur portable ou d’un téléphone à proximité.

Ils ont constaté que l’ACR sur les téléviseurs vendus aux États-Unis capturait la télévision linéaire, les chaînes FAST et le contenu partagé via des connexions HDMI, mais pas les screencasts et le contenu OTT. Cette dernière situation est probablement due à des accords avec ces entreprises, qui collectent leurs propres données sur les utilisateurs.

Les chercheurs ont également comparé l’ACR dans les mêmes marques de téléviseurs intelligents au Royaume-Uni et aux États-Unis. Ils ont constaté que les informations étaient collectées et partagées à peu près au même rythme dans les modèles britanniques, mais qu’il y avait davantage de restrictions sur la collecte de données ACR sur FAST. contenu, probablement en raison de différences dans les accords entre les fabricants et les titulaires de droits d’auteur.

La documentation fournie avec ces téléviseurs mentionne la collecte de données et l’ACR, mais les descriptions sont vagues et de haut niveau, a déclaré Shafiq. Par défaut, vous devez adhérer à ACR pour configurer votre nouveau téléviseur. Il est possible de revenir en arrière et de désactiver ces paramètres, mais ce n’est pas simple.

« En tant qu’utilisateur, vous ne connaissez peut-être pas toutes les options possibles que vous devez désactiver », a déclaré Shafiq. « Il est très facile d’adhérer, mais de se retirer, c’est un long processus. »

Les téléviseurs intelligents ne sont qu’un début, a déclaré Shafiq. Les entreprises travaillent sur des technologies telles que Microsoft Recall, qui enregistre tout ce que vous faites sur l’écran de votre appareil et l’analyse avec l’IA.

« Fondamentalement, c’est l’ACR suralimenté par l’IA qui sera présent dans tous nos autres appareils dans un avenir proche. Il semble donc que les choses évoluent dans la mauvaise direction du point de vue de la vie privée », a déclaré Shafiq.

Quant à cette période de magasinage des fêtes, Shafiq a déclaré qu’il cherchait une télévision stupide.

« Faites-moi savoir si vous pouvez en trouver un », dit-il.

Les autres auteurs de l’article sont Gianluca Anselmi et Anna Maria Mandalari, de l’University College London, et Patricia Callejo, de l’Université Carlos III de Madrid. Le travail a été soutenu par des subventions de la National Science Foundation, du Engineering and Physical Sciences Research Council (Royaume-Uni) et de l’Union européenne.

À lire aussi