- AWS est la seule plateforme de cloud computing de Netflix
- Mais AWS fait également partie d’Amazon, qui possède Amazon Prime Video, un grand rival de Netflix.
- Les ingénieurs de Netflix ont du mal à suivre la quantité de ressources qu’ils utilisent sur AWS
Netflix, la plateforme de streaming la plus populaire au monde, domine peut-être le divertissement à domicile, mais elle a du mal à gérer l’un de ses plus grands défis opérationnels : les coûts du cloud computing.
Malgré son image avant-gardiste en matière de technologie, Netflix a admis ne pas savoir exactement combien il dépense dans le cloud, un oubli d’autant plus surprenant que son fournisseur de cloud, AWS, fait partie d’Amazon – propriétaire de Prime Video, l’un des Les plus grands concurrents de Netflix.
S’appuyant sur AWS pour le calcul, le stockage et la mise en réseau, l’infrastructure cloud de Netflix prend en charge son service de streaming mondial. Les équipes d’ingénierie utilisent des outils en libre-service pour créer et déployer des applications, générant ainsi de grandes quantités de données. Cependant, la complexité de cet écosystème fait qu’il est difficile pour Netflix de comprendre exactement comment les ressources sont utilisées et comment les coûts s’accumulent.
Garder son contenu fluide
L’équipe Platform Data Science Engineering (DSE) de Netflix s’est chargée de résoudre ce problème. La mission de l’équipe est d’aider les ingénieurs de l’entreprise à comprendre l’utilisation des ressources, leur efficacité et les coûts associés.
Pourtant, comme Netflix l’a reconnu dans un récent article de blog, la gestion des coûts du cloud est toujours un travail en cours.
Pour relever les défis auxquels il est confronté, Netflix a développé deux outils : Foundational Platform Data (FPD) et Cloud Efficiency Analytics (CEA). FPD fournit une couche de données centralisée avec un modèle standardisé, agrégeant les données d’applications comme Apache Spark. Le CEA s’appuie sur cela en appliquant une logique métier pour générer l’attribution des coûts et de la propriété, fournissant ainsi des informations sur l’efficacité et les modèles d’utilisation.
Les obstacles sont importants. L’infrastructure tentaculaire de Netflix comprend des services avec plusieurs propriétaires, des heuristiques de coûts variables et des plates-formes multi-locataires qui compliquent le suivi.
Les retards de données et les personnalisations spécifiques à la plate-forme ajoutent une couche supplémentaire de complexité. Des audits réguliers et des transformations de données sont nécessaires pour maintenir l’exactitude, mais l’entreprise admet qu’elle n’a pas encore atteint une visibilité complète sur ses dépenses cloud.
Pour l’avenir, Netflix annonce son intention d’étendre ses outils et d’intégrer l’analyse prédictive et l’apprentissage automatique pour optimiser l’utilisation et détecter les anomalies de coûts.
Alors que l’entreprise s’efforce d’affiner son approche, sa situation met en évidence une ironie frappante : la plateforme de streaming la plus populaire au monde s’appuie sur la technologie de son rival pour fournir son propre service, mais elle est encore en train de déterminer le véritable coût du maintien de la diffusion de son contenu.
