• en
News & Insights > Insights > 3# Data Mesh 

Le data mesh qu'est-ce que c'est ?  

Le data mesh, littéralement "maillage de données", désigne un système de traitement de big data, à l'architecture très spécifique dont le maître mot est : décentralisation.

Conceptualisé en 2019, par Zhamak Dehghani de Thoughtworks, le data mesh propose une architecture où chaque domaine de données de l’entreprise (par exemple les clients, les produits, etc.) est géré indépendamment par l’équipe qui en est responsable (approche orientée domaine). Ces données sont proposées en libre-service via des API, comme s’il s’agissait d’un produit prêt à l’usage. Il devrait en découler des gains de temps (réutilisation), d'agilité (usage comme un service) et d'espace (non duplication) dans son traitement et son analyse. Il peut se résumer comme « un changement dans l’architecture de données en libre-service, traitant les données comme un produit ».  
 

* Image Source :  Towards Data Science

Schéma data mesh

Quelle est la différence entre data lake, data warehouse et data mesh ? 

  • Le data lake est un outil permettant de stocker et de mettre à disposition de la donnée, la plus fraîche et la plus pertinente possible. Il repose sur un principe dit de schéma à lecture, où les données sont d’abord chargées telles quelles, et « interprétées » uniquement au moment de la lecture, en fonction de l’usage qui va en être fait.

 

  • Le data warehouse, est également un outil de stockage, qui repose sur un principe de schéma à écriture, c’est-à-dire que les données sont structurées et organisées dès leur chargement, selon le besoin (processus dit ETL : ExtractTransformLoad).

 

  • Le data mesh est un système d’architecture qui permet de créer des ponts entre les différentes bases de données. Les équipes d’ingénierie vont déplacer et transformer les données centralisées pour obtenir le résultat souhaité. Il permet de simplifier la collaboration et le self-service, de ce fait il vient en complément du data lake et du data warehouse.

 

Data lake vs Data warehouse

Quels sont les avantages d’un data mesh ?  

Le data mesh est censé avoir plusieurs avantages pour l’exploitation de ses données  :  

  • Data as a product  : le data mesh consiste en une infrastructure maillée de services qui vont chacun consommer de la donnée en entrée, pour la restituer nettoyée, structurée et la proposer comme un produit prêt à l’emploi. Ces produits pourront à leur tour être consommés par d’autres mailles du data mesh.  

 

  • Decentralized domain ownership : chaque division de l’entreprise est propriétaire de sa donnée car c’est elle qui en est la plus familière. Elle est responsable de collecter les données en entrée et de réaliser les transformations nécessaires pour en faire un produit.  

 

  • Self-serve data platform : la donnée est rendue accessible facilement et rapidement à tous ceux qui doivent y accéder, et ce, grâce à la mutualisation d'une infrastructure self-service (le seul point centralisé d’un data mesh). 

 

  • Federated computational governance : deux niveaux de gouvernance sont définis. Premièrement, une gouvernance intra-domaine (par domaine/BU) qui régit la qualité, la provenance, la sécurité et la conformité des données. Et deuxièmement, une gouvernance inter-domaine qui, elle, régente les risques globaux de conformité (RGPD), la standardisation des formats de données, la sécurité du système et le cycle de vie de la donnée. 

 

Le data mesh vise à offrir le maximum de flexibilité dans l’utilisation des données, validées par leur propriétaire fonctionnel, organisées et prêtes à l’emploi, combinables aisément dans de nouveaux produits associant plusieurs domaines, à leur tour diffusable simplement.

Cette vision des architectures data reste encore conceptuelle, et il faudra valider qu’elle résiste bien à son implémentation technique que des sociétés avec une forte culture data ont entrepris. 

 

Alors, Data Mesh effet de mode ou véritable concept révolutionnaire ? 

  • Insights
  • Data

Poursuivez votre
lecture

Equancy Renforce ses équipes

Equancy renforce ses équipes

Universal Analytics  s’éteint le 01 juillet 2024

Adieu ! Universal Analytics s’éteint le 01 juillet 2024

L’Oréal Luxe & Equancy : Concilier démocratisation de l’accès aux données et Confidentialité des données dans le cadre d’un projet BI d’envergure

L’Oréal Luxe : Concilier démocratisation de l’accès aux données et Confidentialité des données dans le cadre d’un projet BI d’envergure

Culture Data & RSE : Une opportunité de faire une pierre, deux coups ?

Culture Data & RSE : Une opportunité de faire une pierre, deux coups ? 

Un nouveau leadership pour le climat

Un nouveau leadership pour le climat 

Découvrez la nouvelle Offre Equancy

IA Générative - une solution pour améliorer la productivité et l'efficacité de vos équipes

Je découvre l'IA Générative by Equancy

PHP网站源码木棉湾百度竞价坂田网站设计惠州企业网站改版大浪建网站松岗网站搜索优化双龙关键词按天计费西乡百度网站优化排名福永网络推广宝安模板网站建设坂田网站排名优化西乡百姓网标王坪山设计公司网站南澳百度爱采购坪山阿里店铺运营福永网站设计模板广州网站排名优化横岗网站制作坂田模板推广布吉关键词排名包年推广大鹏SEO按天收费大浪百度网站优化同乐网站seo优化永湖网站优化按天收费惠州百姓网标王推广木棉湾百度网站优化龙华建站观澜网站优化按天计费木棉湾企业网站制作大芬百搜词包大鹏网站改版歼20紧急升空逼退外机英媒称团队夜以继日筹划王妃复出草木蔓发 春山在望成都发生巨响 当地回应60岁老人炒菠菜未焯水致肾病恶化男子涉嫌走私被判11年却一天牢没坐劳斯莱斯右转逼停直行车网传落水者说“没让你救”系谣言广东通报13岁男孩性侵女童不予立案贵州小伙回应在美国卖三蹦子火了淀粉肠小王子日销售额涨超10倍有个姐真把千机伞做出来了近3万元金手镯仅含足金十克呼北高速交通事故已致14人死亡杨洋拄拐现身医院国产伟哥去年销售近13亿男子给前妻转账 现任妻子起诉要回新基金只募集到26元还是员工自购男孩疑遭霸凌 家长讨说法被踢出群充个话费竟沦为间接洗钱工具新的一天从800个哈欠开始单亲妈妈陷入热恋 14岁儿子报警#春分立蛋大挑战#中国投资客涌入日本东京买房两大学生合买彩票中奖一人不认账新加坡主帅:唯一目标击败中国队月嫂回应掌掴婴儿是在赶虫子19岁小伙救下5人后溺亡 多方发声清明节放假3天调休1天张家界的山上“长”满了韩国人?开封王婆为何火了主播靠辱骂母亲走红被批捕封号代拍被何赛飞拿着魔杖追着打阿根廷将发行1万与2万面值的纸币库克现身上海为江西彩礼“减负”的“试婚人”因自嘲式简历走红的教授更新简介殡仪馆花卉高于市场价3倍还重复用网友称在豆瓣酱里吃出老鼠头315晚会后胖东来又人满为患了网友建议重庆地铁不准乘客携带菜筐特朗普谈“凯特王妃P图照”罗斯否认插足凯特王妃婚姻青海通报栏杆断裂小学生跌落住进ICU恒大被罚41.75亿到底怎么缴湖南一县政协主席疑涉刑案被控制茶百道就改标签日期致歉王树国3次鞠躬告别西交大师生张立群任西安交通大学校长杨倩无缘巴黎奥运

PHP网站源码 XML地图 TXT地图 虚拟主机 SEO 网站制作 网站优化