کتاب Data Mesh نسخه Early Release Raw & Unedited یک منبع مناسب برای شروع یادگیری داده مش می‌باشد. این کتاب در 6 فصل با زبانی ساده مفهوم داده مش را برای علاقه‌مندان حوزه‌ی داده تشریح کرده است.
قبل از شروع به شرح مقدمه‌ای از کتاب Data Mesh، ابتدا Data Mesh را به صورت کوتاه تعریف می‌کنیم.
Data Mesh چیست؟
مش داده یک رویکرد جدید مبتنی بر معماری مدرن و توزیع شده برای مدیریت داده‌های تحلیلی است. این به کاربران نهایی امکان می‌دهد به راحتی به داده‌هایی که در آن زندگی می‌کنند دسترسی داشته باشند و بدون اینکه ابتدا آن‌ها را به دریاچه داده یا انبار داده منتقل کنند، جستجو کنند. استراتژی غیرمتمرکز داده مش، مالکیت داده را بین تیم‌های دامنه خاص که داده‌ها را به عنوان محصول مدیریت، مالکیت و ارائه می‌کنند، توزیع می‌کند.
چرا Data Mesh و چرا اکنون؟
پیش‌بینی می‌شود که تولید داده‌های جهانی در پنج سال آینده از 180 زتابایت فراتر رود. پلتفرم‌های داده کنونی دارای چندین شکست معماری هستند که مانع از پردازش داده‌های سازمانی شده و رشد کسب‌وکار را مهار می‌کند.
3 مشکل بسترهای داده فعلی
مشکل شماره 1: تا به حال، شرکت‌ها از یک استراتژی متمرکز برای پردازش داده‌های گسترده با منابع داده، انواع و موارد استفاده مختلف استفاده می‌کردند. با این حال، متمرکزسازی کاربران را ملزم می‌کند که داده‌ها را از مکان‌های لبه به یک دریاچه داده مرکزی وارد/انتقال دهند تا برای تجزیه و تحلیل پرس و جو شوند، که زمان‌بر و گران است.
چگونه Data Mesh آن را حل می‌کند؟
معماری توزیع شده مش داده‌ها داده‌ها را به عنوان یک مشاهده می‌کند.
محصول با مالکیت دامنه جداگانه هر واحد تجاری. این مدل مالکیت داده غیرمتمرکز با توانمندسازی واحدهای تجاری و تیم‌های عملیاتی برای دسترسی سریع و آسان به داده‌های «غیر اصلی» و تجزیه و تحلیل آن، زمان رسیدن به بینش و زمان به ارزش را کاهش می‌دهد.
مشکل شماره 2: با ادامه افزایش حجم داده‌های جهانی، روش پرس و جو در یک مدل مدیریت متمرکز نیازمند تغییراتی در کل خط لوله داده است که در مقیاس پاسخ نمی‌دهد. با افزایش تعداد منابع، زمان پاسخگویی به مصرف‌کنندگان/منابع داده جدید را کاهش می‌دهد، که بر چابکی کسب‌وکار برای دریافت ارزش از داده‌ها و پاسخ به تغییرات تأثیر منفی می‌گذارد.
چگونه Data Mesh آن را حل می‌کند؟
مش داده‌ها مالکیت مجموعه داده‌ها را از مرکز به دامنه‌ها (تیم‌های فردی یا کاربران تجاری) واگذار می‌کند تا چابکی کسب و کار و تغییر در مقیاس را فعال کند. معماری شبکه داده، شرکت‌ها را به سمت تصمیم‌گیری در زمان واقعی با بستن شکاف زمانی و مکانی بین یک رویداد و مصرف/فرآیند آن برای تجزیه و تحلیل هدایت می کند.
مشکل شماره 3: انتقال داده‌ها اغلب مستعد اقامت داده‌ها و دستورالعمل‌های حفظ حریم خصوصی است که اگر داده‌ها در مناطق جغرافیایی یا حوزه‌های قضایی خاص ذخیره شده باشند، مانند داده‌های ذخیره شده در یک کشور اتحادیه اروپا، اما نیاز به دسترسی توسط کاربر در آمریکای شمالی باشد، مهاجرت داده‌ها را ممنوع می‌کند. پیروی از مقررات حاکمیت داده زمان‌بر و خسته‌کننده است و می‌تواند به طور قابل‌توجهی نیاز تیم‌های پردازش و تجزیه و تحلیل داده‌ها را به هوش تجاری حیاتی که به آن‌ها در حفظ مزیت رقابتی کمک می‌کند، به تأخیر بیندازد.
چگونه Data Mesh آن را حل می‌کند؟
در مدیریت داده‌های غیرمتمرکز، دامنه‌ها مسئول هستند.
برای کیفیت، امنیت و انتقال محصولات داده خود. مش داده یک لایه اتصال را فراهم می‌کند که دسترسی مستقیم و قابلیت‌های پرس و جو را توسط کاربران فنی و غیر فنی به مجموعه داده‌هایی که در آن ساکن هستند، امکان‌پذیر می‌کند، و از انتقال داده‌های پرهزینه و نگرانی‌های مربوط به اقامت جلوگیری می‌کند.
منبع: Starburst
در ادامه مقدمه‌ای از کتاب Data Mesh را شرح خواهیم داد.
مقدمه‌ای بر کتاب Data Mesh:
بسیاری از شرکت‌ها در حال سرمایه‌گذاری در دریاچه داده‌های نسل بعدی هستند، به این امید که داده‌ها را در مقیاس دموکراتیزه کنند تا بینش‌های تجاری را ارائه کنند و در نهایت تصمیمات هوشمندانه خودکار بگیرند. در این کتاب کاربردی، نویسنده زمک دهقانی نشان می‌دهد که با وجود زمان، هزینه و تلاشی که برای آن‌ها انجام می‌شود، انبارهای داده و دریاچه‌های داده زمانی که در مقیاس و سرعت سازمان‌های امروزی به کار می‌روند شکست می‌خورند. مش داده‌های توزیع شده انتخاب بهتری است.
آقای دهقانی، معماران، رهبران فنی و تصمیم‌گیرندگان را در سفرشان از معماری کلان داده‌های یکپارچه به یک پارادایم اجتماعی-تکنیکی که از معماری توزیع‌شده مدرن نشأت می‌گیرد، راهنمایی می‌کند. شبکه داده، دامنه‌ها را به عنوان یک نگرانی درجه یک در نظر می‌گیرد، تفکر پلتفرم را برای ایجاد زیرساخت داده‌های خود-خدمت (self-serve) به کار می‌گیرد، داده‌ها را به عنوان یک محصول در نظر می‌گیرد، و یک مدل فدرال و محاسباتی از حاکمیت داده را معرفی می‌کند. کتاب Data Mesh به شما نشان می‌دهد که چرا و چگونه.
چشم‌انداز داده‌های فعلی را از منظر نیازهای تجاری و سازمانی، چالش‌های محیطی و معماری‌های موجود بررسی کنید:
- ویژگی‌های زیربنایی منظره و حالت‌های شکست را تجزیه و تحلیل کنید.
- آشنایی کامل با اصول مش داده و اجزای آن را دریافت کنید.
- با نحوه طراحی معماری مش داده آشنا شوید.
- فراتر از یک دریاچه داده یکپارچه به یک شبکه داده توزیع شده حرکت کنید.
همچنین شما می‌توانید علاوه بر کتاب Data Mesh، جهت یادگیری مفاهیم پایه تا پیشرفته‌ی علوم داده، از کتاب داده کاوی نیز استفاده کنید.
سرفصل‌های کتاب Data Mesh:
- Part I. Why Data Mesh?
- Chapter 1. The Inflection Point
- Chapter 2. After The Inflection Point
- Chapter 3. Before The Inflection Point
- Part II. What is Data Mesh
- Chapter 4. Principle of Domain ownership
- Chapter 5. Principle of Data as a Product
- Chapter 6. Principle of SelfServe Data Platform
- Prospective Table of Contents (Subject to Change)
فایل کتاب Data Mesh را می‌توانید پس از پرداخت، دریافت کنید.
نقد و بررسی‌ها
هنوز بررسی‌ای ثبت نشده است.