پارچه داده (Data Fabric) چیست؟

برای بررسی عمیق‌تر، ابتدا شش عاملی را که یک بافت داده را از یک اکوسیستم استاندارد ادغام داده متمایز می‌کند، مورد بحث قرار می‌دهیم:

• کاتالوگ داده غنی‌شده: کاتالوگ داده شما شامل و تحلیل انواع فراداده (ساختاری، توصیفی و مدیریتی) خواهد بود تا به اطلاعات شما زمینه ببخشد.
• گراف دانش: برای کمک به شما و الگوریتم‌های هوش مصنوعی/یادگیری ماشین در تفسیر معنای داده‌هایتان، یک گراف دانش ایجاد و مدیریت خواهید کرد که به طور رسمی روابط بین موجودیت‌های داده شما (مفاهیم، اشیاء، رویدادها و غیره) را نشان می‌دهد. و باید با معناشناسی داده یکپارچه، که معنای اجزای داده را خودشان توصیف می‌کند، تقویت شود.
• فعال‌سازی فراداده: شما از فراداده دستی (غیرفعال) به فراداده خودکار (فعال) تغییر خواهید کرد. مدیریت فراداده فعال از یادگیری ماشین استفاده می‌کند تا به شما امکان ایجاد و پردازش فراداده در مقیاس وسیع را بدهد.
• موتور پیشنهاد: بر اساس فراداده فعال شما، الگوریتم‌های هوش مصنوعی/یادگیری ماشین به طور مداوم تحلیل، یادگیری و پیشنهادها و پیش‌بینی‌هایی در مورد اکوسیستم ادغام و مدیریت داده شما ارائه خواهند کرد.
• آماده‌سازی و دریافت داده: تمام رویکردهای رایج آماده‌سازی و تحویل داده، از جمله پنج الگوی کلیدی ادغام داده: ETL، ELT، جریان داده، ادغام برنامه و مجازی‌سازی داده، پشتیبانی خواهند شد.
• DataOps: تیم DevOps خود را با مهندسان داده و دانشمندان داده خود گرد هم آورید تا اطمینان حاصل کنید که بافت شما نیازهای کاربران IT و تجاری را پشتیبانی می‌کند.

همانطور که در نمودار بالا نیز مشاهده می‌شود، با تهیه داده از منابع به مصرف‌کنندگان، یک بافت داده، داده‌ها را از طیف گسترده‌ای از منابع سیستم در سراسر سازمان شما، از جمله منابع داده عملیاتی و مخازن داده مانند انبار، دریاچه‌های داده و بازارهای داده، گرد هم می‌آورد. این یکی از دلایلی است که بافت داده برای طراحی مش داده مناسب است. بافت داده همچنین معماری مدیریت داده بنیادی است که تحویل بهینه محصولات داده به تیم‌های دامنه را امکان‌پذیر می‌کند.بافت داده، مقیاس داده‌های بزرگ را برای هر دو فرآیند دسته‌ای و داده‌های جریان بلادرنگ پشتیبانی می‌کند و قابلیت‌های سازگار را در سراسر ابر، ابر چندگانه ترکیبی، دستگاه‌های محلی و لبه شما فراهم می‌کند. سیالیت را در محیط‌های داده ایجاد می‌کند و مجموعه داده کامل، دقیق و به‌روز را برای تجزیه و تحلیل، سایر برنامه‌ها و فرآیندهای تجاری فراهم می‌کند. همچنین با ارائه اجزای و اتصال‌دهنده‌های از پیش بسته‌بندی شده برای بهم پیوستن همه چیز، زمان و هزینه را کاهش می‌دهد. به این ترتیب لازم نیست هر اتصال را به صورت دستی کدنویسی کنید.معماری بافت داده خاص شما به نیازها و وضعیت داده خاص شما بستگی دارد. اما به گفته شرکت تحقیقاتی Forrester، شش لایه رایج برای بافت‌های داده سازمانی مدرن وجود دارد:

• مدیریت داده: حاکمیت و امنیت را فراهم می‌کند.
• دریافت داده: ارتباطات بین داده‌های ساختاریافته و بدون ساختار را شناسایی می‌کند.
• پردازش داده: فقط داده‌های مرتبط را استخراج می‌کند.
• هماهنگ‌سازی داده: داده‌ها را پاکسازی، تبدیل و ادغام می‌کند.
• کشف داده: روش‌های جدیدی را برای ادغام منابع داده مختلف شناسایی می‌کند.
• دسترسی به داده: کاربران را قادر می‌سازد تا داده‌ها را از طریق ابزارهای تحلیلی و BI بر اساس مجوزهای دسترسی کاوش کنند.