داده های حجیم (کلان داده)

داده های حجیم (کلان داده)
big data

انواع مدل های بلوغ حاکمیت داده چیست؟

حاکمیت داده

من بازخوردهای مثبت زیادی در مورد سری مدل‌های بلوغ حاکمیت داده دریافت کرده‌ام، زیرا نمای کلی هر مدل را در سطح بالایی ارائه می‌کند تا شما را در اتخاذ یکی برای برنامه‌تان راهنمایی کند. در این مقاله به مدل بلوغ حاکمیت داده می پردازم. …

ادامه مطلب

سطح بلوغ بیگ دیتا یا کلان داده حرکتی به سمت شرکت های داده محور

سطح بلوغ کلان داده یا بیگ دیتا

توسعه و اجرای استراتژی کلان داده برای سازمان ها کار آسانی نیست، به خصوص اگر فرهنگ داده محور نداشته باشند. چنین فرهنگی یک پیش نیاز برای اجرای موفقیت آمیز یک استراتژی کلان داده است. ایجاد نقشه راه Big Data برای رسیدن چنین فرهنگی ناگزیر …

ادامه مطلب

دریاچه داده (Data Lake) چيست و چه تفاوتی با باتلاق داده (Data Swamp) دارد

دریاچه داده (Data Lake)

دریاچه داده (Data Lake) و مفهوم بیگ دیتا دو واژه ناگسستنی هستند به عبارتی Data Lake ظرفی برای نگهداری بیگ دیتا یا کلان داده است که با توجه به گذر زمان ویژگیهای فنی زیادی برای آن شمارده شده است که در ادامه به آن …

ادامه مطلب

فرمت فایل های کلان داده Kudu، Parquet ،Avro و ORC

فرمت فایل های کلان داده Kudu، Parquet ،Avro و ORC

هدوپ مانند هر سیستم فایل استاندارد، به شما امکان می­ دهد اطلاعات را در هر قالبی، چه داده ­های ساختار یافته، نیمه ساختاریافته یا بدون ساختار ذخیره کنید. علاوه ­براین از فرمت ­های بهینه برای ذخیره ­سازی و پردازش در HDFS نیز پشتیبانی می­ …

ادامه مطلب

خصوصیات بیگ دیتا یا کلان داده چیست؟ و جایگاه هدوپ کجاست

کلان داده

کلان‌داده (Big Data) اصطلاحی است که برای تعریف داده‌ها در حجم انبوه استفاده می‌شود: حجم بزرگ یا پیچیده‌ای از داده‌ها که ابزارهای متداول پردازش داده‌ها برای تحلیل و کاوش آن ناتوان باشد. «کلان‌داده دارایی‌های اطلاعاتی را شامل می‌شود که ویژگی‌هایی همچون حجم بسیار زیاد …

ادامه مطلب

طراحی انبار داده و هوش تجاری دو مولفه اصلی برای هوشمندسازی سامانه ها

انبار داده

هدف از ارائه این مبحث آشنایی خواننده با مفاهیم انبار داده Data wareHouse و فن آوری های مرتبط  در هوش تجاری (BI) می باشد. انباره های داده، پایه گذار فن آوری لازم برای ساخت و بهره برداری از برنامه های هوشمند هستند. انبار داده …

ادامه مطلب

آموزش کامل پلتفرم کلودرا (Cloudera) در هدوپ با رویکرد ساده سازی بیگ دیتا

کلودرا در هدوپ

 هدوپ یک پروژه مبتنی بر برنامه نویسی متن باز است که توسط سازمان نرم افزاری آپاچی ایجاد شده است. ایده اولیه هدوپ اولین بار در شرکت گوگل رقم خورد اما خیلی ها باور به پیاده سازی این سیستم نداشتن و در چند سال اول …

ادامه مطلب

معماری لامبدا در مقابل معماری کاپا برای بیگ دیتا و پردازش سريع درData Lake

معماری لامبدا

تولید بی‌­وقفه داده­‌ها در دنیای امروز، نیاز به پایش لحظه­‌ای و سریع اطلاعات در کنار ذخیره آنها برای پردازش­های تحلیلی، ما را به سمت ساختاری هدایت می­کند که بتواند هر دو وجه از این نیازمندی یعنی پردازش جریان­‌های داده به صورت لحظه­‌ای و بدون تاخیر وپردازش­های …

ادامه مطلب

مدل داده ای ستون گرا و تعریف شِمای مبتنی بر ستون در کاساندرا

مدل داده ای ستون گرا در کسندرا

پایگاه داده های ستون گرا به طور بالقوه می توانند به عنوان یک انبار داده استفاده شوند که قادر است به طور طبیعی پرس و جوهای OLAP را اداره کند. این روش در سال 2012 در مطالعات مختلف ارائه شده است و اکنون محبوبیت …

ادامه مطلب

دانلود فیلم سینمایی درخواست نهایی (margin call) با دوبله فارسی

فیلم سینمایی درخواست نهایی (margin call)

فیلم سینمایی درخواست نهایی (margin call) موضوع این فیلم داستان شرکتی بسیار بزرگی است که در حال ورشکستگی است ولی مدیران آن از این موضوع  بی اطلاع هستند. این شرکت بزرگ مالی، تعدیل نیرو می کند. یکی از قربانیان این رویداد مدیر بخش کنترل …

ادامه مطلب

آموزش کامل آپاچی سولار (Solr) همراه با مثال

آپاچی سولار (Solr)

در مباحث قبل، در این مورد بحث کردیم که چطور کلان داده برای برآورده کردن نیازهای سازمان های مختلف که با داده های خیلی بزرگ سروکار دارند تکامل یافته است. در این مبحث به معرفی آپاچی سولار می پردازیم. معرفی آپاچی سولار (تهیه کننده: …

ادامه مطلب

آغاز کلان داده در میکروسافت با پشتیبانی پایگاه داده MS-SQLServer از بیگ دیتا

کلان داده در میکروسافت

جایگاه کلان داده در میکروسافت استفاده از Big Data Cluster در SQL Server 2019 باعث هوشمندسازی تمام داده‌های کاربر شده و با تلفیق داده‌های ساختاریافته و ساختارنیافته در سراسر منطقه داده، به از میان بردن Siloهای داده کمک می‌کند. این کلاستر، Microsoft SQL Server …

ادامه مطلب

پایگاه داده BigchainDB معماری و نحوه عملکرد آن

پایگاه داده BigchainDB

پایگاه داده BigchainDB نرم افزاری است که دارای خصوصیات blockchain (به عنوان مثال عدم تمرکز ، تغییر ناپذیری ، دارایی های تحت کنترل مالک) و خصوصیات بانک اطلاعاتی (به عنوان مثال نرخ بالای تراکنش ، تأخیر کم ، نمایه سازی و پرس و جو …

ادامه مطلب

امکانات و ویژگیهای جدید SQL Server در نسخه های مختلف

امکانات جدید SQL Server

Microsoft SQL Server یا MSSQL چیست؟ در پاسخ نرم افزار sql server چیست بایستی گفت که یک بانک اطلاعاتی از نوع دیتابیس‌های رابطه‌ای یا Relational Database است که توسط کمپانی Microsoft ارایه شده، و وظیفه اصلی آن ذخیره و بازیابی اطلاعات براساس درخواست نرم‌افزارهای …

ادامه مطلب

داده‌های سری زمانی و پایگاه داده TimescaleDB

پایگاه داده TimescaleDB

داده های سری زمانی یکی از مهم ترین انواع داده در حوزه داده کاوی محسوب می شوند. در سال‌های اخیر، حجم داده‌های سری زمانی به شدت توسعه‌یافته و نیاز به ابزارهایی برای مدیریت داده‌های سری زمانی، در این مقیاس، بیش از پیش احساس می‌شود. …

ادامه مطلب

معماری سقراط و مقايسه آن با معماری HADR در حوزه کلان داده

معماری-سقراط

سقراط یک معماری جدید در پایگاه داده ها میباشد که توسط شرکت مایکروسافت بوجود آمده و تحت عنوان sql hyper scale در محصولات مایکروسافت همچون windows AZURE در حال استفاده میباشد. معماری HADR پیش از اینکه به تشریح معماری سقراط بپردازیم بهتر است که …

ادامه مطلب

پلتفرم مدیریت داده‌های حجیم بازاریابی Bluekai

Bluekai

فهرست پلتفرم مدیریت داده‌های حجیم بازاریابی Bluekai مقدمه چالش اصلی بازاریابان  بازاریابی مبتنی بر داده صنعت پیشرو بلوکای مشتریان بلوکای اشتراک گذاری داده ها در بلوکای بازاریابی مدرن اوراکل نمونه‌ی موفق پیاده سازی بلوکای نتیجه گیری Oracle Bluekai Data Management Platform: مقدمه بلوکای : …

ادامه مطلب

اوضاع و آمار بیگ دیتا در سال 2023 و 2024

آمار بیگ دیتا

اوضاع و آمار بیگ دیتا در سال 2023 در یک دقیقه در پست های قبل خواص بیگ دیتا را بررسی نمودیم. در این پست به آمار بیگ دیتا تولید شده در دنیا میپردزیم. حجم اطلاعاتی که تا سال ۲۰۰۳ توسط انسان ایجاد شد تنها …

ادامه مطلب

کانال تلگرامی و گروه تلگرامی با موضوع داده، کاوی هوش مصنوعی و بیگ دیتا

کانال تلگرامی و گروه تلگرامی با موضوع داده، کاوی هوش مصنوعی و بیگ دیتا

در میان کانال های متعدد تلگرامی نزدیک به 59 درصد در دسته ای قرار می گیرند که موضوع خاصی را دنبال نمی کنند و همه موضوع ها را پوشش می دهند. به عبارت بهتر کانال هایی که در حوزه مشخصی فعالیت نمی کنند و …

ادامه مطلب