در هدوپ، DataNode یک جزء کلیدی سیستم فایل توزیع شده HDFS (Hadoop Distributed File System) است. وظیفه اصلی DataNode ذخیره سازی واقعی داده ها در گره های مختلف یک خوشه هدوپ است. در مقابل، NameNode مسئول مدیریت متادیتا و هماهنگی بین DataNode ها می باشد. موارد زیر در تصویر نشان داده شدهاند: DataNode: گرهای در خوشه […]
آرشیو دسته بندی: اصطلاحات
HDFS مخفف Hadoop Distributed File System است، که یک سیستم فایل توزیع شده است و یکی از اجزای اصلی چارچوب نرم افزار Big Data به نام Apache Hadoop (توضیح بیشتر) است. هدف اصلی HDFS ذخیره سازی قابل اعتماد، مقیاس پذیر و مقرون به صرفه مجموعه داده های بسیار بزرگ روی خوشه ای از رایانه ها […]
هدوپ، که با نام کامل آپاچی هدوپ (Apache Hadoop) شناخته می شود، یک چارچوب نرم افزاری متن باز است که به پردازش توزیع شده مجموعه داده های بسیار بزرگ (Big Data) بر روی کلاسترهای رایانه ای مقرون به صرفه کمک می کند. به عبارت دیگر، هدوپ به شما امکان می دهد تا یک کار محاسباتی […]
ETL و ELT هر دو روش هایی برای انتقال داده از منابع مختلف به یک سیستم مقصد مانند انبار داده یا پایگاه داده تحلیلی هستند. هر دو روش هدف یکسانی دارند که در نهایت امکان تجزیه و تحلیل داده ها را فراهم می کنند، اما از نظر ترتیب مراحل با هم تفاوت دارند: ETL (Extract, […]
ETL مخفف Extract, Transform, and Load است. این فرآیندی است که برای جمع آوری داده از منابع مختلف، تبدیل آن به فرمت مناسب و بارگذاری آن در یک سیستم مقصد مانند انبار داده یا پایگاه داده استفاده می شود. مراحل ETL: Extract (استخراج): در این مرحله، داده ها از منابع مختلف مانند فایل های CSV، […]
انواع پایگاه داده برای عملیات مختلف بهینهسازی شده است. نوع دادهای که نیاز دارید و فرآیندهایی که میخواهید بر روی آن اعمال کنید، نوع ذخیرهسازی را تعیین میکند. OLTP سیستم پردازش تراکنش آنلاین (OLTP) برای ذخیره حجم بالای دادههای عملیاتی روزانه که بسیاری از کسب و کارها به آنها وابستهاند، بهینهسازی شده است. سیستمهای OLTP […]
دیتا یا داده دیتا یا داده، مجموعهای از اطلاعات است که میتواند به صورت اعداد، متون، تصاویر، صداها یا هر نوع اطلاعات دیگری باشد. این اطلاعات معمولاً برای تحلیل، مطالعه، یادگیری یا انتقال اطلاعات استفاده میشود. داده، اطلاعاتی نا مرتب است که برای تبدیل آن به معنی دار بودن، پردازش میشود. این میتواند شامل حقایق، […]
پایگاه داده مجموعهای منظم و سازماندهیشده از اطلاعات است که به صورت دیجیتالی ذخیرهسازی میشود. این اطلاعات میتوانند شامل اعداد، متن، تصاویر، صدا و ویدئو باشند. ویژگیهای اصلی پایگاه داده: سازماندهی: اطلاعات در دیتابیس به صورت جداول، ستونها و رکوردها سازماندهی میشوند. دسترسی آسان: میتوان به اطلاعات ذخیرهشده در دیتابیس بهراحتی و بهسرعت دسترسی داشت. […]