A Real Time Data Warehouse Approach for Data Processing

ABSTRACT

Data that is acquired from different data sourcesneeds too much processing for managing, analyzing and  monitoring. Also, you have to fuse and exploit efficiently these data and display the results. Data warehouse consolidates data coming from different data sources. A real time data warehouse is used same purpose as data warehouse, in addition to these, data streams into real time data warehouse on time. Therefore, real time data warehouses can be used in many different areas, such as signal processing, data  analysis. In this study, we proposed and implement a real time data warehouse using web services as a prototype.

INTRODUCTION

  Managing, analyzing and monitoring of raw data acquired from several kind of sensors or extracted from different data sources requires complex processing. Also, you have to fuse and exploit efficiently these data and display the results . A real time data warehouse eliminates the data availability gap and enables organizations to concentrate on processing their valuable data. Furthermore, continuous data processing without delay opens up significant new opportunities . The traditional data warehouses are implemented using batch driven approach and mainly according to the pull technology principle. The data loading from source systems to data warehouses is generally performed on a nightly basis or even in some cases on a weekly basis; therefore typical data warehouses normally do not have the most current data . Furthermore, the operational systems may have to be go offline during the data extraction process. It is an unacceptable situation which generates delays in businesses especially that require instantaneous access to up-to-date information . The approach that we proposed allows users to access data acquired from different data sources in nearly real-time, to record data for future use, to analyze complex structure and relationships, and to process data. Thus the prediction and analysis efficiency can be improved with the use of old and new real-time data. The consolidation of data will correct inefficiencies, decrease costs and improve productivity. It can also be used as a basis for decision-making.

چکیده

جمع آوری اطلاعات منبع داده برای بسیاری از منابع، تجزیه و تحلیل و نظارت است. همچنین، شما باید این داده ها را با هم مخلوط و بهره برداری کنید و نتایج را نمایش دهید. داده های انبار شده ذخیره شده از منابع مختلف داده ها. یک انبار داده زمان واقعی برای اهداف انبار داده استفاده می شود. بنابراین، انبار داده های زمان واقعی را می توان در بسیاری از مناطق مختلف، مانند پردازش سیگنال، تجزیه و تحلیل داده ها استفاده می شود. در این مطالعه، ما یک انبار داده زمان واقعی را با استفاده از یک نمونه اولیه پیشنهاد و اجرا می کنیم.

مقدمه

مدیریت نیاز به پردازش پیچیده دارد. همچنین، شما باید این داده ها را با هم مخلوط و بهره برداری کنید و نتایج را نمایش دهید. انبار داده ای در زمان واقعی شکاف دسترسی به اطلاعات را از بین می برد و سازمان ها را قادر می سازد بر اطلاعات ارزشمند خود تمرکز کنند. علاوه بر این، پردازش اطلاعات مداوم بدون تاخیر فرصت های قابل توجه جدید را باز می کند. انبار داده های سنتی با استفاده از روش رانندگی تکنولوژی اجرا می شود. بارگیری داده ها از سیستم های منبع به انبارهای داده ها بر اساس شبانه یا حتی در بعضی موارد به طور هفتگی انجام می شود. بنابراین، انبار داده های معمولی به طور معمول بیشترین اطلاعات موجود را ندارند. علاوه بر این، سیستم های عملیاتی را می توان در فرآیند استخراج داده ها آفلاین استفاده کرد. این وضعیت غیرقابل قبول است که به طور خاص نیاز به زمان دارد و نیاز به دسترسی سریع به اطلاعات به روز است. رویکرد جمع آوری داده ها در آینده نزدیک، در زمینه تحلیل داده ها، در زمینه تحلیل داده ها و در تجزیه و تحلیل داده ها. بنابراین پیش بینی و تجزیه و تحلیل را می توان با استفاده از داده های قدیمی و جدید در زمان واقعی بهبود یافته است. تحکیم داده ها موجب ناکارآمدی، کاهش هزینه ها و بهبود بهره وری خواهد شد. همچنین می تواند به عنوان پایه ای برای تصمیم گیری استفاده شود.

Year: 2013

Publisher: IEEE

By : Murat Obalı, Bünyamin Dursun, Zeki Erdem, Abdül Kadir Görür

File Information: English Language/ 4 Page / size: 323 MB

Download

سال : 1392

ناشر : IEEE

کاری از : مورات اوبالی، بنیامین درسون، زکی اردام و عبدالقدیر گرور

اطلاعات فایل : زبان انگلیسی / 4 صفحه / حجم : MB 323

لینک دانلود