Управління процесами збереження даних у сховищах центру обробки даних

Магістерська дисертація: 99 с., 35 рис., 12 табл., 1 додаток, 52 джерела. Актуальність. На сьогодні все більше даних зберігаються на електронних пристроях, таких як HDD, SSD або оптичні накопичувачі. Але зі збільшенням інформації постає проблема управління процесами збереження даних, так як великі підприємства можуть використовувати сотні пристроїв для збереження, до яких одночасно необхідно отримувати доступ деякій кількості користувачів. Одним із способів уникнення втрати інформації, працівниками в сфері ІТ було запропоновано можливість налаштування сховищ. Сховища призначені для організації процесів довгострокового збереження даних в системах автоматизованої обробки інформації. Даний вид збереження інформації дозволяють користувачам зменшити час на резервне копіювання даних, надають можливість користуватися файлами одночасно деякою кількістю користувачів. Перевагами їх використання є покращення швидкості доступу до необхідних файлів; можливість збільшення обсягу пам’яті, яку можна використовувати для збереження даних шляхом додавання додаткових пристроїв до сховищ; підвищення продуктивності роботи з даними; масштабованість та можливість створення резервних копій файлів. Сховища можуть використовувати як на великих підприємствах, так і в домашніх. Зв'язок роботи з науковими програмами, планами, темами. Робота виконувалась на кафедрі автоматизованих систем обробки інформації та управління Національного технічного університету України «Київський політехнічний інститут ім. Ігоря Сікорського» в рамках теми «Розробка та впровадження системи управління ІТ-інфраструктурою з консолідованими інформаційно-обчислювальними ресурсами» (№ 0115U000322). Метою дослідження є підвищення продуктивності під час роботи з даними в гіперконвергентних хмарних системах. Для досягнення поставленої мети мають бути виконані наступні завдання: − проаналізувати існуючі рішення систем збереження даних; 4 − створити математичні моделі для управління міграцією і реплікацією даних; − оформити вхідні даних для роботи системи; − розробити алгоритми для управління процесами збереження даних; − розробити середовище для впровадження розроблених алгоритми; − реалізувати розроблені алгоритми в системі моделювання; − проаналізувати результати роботи алгоритмів. Об’єктом дослідження є процес управління збереженням даних при роботі зі сховищами даних. Предметом дослідження є моделі для розподілення ресурсів на сховищах та методи управління процесами збереження даних. Методами дослідження є методи і алгоритми управління процесами збереження даних. Наукова новизна отриманих результатів. В представленій роботі досліджено спосіб управління процесами збереження даних на сховищах використовуючи методи реплікації та міграції даних в гіперконвергентних хмарних системах. Публікації. Матеріали роботи опубліковані у тезах 10-ї Всеукраїнської науково практичної конференції «Комп’ютерні інтелектуальні системи та мережі» 2017 [1]; в публікації Міжнародної наукової конференції «Актуальні наукові дослідження в сучасному світі» [2, 4]; в тезах наукової конференції «Інформатика та обчислювальна техніка – ІОТ-2018» [3].Master dissertation: 99 p. , 35 fig., 12 tab., 1 app., 52 sources. Topicality. Today, more and more data is stored on electronic devices such as HDDs, SSDs or optical drives. But with increasing information, there is a problem managing data storage processes, as large enterprises can use hundreds of storage devices, which simultaneously need to access some users. One way to avoid losing information was to offer IT staffers the ability to set up repositories. The repositories are designed to facilitate management while working with data. This type of save information allows users to reduce the time to back up data, provide the ability to use files at a time with a number of users. Advantages of using them are to improve the speed of access to the necessary files; the ability to increase the amount of memory that can be used to store data by adding additional devices to the repositories; increase data productivity; scalability and the ability to back up files. Storages can be used both at large enterprises and at home. Relationship of work with scientific programs, plans, themes. The research was carried out at the Department of Computer-Aided Management And Data Processing Systems of the National Technical University of Ukraine «Igor Sikorsky Kyiv Polytechnic Institute» within the theme «Development and implementation of an IT infrastructure management system with consolidated information and computing resources» (№ 0115U000322). The aim of the research is increasing performance of data storage within hyperconvergence systems. To achieve the goal, the following tasks must be performed: − analyze existing solutions for data storage systems; − develop mathematical models for allocating data management resources; − configure the input data for data keeping; − develop algorithms for managing data storage processes; − develop an environment for implementation of the algorithms; 6 − implement developed algorithms; − analyze the results of work. The object of research is process of managing data keeping with data storages. The subject of research is a model for distributing resources in storage and methods for managing data storage processes. Research methods is method of managing data keeping with data storages. Scientific novelty of the obtained results. In the presented work the method of managing data storage processes in the repositories is investigated using data replication and migration methods in hyperconverting cloud systems. Publications. The materials of research are published in theses of the 10th All-Ukrainian Scientific and Practical Conference «Computer Intelligent Systems and Networks» 2017 [1]; presented at the International scientific conference «Actual research in the modern world» [2, 4]; published in theses of scientific conference «Informatics and Computer Science – IOT-2018» [3]

Paving the Path for Heterogeneous Memory Adoption in Production Systems

Systems from smartphones to data-centers to supercomputers are increasingly heterogeneous, comprising various memory technologies and core types. Heterogeneous memory systems provide an opportunity to suitably match varying memory access pat- terns in applications, reducing CPU time thus increasing performance per dollar resulting in aggregate savings of millions of dollars in large-scale systems. However, with increased provisioning of main memory capacity per machine and differences in memory characteristics (for example, bandwidth, latency, cost, and density), memory management in such heterogeneous memory systems poses multi-fold challenges on system programmability and design. In this thesis, we tackle memory management of two heterogeneous memory systems: (a) CPU-GPU systems with a unified virtual address space, and (b) Cloud computing platforms that can deploy cheaper but slower memory technologies alongside DRAMs to reduce cost of memory in data-centers. First, we show that operating systems do not have sufficient information to optimally manage pages in bandwidth-asymmetric systems and thus fail to maximize bandwidth to massively-threaded GPU applications sacrificing GPU throughput. We present BW-AWARE placement/migration policies to support OS to make optimal data management decisions. Second, we present a CPU-GPU cache coherence design where CPU and GPU need not implement same cache coherence protocol but provide cache-coherent memory interface to the programmer. Our proposal is first practical approach to provide a unified, coherent CPU–GPU address space without requiring hardware cache coherence, with a potential to enable an explosion in algorithms that leverage tightly coupled CPU–GPU coordination. Finally, to reduce the cost of memory in cloud platforms where the trend has been to map datasets in memory, we make a case for a two-tiered memory system where cheaper (per bit) memories, such as Intel/Microns 3D XPoint, will be deployed alongside DRAM. We present Thermostat, an application-transparent huge-page-aware software mechanism to place pages in a dual-technology hybrid memory system while achieving both the cost advantages of two-tiered memory and performance advantages of transparent huge pages. With Thermostat’s capability to control the application slowdown on a per application basis, cloud providers can realize cost savings from upcoming cheaper memory technologies by shifting infrequently accessed cold data to slow memory, while satisfying throughput demand of the customers.PHDComputer Science & EngineeringUniversity of Michigan, Horace H. Rackham School of Graduate Studieshttps://deepblue.lib.umich.edu/bitstream/2027.42/137052/1/nehaag_1.pd

Data ethics : building trust : how digital technologies can serve humanity

Data is the magic word of the 21st century. As oil in the 20th century and electricity in the 19th century: For citizens, data means support in daily life in almost all activities, from watch to laptop, from kitchen to car, from mobile phone to politics. For business and politics, data means power, dominance, winning the race. Data can be used for good and bad, for services and hacking, for medicine and arms race. How can we build trust in this complex and ambiguous data world? How can digital technologies serve humanity? The 45 articles in this book represent a broad range of ethical reflections and recommendations in eight sections: a) Values, Trust and Law, b) AI, Robots and Humans, c) Health and Neuroscience, d) Religions for Digital Justice, e) Farming, Business, Finance, f) Security, War, Peace, g) Data Governance, Geopolitics, h) Media, Education, Communication. The authors and institutions come from all continents. The book serves as reading material for teachers, students, policy makers, politicians, business, hospitals, NGOs and religious organisations alike. It is an invitation for dialogue, debate and building trust! The book is a continuation of the volume “Cyber Ethics 4.0” published in 2018 by the same editors

1995 BRAC Commission

Executive Correspondence Tracking System #13 - April 1995 (950420-10 TO 95425-17). Box 52, C-108

1995-1999 Brock News

A compilation of the administration newspaper, Brock News, for the years 1995 through 1999. It had previously been titled Brock Campus News and preceding that, The Blue Badger