On the feasibility of multi-leader replication in the early tiers

On the feasibility of multi-leader replication in the early tiers
Author :
Publisher : Universitätsverlag der TU Berlin
Total Pages : 196
Release :
ISBN-10 : 9783798330016
ISBN-13 : 3798330018
Rating : 4/5 (018 Downloads)

Book Synopsis On the feasibility of multi-leader replication in the early tiers by : Jungnickel, Tim

Download or read book On the feasibility of multi-leader replication in the early tiers written by Jungnickel, Tim and published by Universitätsverlag der TU Berlin. This book was released on 2018-09-27 with total page 196 pages. Available in PDF, EPUB and Kindle. Book excerpt: In traditional service architectures that follow the service statelessness principle, the state is primarily held in the data tier. Here, service operators utilize tailored storage solutions to guarantee the required availability; even though failures can occur at any time. This centralized approach to store and process an application’s state in the data tier implies that outages of the entire tier cannot be tolerated. An alternative approach, which is in focus of this thesis, is to decentralize the processing of state information and to use more stateful components in the early tiers. The possibility to tolerate a temporary outage of an entire tier implies that the application’s state can be manipulated by the remaining tiers without waiting for approval from the unavailable tier. This setup requires multi-leader replication, where every replica can accept writes and forwards the resulting changes to the other replicas. This thesis explores the feasibility of using multi-leader replication to store and process state in a decentralized manner across multiple tiers. To this end, two replication mechanisms, namely Conflict-free Replicated Data Types and Operational Transformation, are under particular investigation. We use and extend both mechanism to demonstrate that the aforementioned decentralization is worth considering when designing a service architecture. The challenges that arise when following our approach go back to fundamental impossibility results in distributed systems research, i.e. the impossibility to achieve a fault-tolerant consensus mechanism in asynchronous systems and the inevitable trade-off between availability and consistency in the presence of failures. With this thesis, we contribute to close the exposed gaps of both results by providing usable alternatives for standard IT services. We exemplify the feasibility of our alternatives with a fully distributed IMAP service and a programming library that provides the necessary extension to utilize our approach in a variety of web-based applications. All contributions of this thesis are based on both theory and practice. In particular, all extensions to the existing multi-leader replication mechanisms were proven to satisfy the necessary properties. Moreover, those extensions were also implemented as prototypical applications and evaluated against the corresponding de facto standard software from the industry. Basierend auf dem “service statelessness principle” ist es üblich, Softwaredienste so zu entwerfen, dass der Zustand des Dienstes primär in einer gekapselten Datenschicht verarbeitet wird. Innerhalb der Datenschicht werden spezielle Lösungen verwendet, um die Verfügbarkeit der Daten sicherzustellen. Dieser zentralisierte Ansatz hat zur Folge, dass ein Ausfall oder eine temporäre Nichtverfügbarkeit der gesamten Datenschicht zwangsweise zur Nichtverfügbarkeit des gesamten Dienstes führt. Ein alternativer Ansatz, welcher in dieser Arbeit erforscht wird, ist die dezentralisierte Speicherung und Verarbeitung der Daten in den darüberliegenden Softwareschichten. Um in diesem Ansatz einen Ausfall der gesamten Datenschicht zu kompensieren, ist es zwingend notwendig, dass die verbleibenden Schichten die eingehenden Anfragen ohne die Bestätigung durch die Datenschicht beantworten können. Hierfür wird eine Replikationsarchitektur benötigt, in der jedes Replikat die Anfragen direkt beantworten kann; die so genannte “multi-leader replication”. In dieser Arbeit werden diese Replikationsarchitekturen verwendet, um den Zustand und die Daten eines Dienstes zu dezentralisieren und über mehrere Schichten zu replizieren. Hierbei werden zwei Mechanismen detaillierter betrachtet: “Conflict-free Replicated Data Types” und “Operational Transformation”. Anschließend werden beide Mechanismen erweitert und hinsichtlich der Verwendbarkeit für den beschriebenen Ansatz geprüft. Als Ergebnis dieser Arbeit wird gezeigt, dass ein dezentralisierter Ansatz mit den vorgestellten Mechanismen in Betracht gezogen werden kann. Die Herausforderungen, die bei der Anwendung dieses Ansatzes entstehen, basieren auf nachweislich unlösbaren Problemen aus der Forschung von Verteilten Systemen. Dazu gehört die Unlösbarkeit von Konsensus und die unausweichliche Abwägung zwischen Verfügbarkeit und Konsistenz in einem verteilten System mit Ausfällen. Diese Arbeit trägt dazu bei, die entstehenden Lücken, welche aus diesen fundamentalen Ergebnissen resultieren, zu schließen und die vorgeschlagenen Lösungen für reale IT Dienste anwendbar zu machen. Dieses wird anhand eines dezentralen IMAP Dienstes und einer Programmierbibliothek für Webanwendungen verdeutlicht. Alle Bestandteile dieser Doktorarbeit verbinden Theorie und Praxis. Alle vorgeschlagenen Erweiterungen für bestehende Replikationssysteme werden in formalen Modellen verifiziert und prototypisch implementiert. Die Implementierungen werden außerdem mit vergleichbarer Standardsoftware, welche dem heutigen Stand der Technik entspricht, in praktischen Experimenten evaluiert.


On the feasibility of multi-leader replication in the early tiers Related Books

On the feasibility of multi-leader replication in the early tiers
Language: en
Pages: 196
Authors: Jungnickel, Tim
Categories: Mathematics
Type: BOOK - Published: 2018-09-27 - Publisher: Universitätsverlag der TU Berlin

GET EBOOK

In traditional service architectures that follow the service statelessness principle, the state is primarily held in the data tier. Here, service operators util
Algorithmic aspects of resource allocation and multiwinner voting: theory and experiments
Language: en
Pages: 248
Authors: Kaczmarczyk, Andrzej
Categories: Computers
Type: BOOK - Published: 2021-12-10 - Publisher: Universitätsverlag der TU Berlin

GET EBOOK

This thesis is concerned with investigating elements of computational social choice in the light of real-world applications. We contribute to a better understan
Dualities in graphs and digraphs
Language: en
Pages: 294
Authors: Hatzel, Meike
Categories: Computers
Type: BOOK - Published: 2023-05-23 - Publisher: Universitätsverlag der TU Berlin

GET EBOOK

In this thesis we describe dualities in directed as well as undirected graphs based on tools such as width-parameters, obstructions and substructures. We mainly
Elements of dynamic and 2-SAT programming: paths, trees, and cuts
Language: en
Pages: 218
Authors: Bentert, Matthias
Categories: Computers
Type: BOOK - Published: 2021-11-18 - Publisher: Universitätsverlag der TU Berlin

GET EBOOK

In dieser Arbeit entwickeln wir schnellere exakte Algorithmen (schneller bezüglich der Worst-Case-Laufzeit) für Spezialfälle von Graphproblemen. Diese Algori
Matching minors in bipartite graphs
Language: en
Pages: 486
Authors: Wiederrecht, Sebastian
Categories: Computers
Type: BOOK - Published: 2022-04-19 - Publisher: Universitätsverlag der TU Berlin

GET EBOOK

In this thesis we adapt fundamental parts of the Graph Minors series of Robertson and Seymour for the study of matching minors and investigate a connection to t