高性能分布式一致性協(xié)調服務系統(tǒng).pdf

1、分布式一致性是分布式理論中非常重要的部分。隨著互聯(lián)網快速發(fā)展，分布式系統(tǒng)被廣泛應用，系統(tǒng)功能越來越強大，結構越來越復雜，很多時候需要使用到一致性協(xié)調服務系統(tǒng)保證系統(tǒng)高可用性，保證數(shù)據(jù)一致性等。隨著對分布式系統(tǒng)可靠性、一致性等要求變高，一致性協(xié)調服務系統(tǒng)變得更加重要，越來越受到人們的重視。
　　本文以自行研發(fā)的分布式內存數(shù)據(jù)庫系統(tǒng)Goldfish為背景，研究高性能分布式一致性協(xié)調服務系統(tǒng)的設計和實現(xiàn)。Goldfish是面向OLAP場

2、景設計的，能夠存儲海量數(shù)據(jù)，支持SQL查詢的高性能分布式列式內存數(shù)據(jù)庫系統(tǒng)。在設計Goldfish系統(tǒng)的幾個關鍵功能時，使用到了分布式一致性協(xié)調服務系統(tǒng)，主要應用在元數(shù)據(jù)的同步，元數(shù)據(jù)一致性保證，配置信息的保存，分布式事務，以及保證Goldfish系統(tǒng)的高可用性。
　　本系統(tǒng)能夠保證數(shù)據(jù)一致性和系統(tǒng)高可用性，而數(shù)據(jù)一致性和系統(tǒng)的高可用性正是數(shù)據(jù)庫系統(tǒng)的核心特點。本文使用 Raft協(xié)議作為理論基礎，設計了系統(tǒng)的高可用方案，使用此方案

3、，設計和實現(xiàn)了數(shù)據(jù)同步，故障恢復，選主操作等功能，這些功能保證了數(shù)據(jù)一致性和系統(tǒng)高可用性。為了提高一致性服務系統(tǒng)的性能，本文設計和實現(xiàn)了高性能的軟件架構，該架構將網絡I/O和業(yè)務解耦合，降低鎖競爭，實現(xiàn)程序高并發(fā)，充分利用了系統(tǒng)的硬件資源，提高系統(tǒng)性能。在上面的基礎上，本文從軟件分層架構方面描述了系統(tǒng)的具體設計與實現(xiàn)，對各個模塊的設計和實現(xiàn)做了詳細的說明。其中Command模塊較為重要，它串聯(lián)了Goldfish系統(tǒng)的業(yè)務和分布式一致性協(xié)