分布式資料庫設計

Ⅰ 分布式資料庫是做什麼的

隨著互聯網的飛速發展，人類社會的數據量迅速激增，據統計目前人類一年產生的數據就相當於人類進入現代化以前所有歷史的總和，而且互聯網業務的發展通常具有爆發性，業務量很可能在短短的一個月內突然爆發式地增長幾千倍，對應的數據也很可能快速地從原來的幾百GB飛速上漲到了幾百個TB。如果在這爆發的關鍵時刻，系統不穩定或無法訪問，那麼對於業務將會是毀滅性的打擊。
這時，傳統的單機資料庫提供的服務，在系統可擴展性、性價比方面已不再適用。伴隨著對於系統性能、成本以及擴展性的新需求，分布式資料庫系統應運而生，力求突破單機MySQL容量和性能瓶頸，徹底消除單機資料庫無法支撐企業業務高速發展的後顧之憂。
以萬里開源GreatDB分布式資料庫產品為例，為大家詳細解析分布式資料庫的一些重要特性和技術實踐細節。
水平拆分：支持數據sharding，分布式部署；
動態擴展：支持動態擴容，數據在線重分布；
故障恢復：故障自動切換保證系統高可用性；
分布式事務：提供ACID分布式事務支持；
數據安全：提供企業級數據安全特性，例如密碼復雜度，訪問控制；
MySQL協議：完美適配mysql，繼承mysql生態；
並行計算：基於數據分布式部署制定分布式執行計劃，通過分布式並行實現高性能；
讀寫分離：提供基於數據冗餘的讀寫分離，實現讀擴展；
HTAP融合：實現基於內存計算的TP與AP混合負載支撐；
雲化支持：提供OpenStack、容器、物理機等DBaaS支持；
國產硬體支持：支持國產軟硬體龍芯、飛騰、鯤鵬，中標麒麟晶元、銀河麒麟、拓林思操作系統；

Ⅱ 什麼是分布式資料庫結構

分布式軟體系統(Distributed Software Systems)是支持分布式處理的軟體系統,是在由通信網路互聯的多處理機體系結構上執行任務的系統。它包括分布式操作系統、分布式程序設計語言及其編譯(解釋)系統、分布式文件系統和分布式資料庫系統等。

分布式操作系統負責管理分布式處理系統資源和控制分布式程序運行。它和集中式操作系統的區別在於資源管理、進程通信和系統結構等方面。

分布式程序設計語言用於編寫運行於分布式計算機系統上的分布式程序。一個分布式程序由若干個可以獨立執行的程序模塊組成,它們分布於一個分布式處理系統的多台計算機上被同時執行。它與集中式的程序設計語言相比有三個特點：分布性、通信性和穩健性。

分布式文件系統具有執行遠程文件存取的能力,並以透明方式對分布在網路上的文件進行管理和存取。

分布式資料庫系統由分布於多個計算機結點上的若干個資料庫系統組成,它提供有效的存取手段來操縱這些結點上的子資料庫。分布式資料庫在使用上可視為一個完整的資料庫,而實際上它是分布在地理分散的各個結點上。當然,分布在各個結點上的子資料庫在邏輯上是相關的。

---------------

分布式資料庫系統是由若干個站集合而成。這些站又稱為節點，它們在通訊網路中聯接在一起，每個節點都是一個獨立的資料庫系統，它們都擁有各自的資料庫、中央處理機、終端，以及各自的局部資料庫管理系統。因此分布式資料庫系統可以看作是一系列集中式資料庫系統的聯合。它們在邏輯上屬於同一系統，但在物理結構上是分布式的。

分布式資料庫系統已經成為信息處理學科的重要領域，正在迅速發展之中，原因基於以下幾點：

1、它可以解決組織機構分散而數據需要相互聯系的問題。比如銀行系統，總行與各分行處於不同的城市或城市中的各個地區，在業務上它們需要處理各自的數據，也需要彼此之間的交換和處理，這就需要分布式的系統。

2、如果一個組織機構需要增加新的相對自主的組織單位來擴充機構，則分布式資料庫系統可以在對當前機構影響最小的情況下進行擴充。

3、均衡負載的需要。數據的分解採用使局部應用達到最大，這使得各處理機之間的相互干擾降到最低。負載在各處理機之間分擔，可以避免臨界瓶頸。

4、當現有機構中已存在幾個資料庫系統，而且實現全局應用的必要性增加時，就可以由這些資料庫自下而上構成分布式資料庫系統。

5、相等規模的分布式資料庫系統在出現故障的幾率上不會比集中式資料庫系統低，但由於其故障的影響僅限於局部數據應用，因此就整個系統來講它的可靠性是比較高的。

特點

1、在分布式資料庫系統里不強調集中控制概念，它具有一個以全局資料庫管理員為基礎的分層控制結構，但是每個局部資料庫管理員都具有高度的自主權。

2、在分布式資料庫系統中數據獨立性概念也同樣重要，然而增加了一個新的概念，就是分布式透明性。所謂分布式透明性就是在編寫程序時好象數據沒有被分布一樣，因此把數據進行轉移不會影響程序的正確性。但程序的執行速度會有所降低。

3、集中式資料庫系統不同，數據冗餘在分布式系統中被看作是所需要的特性，其原因在於：首先，如果在需要的節點復制數據，則可以提高局部的應用性。其次，當某節點發生故障時，可以操作其它節點上的復制數據，因此這可以增加系統的有效性。當然，在分布式系統中對最佳冗餘度的評價是很復雜的。

分布式系統的類型，大致可以歸為三類：

1、分布式數據，但只有一個總? 據庫，沒有局部資料庫。

2、分層式處理，每一層都有自己的資料庫。

3、充分分散的分布式網路，沒有中央控制部分，各節點之間的聯接方式又可以有多種，如鬆散的聯接，緊密的聯接，動態的聯接，廣播通知式聯接等。

---------------------

什麼是分布式智能?
NI LabVIEW 8的分布式智能結合了相關的技術和工具，解決了分布式系統開發會碰到的一些挑戰。更重要的是，NI LabVIEW 8的分布式智能提供的解決方案不僅令這些挑戰迎刃而解，且易於實施。LabVIEW 8的分布式智能具體包括:

可對分布式系統中的所有結點編程——包括主機和終端。尤為可貴的是，您可以利用LabVIEW圖形化編程方式，對大量不同類型的對象進行編程，如桌面處理器、實時系統、FPGA、PDA、嵌入式微處理器和DSP。
導航所有系統結點的查看系統——LabVIEW Project Explorer。您可使用Project Explorer查看、編輯、運行和調試運行於任何對象上的結點。
經簡化的數據共享編程界面——共享變數。使用共享變數，您可輕松地在系統間(甚至實時系統間)傳輸數據且不影響性能。無通信循環，無RT FIFO，無需低層次TCP函數。您可以利用簡單的對話完成共享變數的配置，從而將數據在各系統間傳輸或將數據連接到不同的數據源。您還可添加記錄、警報、事件等數據服務――一切僅需簡單的對話即可完成。
實現了遠程設備及系統內部或設備及系統之間的同步操作——定時和同步始終是定義高性能測量和控制系統的關鍵問題。利用基於NI技術的系統，探索設備內部並編寫其內部運行機制，從而取得比傳統儀器或PLC方式下更為靈活的解決方案。

--------------------

在分布式計算機操作系統支持下，互連的計算機可以互相協調工作，共同完成一項任務。

也可以這么解釋:
一種計算機硬體的配置方式和相應的功能配置方式。它是一種多處理器的計算機系統，各處理器通過互連網路構成統一的系統。系統採用分布式計算結構，即把原來系統內中央處理器處理的任務分散給相應的處理器，實現不同功能的各個處理器相互協調，共享系統的外設與軟體。這樣就加快了系統的處理速度，簡化了主機的邏輯結構.

易游貝貝祝你好運

Ⅲ 如何編寫一個分布式資料庫

某種程度上看來，資料庫作為整個系統的核心，這句話其實並不誇張，資料庫的選型關繫到上層業務代碼實現的方方面面，現在比較流行的架構方案是上層業務邏輯微服務化，並且結合分布式緩存，這套框架已經基本能做到上層業務的彈性擴展，但是最底層的數據存儲還是很難去中心化（除非整個技術棧中去除關系型資料庫（RDBMS）, 全部採用 NoSQL）。所以，經常是 RDBMS 成為整個系統的瓶頸。
在長期的斗爭中，大家總結出了很多方式來擴展最底層的關系型資料庫：
1. 主從，一主多從，雙寫，通過隊列暫存請求... 這些方案其實並沒有解決問題，寫入仍然是單點，而且對於 DBA 的挑戰比較大，今天我們暫時就不討論了。
2. 通過中間件 Sharding，常見的開源方案有： Cobar, TDDL, Vitess, Kingshard, MyCat 等，這些方案的思路是攔截 SQL 的請求通過 sharding key 和一定規則，將請求轉發/廣播到不同的 MySQL 實例上，從而實現水平擴展的效果，這個方案基本解決了單點寫入的問題，對於業務來說整體的吞吐也上來了，看上去不錯，這個方案是大多數業務遇到性能瓶頸的解決方案，但是缺點也是有的：
1）大多中間件都沒有解決動態擴容的問題，多採用了靜態的路由策略，擴容一般還處於人工 x2 的狀態，對 DBA 要求比較高。
2）從一定程度上來說都放棄了事務，這是由於一條語句有可能會涉及到多個資料庫實例，實現分布式 事務是一個比較難的事情，我們後面會詳細的介紹。
3）對業務不透明，需要指定 sharding key， 心智負擔較大

Ⅳ 什麼叫分布式資料庫，有什麼優點和缺點

分布式來資料庫系統優自點：

①更適合分布式的管理與控制。

分布式資料庫系統的結構更適合具有地理分布特性的組織或機構使用，允許分布在不同區域、不同級別的各個部門對其自身的數據實行局部控制。

②具有靈活的體系結構。

分布式DBMS可以設計成具有不同程度的自治性，從具有充分的場地自治到幾乎是完全集中式的控制。

③系統經濟，可靠性高，可用性好。

由於數據分布在多個場地並有許多復制數據，在個別場地或個別通信鏈路發生故障時，不致於導致整個系統的崩潰，而且系統的局部故障不會引起全局失控。

④在一定條件下響應速度加快。

如果存取的數據在本地資料庫中，那末就可以由用戶所在的計算機來執行，速度就快。

⑤可擴展性好，易於集成現有系統，也易於擴充。

分布式資料庫系統缺點：

①通信開銷較大，故障率高。

②數據的存取結構復雜。

③數據的安全性和保密性較難控制。

Ⅳ 簡述分布式資料庫的模式結構

布式資料庫系統通常使用較小的計算機系統，每台計算機可單獨放在一個地方，每台計算機中都有DBMS的一份完整拷貝副本，並具有自己局部的資料庫，位於不同地點的許多計算機通過網路互相連接，共同組成一個完整的、全局的大型資料庫。
這種組織資料庫的方法克服了物理中心資料庫組織的弱點。首先，降低了數據傳送代價，因為大多數的對資料庫的訪問操作都是針對局部資料庫的，而不是對其他位置的資料庫訪問；其次，系統的可靠性提高了很多，因為當網路出現故障時，仍然允許對局部資料庫的操作，而且一個位置的故障不影響其他位置的處理工作，只有當訪問出現故障位置的數據時，在某種程度上才受影響；第三，便於系統的擴充，增加一個新的局部資料庫，或在某個位置擴充一台適當的小型計算機，都很容易實現。然而有些功能要付出更高的代價。例如，為了調配在幾個位置上的活動，事務管理的性能比在中心資料庫時花費更高，而且甚至抵消許多其他的優點。
分布式資料庫系統主要特點：
· 多數處理就地完成；
· 各地的計算機由數據通信網路相聯系。
· 克服了中心資料庫的弱點：降低了數據傳輸代價；
· 提高了系統的可靠性，局部系統發生故障，其他部分還可繼續工作；
· 各個資料庫的位置是透明的，方便系統的擴充；
· 為了協調整個系統的事務活動，事務管理的性能花費高；
數據分片
類型：
（1）水平分片：按一定的條件把全局關系的所有元組劃分成若干不相交的子集，每個子集為關系的一個片段。
（2）垂直分片：把一個全局關系的屬性集分成若乾子集，並在這些子集上作投影運算，每個投影稱為垂直分片。
（3）導出分片：又稱為導出水平分片，即水平分片的條件不是本關系屬性的條件，而是其他關系屬性的條件。
（4）混合分片：以上三種方法的混合。可以先水平分片再垂直分片，或先垂直分片再水平分片，或其他形式，但他們的結果是不相同的。
條件：
（1）完備性條件：必須把全局關系的所有數據映射到片段中，決不允許有屬於全局關系的數據卻不屬於它的任何一個片段。
（2）可重構條件：必須保證能夠由同一個全局關系的各個片段來重建該全局關系。對於水平分片可用並操作重構全局關系；對於垂直分片可用聯接操作重構全局關系。
（3）不相交條件：要求一個全局關系被分割後所得的各個數據片段互不重疊（對垂直分片的主鍵除外）。
數據分配方式
（1）集中式：所有數據片段都安排在同一個場地上。
（2）分割式：所有數據只有一份，它被分割成若干邏輯片段，每個邏輯片段被指派在一個特定的場地上。
（4）全復制式：數據在每個場地重復存儲。也就是每個場地上都有一個完整的數據副本。
（5）混合式：這是一種介乎於分割式和全復制式之間的分配方式。
目前分布式資料庫分配的設計，越來越多的採用尋找最優解的演算法，比如遺傳演算法、退火機制等
查詢優化
指在執行分布式查詢時選擇查詢執行計劃的方法和關系運算符的實現演算法。根據系統環境的不同，查詢優化所使用的演算法也有所不同，通常分為遠程廣域網環境和高速區域網環境，其區別主要在網路的帶寬。對於一元運算符可以採用集中式資料庫中的查詢優化方法。而對於二元運算符，由於涉及場地間的數據傳輸，因此必須考慮通信代價。分布式查詢中常見的連接運算執行策略包括：
（1）半連接方法：利用半連接運算的轉換方法R∞S=（RµS）∞S。假設場地1和場地2上分別有關系R和關系S，首先在S上執行連接屬性上的投影並將結果傳輸至場地1，在場地1上執行關系R與投影的連接操作，再將結果傳輸至場地2與關系S執行連接操作。這種方法能夠降低執行連接運算時的網路通信代價，主要適用於帶寬較低的遠程廣域網路。
（2）枚舉法方法：指枚舉關系運算符的物理執行計劃，通過對比執行計劃的代價選擇執行演算法的方法。其中，連接運算符的物理執行計劃包括嵌套循環方法、哈希連接法和歸並連接法。枚舉法主要適用於以磁碟IO代價為主的高速區域網環境。

Ⅵ 分布式資料庫設計 文檔和代碼

createviewV3_student
as
select*fromstudent_2003
unionall
select*from[192.168.233.1].[V3].[dbo].[student_7]

這是一部分，其他的都在博客回里答面

http://www.cnblogs.com/yydct

Ⅶ 什麼叫分布式資料庫

1.分布式資料庫是資料庫的一種，是資料庫技術和網路技術的結合產物。

2.各有優點和缺點.分布式資料庫分為邏輯上分部物理上分布及邏輯上分布物理上集中兩種。

是的,分布式數據文件便於資料庫的管理維護。

Ⅷ 在設計一個可靠好的分布式資料庫時，應該考慮哪些問題

以後可以從事產品的可靠性分析，可靠性設計等，比如像某個產品壽命只有1000小時，經過你的分析和設計改進後，能把壽命提高到3000小時，這個過程當中就體現出你的價值了，還是很有前途的。

Ⅸ 什麼是分布式資料庫

分布式資料庫是用計抄算機網路將物理上分散的多個資料庫單元連接起來組成的一個邏輯上統一的資料庫。每個被連接起來的資料庫單元稱為站點或節點。分布式資料庫有一個統一的資料庫管理系統來進行管理，稱為分布式資料庫管理系統。

目前國產分布式資料庫排名靠前的是 TiDB，

可以登錄TiDB 官方社區（AskTUG）

Ⅹ 分布式系統，資料庫設計方面，應注意哪些方面

分布式是分布式，集群是集群。分布式比如有ABCD用戶，將AB提交的數據寫專到資料庫1去，CD用戶群屬組的數據提交到資料庫2去優點：降低單個資料庫的壓力（數據量少，單個資料庫不會被頻繁操作到，如提交事務，少幾個人少去搶占資源），不然，像上面單個資料庫同時要處理四個人的數據，肯定比處理兩個的壓力小得多了（PS：1、2兩個資料庫的內容是不一致的，但是結構是一致的）。響應速度快，一般用於大客戶的解決方案缺點：用的硬體較多，開發成本較高（不像單台機器那樣，不管如何都寫到一台機器上）。集群：構建多個相同資料庫（內容一樣），類似備份(一個數據一生成一條數據，立馬將該數據同步到另一台上面去，查詢時可以多台任選一台，單台壓力低)，一台掛了，別一台上面還是有備份的，也有分布式的優點，不過，需要集群的幾台機器網路環境較好，數據推送才能及時。大概就是這樣