分布式計算最基本的目的之一就是為了充分利用空閑的計算節(jié)點的計算能力。通常，我們 首先 會將要被分布式計算的 程序 在每個計算節(jié)點 部署 好，然后才可以調用分布式計算。這種 “ 部署 ” 是一種靜態(tài)的。之所以稱為靜態(tài)的，是因為還有一種更動態(tài)更靈活的方式 －－ 我們可以 隨時的、動態(tài)的 將我們 新 完成的程序 自動【提交】到 已經(jīng)部署好的 分布式框架里動態(tài)運行起來。比如，假設我剛寫了一個新的排序的算法程序（假設程序集為 X.dll ），然后我要對現(xiàn)有的 10000000 個數(shù)據(jù)進行排序，但是，我的機器配置太差，運行不了如此大的計算任務，那么我就可以將 X.dll 和要排序的數(shù)據(jù)傳遞給部署在其它地方的動態(tài)分布式計算框架實例，動態(tài)分布式計算框架會調用 X.dll 中的排序算法來對數(shù)據(jù)進行排序，并返回結果。這就是 “ 動態(tài) ” 的含義。我寫 DCFramework （ Dynamic Distributed Computing Framework ）這個框架的主要目標是達到這樣的一個效果。不知道這種分布式計算架構和 “ 云計算 ” 是否有點關系？

如果是使用 C 或 C++ 來實現(xiàn)這樣的動態(tài)效果，應該不是一件簡單的事情，但是強大的 .Net 平臺使得實現(xiàn)這一目標稱為可能，并且不是那么難。

我將平臺選定在 .NET ，這可以使很多功能更加容易實現(xiàn)，也使得很多問題得到簡化。 DCFramework 的主要特性如下：

（ 1 ）基于 .NET 平臺。這有兩種含義： DCFramework 是用 .NET （ 2.0 ）實現(xiàn)的；也只有基于 .NET 的程序才可以使用 DCFramework 支撐的動態(tài)分布式計算架構。

（ 2 ） DCFramework 使用 DCTask 表示動態(tài)分布式計算任務。

（ 3 ）分布式計算節(jié)點可以動態(tài)的增加、刪除。所謂計算節(jié)點就是用于真正執(zhí)行分布式計算任務的節(jié)點，在 DCFramework 中稱為 DC Worker Node 。

（ 4 ）在 DCFramework 架構中有一個特殊的節(jié)點叫 DC Master Node ，它的作用在于統(tǒng)一管理所有的 DC Worker Node ，并將新的分布式計算任務分配給當前負載最低的那個 DC Worker Node 。

（ 5 ） DCFramework 使用 Remoting 技術解決 DC Worker Node 和 DC Master Node ，以及 DC Master Node 和 Client （需要動態(tài)分布式計算的客戶端）之間的通信。

（ 6 ） DCFramework 使用反射技術來動態(tài)加載程序集和調用計算方法。

（ 7 ） DCFramework 使用 DCAppDomain （對 .NET AppDomain 的封裝）來構建執(zhí)行分布式任務的獨立環(huán)境。即每個分布式計算任務最終在一個獨立的 DCAppDomain 種執(zhí)行。

（ 8 ） DCFramework 使用序列化技術來傳遞被調用的對象。

關于 DCFramework 中節(jié)點部署的簡單圖示如下：

現(xiàn)在，我們假設某個Client A有個計算任務要提交給DCFramework執(zhí)行，讓我們來看看這個過程是怎樣進行的。

Client A 將計算的邏輯封裝在MyClass類中，其位于X.dll程序集中，而X.dll有依賴于Y.dll，Y.dll又依賴于Z.dll，而X.dll、Y.dll、Z.dll都是用戶自定義的程序集。如果是在Client A本地執(zhí)行計算任務，是這樣做的：

<!--<br /><br />Code highlighting produced by Actipro CodeHighlighter (freeware)<br />http://www.CodeHighlighter.com/<br /><br />--> MyClass myClass = new MyClass ();
// 為myClass屬性賦值，并初始化，此處省略若干代碼
object result = myClass.DoSomething();

下面的代碼將會在DCFramework架構的某個DC Worker Node上執(zhí)行MyClass.DoSomething（）方法。

<!--<br /><br />Code highlighting produced by Actipro CodeHighlighter (freeware)<br />http://www.CodeHighlighter.com/<br /><br />--> MyClass myClass = new MyClass ();
// 為myClass屬性賦值，并初始化，此處省略若干代碼

DCJobDispatcher dispatcher = ...... ;
dispatcher.Dispatch(myClass, " DoSomething " );

分布式計算執(zhí)行的過程簡述如下：

（1）DCJobDispatcher 會自動Remoting連接到DC Master Node。

（2）DCJobDispatcher 將分布式計算任務封裝為一個DCTask，DCTask實例中會包含X.dll、Y.dll、Z.dll程序集對應的文件數(shù)據(jù)。

（3）DCJobDispatcher 將DCTask提交給DC Master ，DC Master 會將其交與DC Worker Node中負載最小的那個節(jié)點（假設為Worker A）執(zhí)行。

（4）Worker A會為新任務創(chuàng)建一個單獨的DCAppDomain，然后加載傳遞過來的DCTask中的X.dll、Y.dll、Z.dll，接著就可以反序列化 MyClass 對象，最后通過反射調用其DoSomething方法，以開始執(zhí)行計算任務。

（5）計算完成后，Worker A會卸載對應的DCAppDomain，并將計算結果返回。

上述就是DCFramework執(zhí)行動態(tài)分布式任務的一個簡單介紹，更詳細的部分會在后續(xù)的文章中介紹。

歡迎討論，謝謝。

目錄：

DCFramework 動態(tài)分布式計算框架（01）－－ 基礎結構

下載：

１.DCFramework 的完整Demo源碼 ： DCFrameworkDemo

DCFramework 動態(tài)分布式計算框架（00） －－　序