我以前也是在實驗室裡面自己搞cluster...
那時候是16台雙K8 (當時雙核心還沒出來)

根據測試來看...
如果是那種吃網路很頻繁的軟體
用gigabit 效率大概60%
(假設一台速度是1, 這樣串10台實際速度大概是1x10x0.6)
當然如果軟體吃網路沒那麼兇, 影響就會比較小.

目前高效能運算主流是用Infiniband (20GB/s)
大量串的話效率大概80%.