使用jumbo frames可以使集群内部通信的效率和性能得到提升。Ethernet Frames可以使用不同的大小，一般被限制在1500byte字节(MTU值)。框架大小决定了单个以太网框架能够传送多少数据，一个框架承受越大的数据负荷，服务器和交换机需要做的工作就越少，提供了更高的通讯效率。许多交换机允许在一个框架中容纳比标准MTU值更大的字节数（1500-9000），也叫jumbo frame。注意jumbo frames是不能路由的，因此它不能被使用在公共网络上。当决定使用jumbo frames时，一定要确定集群中的所有节点使用同样的MTU。

刚才说过数据库服务器的相关组件应该有一个容易，网卡也是其中之一。多个网络端口可以在linux中使用bonding技术绑成一个逻辑单位，和很多其他操作系统不同，linux中网卡的绑定不需要购买其他软件就能实现。

使用基于Infiniband的内部互联

Infiniband常被用来实现远程内存直接访问(RDMA remote direct memory access architecture)。这是一个高速互联，常与高性能计算(HPC)环境联系在一起。RDMA可以在集群的节点间使用并行、直接、内存到内存的传输，它需要专门的RDMA适配器、交换机和软件。它还能避免基于以太网的实现中的CPU处理和环境转换的开支。在linux中有两种途径来实现Infiniband互联。第一种叫做IP over Infiniband(IPoIB)，它采用IB架构作为链路控制层，使用封装的方法实现IP和IB报文的转换，从而使在以太网运行的程序可以直接运行在Infiniband上。另一个方法就是使用基于Infiniband的 Reliable Datagram Sockets，oracle 1.2.0.3开始支持这个方法。RDS可以通过Open Fabric Enterprise Distribution(OFED)在linux和windows上实现。RDS的重要特征是低延迟、低开销和高带宽。Oracle数据库服务器和Exadata存储服务器使用了Infiniband，为集群内的通讯提供高达40Gb/s的带宽，这是以太网所不可能做到的。Infiniband为高性能展现了巨大的优势，但它的成本同样非常高昂。

Clusterware/Grid Infrastructure

Grid Infrastructure与操作系统紧密结合，并提供以下服务：节点间连接；维护集群成员；消息传送；集群逻辑卷管理；隔离(fencing)

************************************************************************************************************************************************************************************************