以太网的特点及技术知识(网络工程师计算机基础知识)
前言
以太网最早是指由DEC（Digital Equipment Corporation）、Intel和Xerox组成的DIX（DEC-Intel-Xerox）联盟开发并于1982年发布的标准。经过长期的发展，以太网已成为应用最为广泛的局域网，包括标准以太网（10 Mbit/s）、快速以太网（100 Mbit/s）、千兆以太网（1000 Mbit/s）和万兆以太网（10 Gbit/s）等。IEEE 802.3规范则是基于以太网的标准制定的，并与以太网标准相互兼容。
在TCP/IP中，以太网的IP数据报文的封装格式由RFC894定义，IEEE802.3网络的IP数据报文封装由RFC1042定义。当今最常使用的封装格式是RFC894定义的格式，通常称为Ethernet_II或者Ethernet DIX。
01以太网基础知识
1.1 以太网的网络层次
以太网采用无源的介质，按广播方式传播信息。它规定了物理层和数据链路层协议，规定了物理层和数据链路层的接口以及数据链路层与更高层的接口。
物理层
物理层规定了以太网的基本物理属性，如数据编码、时标、电频等。
物理层位于OSI参考模型的最底层，它直接面向实际承担数据传输的物理媒体（即通信通道），物理层的传输单位为比特（bit），即一个二进制位（“0”或“1”）。实际的比特传输必须依赖于传输设备和物理媒体，但是，物理层不是指具体的物理设备，也不是指信号传输的物理媒体，而是指在物理媒体之上为上一层（数据链路层）提供一个传输原始比特流的物理连接。
数据链路层
数据链路层是OSI参考模型中的第二层，介于物理层和网络层之间。数据链路层在物理层提供的服务的基础上向网络层提供服务，其最基本的服务是将源设备网络层转发过来的数据可靠地传输到相邻节点的目的设备网络层。
由于以太网的物理层和数据链路层是相关的，针对物理层的不同工作模式，需要提供特定的数据链路层来访问。这给设计和应用带来了一些不便。
为此，一些组织和厂家提出把数据链路层再进行分层，分为媒体接入控制子层（MAC）和逻辑链路控制子层（LLC）。这样不同的物理层对应不同的MAC子层，LLC子层则可以完全独立。如图1-1所示。
图1-1 以太网链路层的分层结构
1.2 以太网的线缆标准
从以太网诞生到目前为止，成熟应用的以太网物理层标准主要有以下几种：
- 10base-2
- 10base-5
- 10base-T
- 10base-F
- 100base-T4
- 100base-TX
- 100base-FX
- 1000base-SX
- 1000base-LX
- 1000base-TX
- 10Gbase-T
- 10Gbase-LR
- 10Gbase-SR
在这些标准中，前面的10、100、1000、10G分别代表运行速率，中间的base指传输的信号是基带方式。
10兆以太网线缆标准
10兆以太网线缆标准在IEEE802.3中定义，线缆类型如表1-1所示。
表1-1 10兆以太网线缆标准
同轴电缆的致命缺陷是：电缆上的设备是串连的，单点故障就能导致整个网络崩溃。10base-2，10base-5是同轴电缆的物理标准，现在已经基本被淘汰。
100兆以太网线缆标准
100兆以太网又叫快速以太网FE（Fast Ethernet），在数据链路层上跟10M以太网没有区别，仅在物理层上提高了传输的速率。
快速以太网线缆类型如表1-2所示。
表1-2 快速以太网线缆标准
10base-T和100base-TX都是运行在五类双绞线上的以太网标准，所不同的是线路上信号的传输速率不同，10base-T只能以10M的速度工作，而100base-TX则以100M的速度工作。
100base-T4现在很少使用。
千兆以太网线缆标准
千兆以太网是对IEEE802.3以太网标准的扩展。在基于以太网协议的基础之上，将快速以太网的传输速率从100Mbit/s提高了10倍，达到了1Gbit/s。千兆以太网线缆标准如表1-3所示。
表1-3 千兆以太网线缆标准
用户可以采用这种技术在原有的快速以太网系统中实现从100Mbit/s到1000Mbit/s的升级。
千兆以太网物理层使用8B10B编码。在传统的以太网传输技术中，数据链路层把8位数据组提交到物理层，物理层经过适当的变换后发送到物理链路上传输。但变换的结果还是8比特。
在光纤千兆以太网上，则不是这样。数据链路层把8比特的数据提交给物理层的时候，物理层把这8比特的数据进行映射，变换成10比特发送出去。
万兆以太网线缆标准
万兆以太网当前使用附加标准IEEE 802.3ae用以说明，将来会合并进IEEE 802.3标准。万兆以太网线缆标准如表1-4所示。
表1-4 万兆以太网线缆标准
100Gbps以太网线缆标准
新的40G/100G以太网标准在2010年制定完成，当前使用附加标准IEEE 802.3ba用以说明。随着网络技术的发展，100Gbps以太网在未来会有大规模的应用。
1.3 CSMA/CD
CSMA/CD的概念
根据以太网的最初设计目标，计算机和其他数字设备是通过一条共享的物理线路连接起来的。这样被连接的计算机和数字设备必须采用一种半双工的方式来访问该物理线路，而且还必须有一种冲突检测和避免的机制，以避免多个设备在同一时刻抢占线路的情况，这种机制就是所谓的CSMA/CD（Carrier Sense Multiple Access/Collision Detection）。
可以从以下三点来理解CSMA/CD：
- CS：载波侦听在发送数据之前进行侦听，以确保线路空闲，减少冲突的机会。
- MA：多址访问每个站点发送的数据，可以同时被多个站点接收。
- CD：冲突检测由于两个站点同时发送信号，信号叠加后，会使线路上电压的摆动值超过正常值一倍。据此可判断冲突的产生。边发送边检测，发现冲突就停止发送，然后延迟一个随机时间之后继续发送。
CSMA/CD的工作过程
CSMA/CD的工作过程如下：
- 如果线路空闲则发送数据。如果线路不空闲则一直等待。终端设备不停的检测共享线路的状态。
- 如果有另外一个设备同时发送数据，两个设备发送的数据必然产生冲突，导致线路上的信号不稳定。
- 终端设备检测到这种不稳定之后，马上停止发送自己的数据。
- 终端设备发送一连串干扰脉冲，然后等待一段时间之后再进行发送数据。发送干扰脉冲的目的是为了通知其他设备，特别是跟自己在同一个时刻发送数据的设备，线路上已经产生了冲突。检测到冲突后等待的时间是随机的。
1.4 最小帧长
由于CSMA/CD算法的限制，以太网帧必须不能小于某个最小长度。以太网中，最小帧长为64字节，这是由最大传输距离和冲突检测机制共同决定的。
规定最小帧长是为了避免这种情况发生：A站点已经将一个数据包的最后一个Bit发送完毕，但这个报文的第一个Bit还没有传送到距离很远的B站点。B站点认为线路空闲继续发送数据，导致冲突。
图1-2 Ethernet_II的帧结构
高层协议必须保证Data域至少包含46字节，这样加上以太网帧头的14字节和帧尾的4字节校验码正好满足64字节的最小帧长，如图1-2所示。如果实际数据不足46个字节，则高层协议必须填充一些数据单元。
1.5 以太网的双工
以太网的物理层存在半双工和全双工两种模式。
半双工
半双工的工作模式：
- 任意时刻只能接收数据或者发送数据。
- 采用CSMA/CD机制。
- 有最大传输距离的限制。
HUB工作在半双工模式。
全双工
在有L2交换机取代了HUB组建以太网后，以太网由共享式转变为交换式。而且用全双工代替了半双工，传输数据帧的效率大大提高，最大吞吐量达到双倍速率。
全双工从根本上解决了以太网的冲突问题，以太网从此告别CSMA/CD。
全双工的工作模式：
- 同一时刻可以接收和发送数据。
- 最大吞吐量达双倍速率。
- 消除了半双工的物理距离限制。
当前制造的网卡、二层设备、三层设备都支持全双工模式，HUB除外。
实现全双工的硬件保证：
- 支持全双工的网卡芯片
- 收发线路完全分离的物理介质
- 点到点的连接
1.5 以太网的自协商
自动协商的目的
最早的以太网都是10M半双工的，所以需要CSMA/CD等一系列机制保证系统的稳定性。随着技术的发展，出现了全双工，接着又出现了100M，以太网的性能大大改善。但是随之而来的问题是：如何保证原有以太网络和新以太网的兼容？
于是，提出了自动协商技术来解决这种矛盾。自动协商的主要功能就是使物理链路两端的设备通过交互信息自动选择同样的工作参数。自动协商的内容主要包括双工模式、运行速率以及流控等参数。一旦协商通过，链路两端的设备就锁定在同样的双工模式和运行速率。
以太网速率双工自协商在如下标准中定义：
- 百兆以太网标准：IEEE 802.3uIEEE 802.3u规范将自协商作为可选功能。
- 千兆以太网标准：IEEE 802.3zIEEE 802.3z规范将自协商作为强制功能，所有设备必须遵循并且必须默认启用自协商。
自动协商原理
自动协商是网络设备间建立连接的一种方式。它允许一个网络设备将自己所支持的工作模式信息传达给网络上的对端，并接受对端可能传递过来的信息。设备双方根据彼此工作模式信息的交集，按照双方都支持的最优工作模式建立连接。
对于使用双绞线连接的以太网，如果没有数据传输时，链路并不是一直空闲，而是每隔16ms发送一个高脉冲，用来维护链路层的连接，这种脉冲成为NLP（Normal link Pulse）码流。在NLP码流中再插入一些频率更高的脉冲，可用来传递更多的信息，这串脉冲成为FLP（Fast link Pulse）码流，如图1-3所示。自协商功能的基本机制就是将协商信息封装进FLP码流中，以达到自协商的目的。
图1-3 脉冲插入示意图
网络民工网络民工专注于IT技术领域，结合实战经验，为您分享网络技术、系统集成、网络工程等一线技术解析和实践案例等深度干货文章，愿我们一起悦享技术，成就梦想！70篇原创内容
公众号
对于使用光模块和光纤连接的以太网，与使用双绞线连接的以太网类似，也是靠发送码流来进行自协商的，这种码流称为C码流，也就是配置（Configuration）码流。与电口不同的是，光口一般不协商速率，并且一般工作在双工模式，所以自协商一般只用来协商流控。
如果协商通过，网卡就把链路置为激活状态，可以开始传输数据了。如果不能通过，则该链路不能使用。
如果有一端不支持自动协商，则支持自动协商的一端选择一种默认的方式工作，一般情况下是10M半双工模式。
自协商完全由物理层芯片设计实现，IEEE 802.3规范要求在下列任一情况下启动自协商：
- 链路中断后恢复
- 设备重新上电
- 任何一端设备复位
- 有重新自协商（Renegotiation）请求
除此之外，连接双方并不会一直发送自协商码流。自协商并不使用专用数据包或带来任何高层协议开销。
接口的自动协商规则
当接口对接时，双方能否正常通信和两端接口设置的工作模式是否匹配相关。
- 当两端接口都工作在相同类型的非自协商模式时，双方可以正常通信。
- 当两端接口都工作在自协商模式时，双方通过协商可以正常通信，最终的协商结果取决于能力低的一端，通过自协商功能还可以协商流量控制功能。
- 当两端接口一端的工作模式为自协商，对端为非自协商时，接口最终协商的工作模式和对端设置的工作模式相关。
1.6 冲突域和广播域
冲突域
在传统的以粗同轴电缆为传输介质的以太网中，同一介质上的多个节点共享链路的带宽，争用链路的使用权，这样就会发生冲突，CSMA/CD机制中当冲突发生时，网络就要进行回退，这段回退的时间内链路上不传送任何数据。而且这种情况是不可避免的。同一介质上的节点越多，冲突发生的概率越大。这种连接在同一导线上的所有节点的集合就是一个冲突域。冲突域内所有节点竞争同一带宽，一个节点发出的报文（无论是单播、组播、广播）其余节点都可以收到。
广播域
因为网络中使用了广播，会占用带宽，降低设备的处理效率，必须对广播加以限制。比如ARP使用广播报文从IP地址来解析MAC地址。全1MAC地址FFFF-FFFF-FFFF为广播地址，所有节点都会处理目的地址为广播地址的数据帧。这种一个节点发送一个广播报文其余节点都能够收到的节点的集合，就是一个广播域。传统的网桥可以根据MAC表对单播报文进行转发，对于广播报文向所有的接口都转发，所以网桥的所有接口连接的节点属于一个广播域，但是每个接口属于一个单独冲突域。
02以太网交换
2.1 二层交换原理
二层交换设备工作在OSI模型的第二层，即数据链路层，它对数据包的转发是建立在MAC（Media Access Control ）地址基础之上的。二层交换设备不同的接口发送和接收数据独立，各接口属于不同的冲突域，因此有效地隔离了网络中物理层冲突域，使得通过它互连的主机（或网络）之间不必再担心流量大小对于数据发送冲突的影响。
二层交换设备通过解析和学习以太网帧的源MAC来维护MAC地址与接口的对应关系（保存MAC与接口对应关系的表称为MAC表），通过其目的MAC来查找MAC表决定向哪个接口转发，基本流程如下：
从上述流程可以看出，二层交换通过维护MAC表以及根据目的MAC查表转发，有效的利用了网络带宽，改善了网络性能。图1-6是一个二层交换的示例。
图1-6 二层交换示例
二层交换设备虽然能够隔离冲突域，但是它并不能有效的划分广播域。因为从前面介绍的二层交换设备转发流程可以看出，广播报文以及目的MAC查找失败的报文会向除报文的入接口之外的其它所有接口转发，当网络中的主机数量增多时，这种情况会消耗大量的网络带宽，并且在安全性方面也带来一系列问题。当然，通过路由器来隔离广播域是一个办法，但是由于路由器的高成本以及转发性能低的特点使得这一方法应用有限。基于这些情况，二层交换中出现了VLAN技术。
2.2 三层交换原理
三层交换机出现的背景
早期的网络中一般使用二层交换机来搭建局域网，而不同局域网之间的网络互通由路由器来完成。那时的网络流量，局域网内部的流量占了绝大部分，而网络间的通信访问量比较少，使用少量路由器已经足够应付了。
但是，随着数据通信网络范围的不断扩大，网络业务的不断丰富，网络间互访的需求越来越大，而路由器由于自身成本高、转发性能低、接口数量少等特点无法很好的满足网络发展的需求。因此出现了三层交换机这样一种能实现高速三层转发的设备。
当然，三层交换机并不能完全替代路由器，路由器所具备的丰富的接口类型、良好的流量服务等级控制、强大的路由能力等仍然是三层交换机的薄弱环节。
三层转发的原理
目前的三层交换机一般是通过VLAN来划分二层网络并实现二层交换，同时能够实现不同VLAN间的三层IP互访。不同网络的主机之间互访的流程简要如下：
下面详细介绍一下三层交换的过程。
如图1-7所示，通信的源、目的主机连接在同一台三层交换机上，但它们位于不同VLAN（网段）。对于三层交换机来说，这两台主机都位于它的直连网段内，它们的IP对应的路由都是直连路由。
图1-7 三层转发原理示意网
图中标明了两台主机的MAC、IP地址、网关，以及三层交换机的MAC、不同VLAN配置的三层接口IP。当 PC A向PC B发起PING时，流程如下：（假设三层交换机上还未建立任何硬件转发表项）
网络民工网络民工专注于IT技术领域，结合实战经验，为您分享网络技术、系统集成、网络工程等一线技术解析和实践案例等深度干货文章，愿我们一起悦享技术，成就梦想！70篇原创内容
公众号
从上述流程可以看出，三层交换机正是充分利用了“一次路由（首包CPU转发并建立三层硬件表项）、多次交换（后续包芯片硬件转发）”的原理实现了转发性能与三层交换的完美统一。
03以太网交换应用场景
如图1-8所示，某企业有IP电话、员工PC、网络打印机、移动终端、服务器等多种设备需要接入网络。
图1-8 使用以太网技术组建企业网络示例
可以使用以太网技术将众多的终端设备连接到网络，从而实现员工访问网络、拨打IP电话、员工PC访问服务器共享资源、通过网络实现远程打印、IT管理员统一管理等网络业务。