欢迎光临
我们一直在努力

网络基础

目录

一、计算机网络背景

1.1、网络发展

1.2、初识协议

1.3、协议分层

1.4、OSI七层模型

1.5、TCP/IP协议

1.6、再识协议

1.7、TCP/IP协议与操作系统的关系(宏观上 怎么实现的)

1.8、协议的进一步认识

二、网路传输基本流程

2.1、局域网网络传输

2.2、跨网络传输

三、Socket编程预备

3.1、端口号port

3.2、端口号VS进程pid

3.3、理解socket

3.4、传输层的典型代表

3.5、网络字节序

3.6、socket编程接口认识


一、计算机网络背景

1.1、网络发展

最开始计算机的工作是相互独立的

但是若是想要不同计算机操作相同数据就会很麻烦 需要拷贝之后人为带到另一台计算机 因为人之间进行工作是必须要相互协作的 这就使得计算机也是要相互协作的 因此诞生了网络 网络的诞生是必然的

网络互连

指的是多台计算机连接在一起进行工作

局域网

计算机的数量更多 通过交换机和路由器连接在一起

广域网

实际上和局域网组成一样 只是规模变大了

1.2、初识协议

协议是一种约定 使用协议进行通信可以降低通信的成本 

举一个打电话的例子 上个世纪 打电话很费钱 在大学的小明若是想要生活费就向家里打电话一次并且立即挂断 报平安就打两次并且立即挂断 这样就不需要接通耗费花费 而直接告诉家里人信息 这就是一种约定就是一种协议 

计算机之间的传输媒介是光信号和电信号. 通过 "频率" 和 "强弱" 来表⽰ 0 和 1 这样的信息. 要想传递各种不同的信息, 就需要约定好双⽅的数据格式.

思考: 只要通信的两台主机, 约定好协议就可以了么?

定好协议,但是你⽤频率表⽰01,我⽤强弱表⽰01,就好⽐我⽤中国话,你⽤葡萄⽛语⼀样,虽

然⼤家可能遵守的⼀套通信规则,但是语⾔不同,即是订好了基本的协议,也是⽆法正常通信的

所以,完善的协议,需要更多更细致的规定,并让参与的⼈都要遵守。

计算机⽣产⼚商有很多;

计算机操作系统, 也有很多;

计算机⽹络硬件设备, 还是有很多;

如何让这些不同⼚商之间⽣产的计算机能够相互顺畅的通信? 就需要有⼈站出来, 约定⼀个共同的

标准, ⼤家都来遵守, 这就是 ⽹络协议;

.
国际标准化组织:

◦

IEEE(电⽓和电⼦⼯程师协会):这是⼀个由计算机和⼯程领域专家组成的庞⼤技术组织,在

通信协议领域贡献突出。IEEE制定了全世界电⼦、电⽓和计算机科学领域30%左右的标准,包

括IEEE 802系列标准,这些标准涵盖了从局域⽹(LAN)到⼴域⽹(WAN)等多种⽹络技术。

◦

ISO(国际标准化组织):ISO是由多个国家的标准化团体组成的国际组织,它在开放系统互连

(OSI)模型⽅⾯的⼯作尤为著名。OSI模型定义了⽹络通信的七层协议结构,尽管在实际应⽤

中,TCP/IP协议族更为普遍,但OSI模型仍然在学术和理论研究中占有重要地位。

◦

ITU(国际电信联盟):ITU是联合国下属的专⻔机构,负责制定电信领域的国际标准。ITU-T

制定的标准涵盖了电话和⽹络通信,与ISO合作确保了通信技术的全球兼容性和互操作性。

2.
区域标准化组织:

◦

ETSI(欧洲电信标准学会):由欧洲共同体各国政府资助,是⼀个由电信⾏业的⼚商与研究机

构参加并从事研究开发到标准制定的组织。

◦

ASTAP(亚洲与泛太平洋电信标准化协会):1998年由⽇本与韩国发起成⽴的标准化组织,旨

在加强亚洲与太平洋地区各国信息通信基础设施及其相互连接的标准化⼯作的协作。

3.
公司:

◦

某些公司,如泰凌微,也⾃研各种标准的软件协议栈,包括低功耗蓝⽛、zigbee、thread及

Matter等,并可进⾏定制化改动,这是其核⼼竞争⼒之⼀。泰凌微还计划重点发展智能电⼦价

签、智能遥控、智能家居等市场。

4.
⺠间国际团体:

◦

IETF(互联⽹⼯程师任务组):这是⼀个负责开发和推⼴互联⽹协议(特别是构成TCP/IP协议

族的协议)的志愿组织,通过RFC发布新的或者取代⽼的协议标准。

5.
官⽅机构:

◦

FCC(联邦通信委员会):美国对通信技术的管理的官⽅机构,主要职责是通过对⽆线电、电

视和有线通信的管理来保护公众利益。也对包括标准化在内的通信产品技术特性进⾏审查和监

督。

以上这些组织或公司都能在⼀定程度上定制协议标准,以满⾜特定需求或推动技术发展。

1.3、协议分层

协议分层可以保证模块化的设计 具有更好的解耦合性

每一层之间可以进行“直接通信” 而上层与下层不能 相关性低

1.4、OSI七层模型

OSI(Open Systems Interconnection,开放系统互联)模型是国际标准化组织(ISO)提出的网络通信分层架构标准,将网络通信功能抽象为 7 个层次,实现不同系统间的标准化互联与通信。

各层核心定义如下:

  • 物理层(Physical Layer):模型最底层,定义物理介质(网线、光纤、无线信号)的电气、机械、功能和规程特性,负责传输比特流(0 和 1)。
  • 数据链路层(Data Link Layer):将比特流封装成帧,实现相邻节点的可靠传输,通过 MAC 地址寻址,提供差错检测与纠正,核心设备为交换机。
  • 网络层(Network Layer):负责跨网络的路由选择与 IP 寻址,通过 IP 协议确定数据包的传输路径,核心设备为路由器。
  • 传输层(Transport Layer):提供端到端的通信服务,实现数据的分段、重组、流量控制与差错恢复,核心协议为TCP(可靠)与UDP(不可靠)。
  • 会话层(Session Layer):管理通信实体间的会话连接,负责会话的建立、同步、恢复与断开,保障通信过程的连续性。
  • 表示层(Presentation Layer):处理在两个通信系统中交换信息的表示方式,包括数据加密、解密、压缩、解压缩与格式转换,确保数据被对方正确识别。
  • 应用层(Application Layer):模型最高层,直接为用户应用程序(浏览器、邮件、文件传输工具)提供网络服务,定义各类应用协议(HTTP、FTP、DNS、SMTP)。
  • 在实际设计中一般不使用这个模型 因为太复杂、太理想化、太慢、太不实用。而是使用TCP/IP协议

    1.5、TCP/IP协议

    TCP/IP(Transmission Control Protocol/Internet Protocol)是互联网实际使用的核心协议簇,是一套让不同设备能互相通信的标准规则集合,不是单指 TCP 和 IP 两个协议。

    TCP/IP 是面向互联网通信的分层协议体系,定义了计算机如何接入网络、数据如何封装、寻址、传输、路由、交付到应用,是互联网的基础通信标准。

    • 应用层负责应用程序之间的通信。协议:HTTP、HTTPS、FTP、DNS、SMTP 等。

    • 传输层负责端到端的数据传输控制。协议:TCP(可靠)、UDP(快速)。

    • 网络层(网际层)负责寻址、路由、跨网传输。协议:IP、ICMP、ARP 等。

    • 网络接口层负责与物理网络对接,把数据发到硬件。对应:以太网、Wi‑Fi、网卡、交换机等。

    ⼀般⽽⾔

    •
    对于⼀台主机, 它的操作系统内核实现了从传输层到物理层的内容;

    •
    对于⼀台路由器, 它实现了从⽹络层到物理层;

    •
    对于⼀台交换机, 它实现了从数据链路层到物理层;

    •
    对于集线器, 它只实现了物理层;

    1.6、再识协议

    为什么要有TCP/IP协议

    即便是单机,你的计算机内部,其实都是存在协议的,⽐如:其他设备和内存通信,会有内

    存协议。其他设备和磁盘通信,会有磁盘相关的协议,⽐如:SATA,IDE,SCSI等。只不过我们感知不到罢了。⽽且这些协议都在本地主机各⾃的硬件中,通信的成本、问题⽐较少。

    当通信距离变长就会出现很多新的问题 而针对于这些问题就需要使用新的对应的解决方法 而这些方法就是协议

    上图指出了通信距离变长出现的问题 TCP/IP协议旨在解决对应的这些问题

    所以TCP/IP协议可以说就是一份解决方案 至于分层的原因就是因为出现的问题也分层了

    1.7、TCP/IP协议与操作系统的关系(宏观上 怎么实现的)

    TCP/IP协议每一层在OS软硬件分层结构中实际上都找得到对应的一层

    Linux系统计算机和Windows系统计算机结构上不同 但是他们实现的网络协议部分确实相同的 这就保证了不同系统不同结构的计算机可以进行通信

    1.8、协议的进一步认识

    举一个快递单的例子 这也可以看做一个协议 因为收货方和发货方都是按照快递单上面的信息形成一种共有的约定进行物资的传递

    而在计算机中协议的实现也类似 协议就是一种结构体 上面包含数据 网络协议的代码实现都是C或者C++ 因此不同主机传递的网络信息可以直接天然地认识 这就是一种约定

    所谓协议 就是通信双方都使用的认识的结构化数据类型

    二、网路传输基本流程

    2.1、局域网网络传输

    一般见到的局域网通信标准有以太网、无线lan以及令牌环网。这里以以太网来学习

    首先要认识到同一局域网之内的主机传输可以直接传输

    每台主机上都有一个唯一标识 MAC地址 这个地址是网卡上面的固件

    MAC地址⽤来识别数据链路层中相连的节点;

    ⻓度为
    48
    ⽐特位, 即
    6
    个字节. ⼀般⽤
    16
    进制数字加上冒号的形式来表⽰(例如: 08:00:27:03:fb:19)

    在⽹卡出⼚时就确定了, 不能修改. mac地址通常是唯⼀的(虚拟机中的mac地址不是真实的mac地

    址, 可能会冲突; 也有些⽹卡⽀持⽤⼾配置mac地址).

    windows>ipconfig /all 查看主机的mac地址

    这是以太网的传输的简单示例 主机A发送数据 这个数据实际上是一个结构化的数据类型 其中有数据的源mac地址、目的mac地址以及数据的有效部分,这个struct会向以太网发送,并且所有主机都能接收,但是这些主机会判断目的mac地址和自己的mac地址是否一样,不符合就直接舍弃这个报文

    要注意的是:

    以太网中,任何时刻只允许一台机器向网络中发送数据

    若是有多台主机都发送,那么会出现互相干扰的情况,称之为数据碰撞

    针对于这种情况,要进行碰撞检测和碰撞避免

    没有交换机的情况下,一个以太网就是一个碰撞域

    从系统的角度去理解这个通信原理:以太网相当于临界资源,而主机去争夺这个临界资源,主机之间是互斥的

    无线lan和这个过程一样只不过是无线的;至于令牌环网就是发送的数据中带有一个特殊字段保证持有这个令牌的主机才能发送数据,这个令牌相当于锁

    这里想到一个生活中的例子,当我们在人少的时候使用某一个局域网(无线lan)网络很流畅,但是人多了就很卡,这是因为多个主机发送报文了,而这也就导致了很多主机要丢弃不要的报文以及以太网之间的碰撞处理,导致网络有效响应的过程被延迟了

    初步理解之后,来看同一个网段两台主机传输数据的流程

    要认识到,主机之间的网络传输实际上是协议栈之间在通信

    而每一层都有自己的协议,在进行传输的时候要进封装和解包

    为什么要自顶向下封装,这是因为数据的源头是应用层的用户发出的,而数据在网络中传输要经过网卡,又因为这两个一个在最上层,一个在最下层,这就导致了数据要在网络中传输,首先是要先贯穿一个主机的整个os软硬件结构(os是硬件(网卡)的管理者)

    在每一层新添加的部分就是这一层的报头,剩余部分是有效载荷,报头和有效载荷构成报文

    数据发出之后在另一个主机要进行解包,也就是报头和有效载荷的分离,这里存在几个细节

    1、不考虑应用层协议,其他层的协议必须具有将报文的报头和有效载荷分离的能力,报头中必须包含如何将自己的有效载荷交付给上一层哪一个协议的能力

    2、底层收到报文,但是地址不是我的,应该在数据链路层丢弃

    3、协议栈

    物理层网卡有一种混杂模式,也就是无差别接收发送而来的报文,这就是抓包的原理

    加深理解

    数据报文的分用,也就是在解包之后因为上一层可能具有多种协议,而这一层可以交付给上一层的任意一种协议,这就是分用的体现

    2.2、跨网络传输

    认识ip地址

    ip(公网ip)地址用来标识全球范围内主机的唯一性;内网ip地址可以重复,一般我们使用的局域网就是内网ip地址

    ip协议有两个版本,ipv6和ipv4,前者16个字节表示也就是128个比特位,后者4个字节也就是32个比特位,一般使用的都是ipv4,ipv6是我国提出的一种解决ip地址不够使用的一种解决方案

    跨网段的数据传输必须经过路由器

    路由器一般由物理层、数据链路层、网络层构成,主要工作在网络层;同时只要一个设备具有网络层就一定有路由功能

    为什么跨网段传输数据会经过路由器?这是因为发送数据的主机就算不知道要传给哪个特定主句但是一定知道这个主机和自己不在一个局域网内,那么就会发送给路由器进行路由功能

    路由器也会进行封装和解包

    那么mac地址和ip地址有什么区别吗

    可以这样说,目的和源ip地址提供长远目标不会改变,而目的以及源mac地址会一直改变,mac地址决定短期目标(暂时这样区分,后面修正)

    下一个路由器和自己这个主机在同一个局域网,因此可以让路由器接收,所以短期内的目标是不跨网的,很好达到

    ip网络层存在的意义是提供网络虚拟层,让世界所有网络都是ip网络,屏蔽最底层的网络差异


    三、Socket编程预备

    3.1、端口号port

    首先要认识一点:一台主机将数据通过网络传递到另一台主机是目的吗?答案是——不是。因为数据传递给对方是最终是要让人来进行读取然后进行一类相关操作的,也就是说数据在主机之间传递只是手段,真正的目的是要让人读到

    而人要如何读取了,换句话说,这些数据要通过什么媒介来让人读到读懂,那就是进程。例如我们启动的qq、微信、迅雷等等都是一个进程,目的就是接收另一台主机进程发送的数据

    上网的本质就是两种:一是从远端服务器获取数据,二是将本地数据上传到远端服务器,而这两个在一台主机上的数据传递流程都是:进程->网卡->网络

    由上总结:网络通信的本质是两台主机上的进程间的通信

    但是可以肯定的是一台主机上的进程非常多,要进行网络通信的进程也是很多的,那么在进行网络通信的时候应该如何准确无误地将数据传递到某一个进程呢?

    这就需要端口号的引入

    所谓的端口号就是用来标识网络通信中的进程的,用来保证唯一性,告诉OS此时的网络数据应该交给哪一个进程来处理

    简单了解一下原理:网络数据传输到传输层之后报头中包含端口号信息,并且有哈希表来关联端口号和进程,OS根据此报头中的端口号可以快速找到某一个进程;此报文的剩下部分就是有效载荷即数据;和文件一样,数据传递给应用层协议的时候也有一个缓冲区来先接收

    端口号是一个2字节16位的整数

    一个端口号只能被一个进程占用

    端口号范围划分(0~1023知名端口号:HTTP、FTP、SSH这些主流的应用层协议,它们的端口号都是固定的;1024~65535:这些由os来动态分配的端口号,分配给客户端进程)

    ip用来标识主机的唯一性,port端口号用来标识网络中进程的唯一性,那么ip+port就可以标识全世界内一个进程的唯一性

    3.2、端口号VS进程pid

    进程pid和端口号都可以标识进程的唯一性,它们两者间有什么区别?

    1、不是所有的进程都需要网络通信,也就是说不是所有的进程都需要和端口号关联

    2、pid和端口号的使用场景不一样,虽然可以将端口号也设置为pid(统一设计),但是这样耦合度太高了,当其中一个的应用场景因为某一个原因要改变时,另一个和这个一样那么也要改变,这样花费的成本太高实现也更加复杂,所以pid和端口号还是要分开设计,这样解耦合了

    3.3、理解socket

    由上面可以知道,网络通信实际上就是全网络内唯二的两个进程进行通信;用ip加上port标识通信进程的唯一性

    socket就是ip+port

    3.4、传输层的典型代表

    了解了网络协议栈以及系统,可以知道传输层实际上是属于内核的,那么我们未来通过网络协议栈进行通信的时候调用的肯定是传输层的系统调用

    这里简单认识两种主流的传输层协议

    1、TCP(transmission control protocol)

    有连接(即通过此协议进行通信的时候需要提前建立连接,就像用手机打电话一样要先拨号并且等待对方接通)、可靠传输(数据丢失看要重传)、面向字节流

    2、UDP(user datagram protocol)

    无连接(即通过此协议进行通信的时候不需要提前建立连接,就像用对讲机的时候直接说话即可)、不可靠传输(数据丢失不重传)、面向数据报

    可靠与不可靠并不是一对优缺点,而是一种中性特性:所谓可靠的前提肯定需要复杂的实现资源的更多占用,而不可靠虽然不可靠但是准备工作很少,实现也更简单

    3.5、网络字节序

    内存中的多字节数据相对于内存地址有大小端之分,磁盘中的多字节数据相对于文件地址也有大小端之分。网络数据流同样有大小端之分,往往在网络通信的时候需要统一字节序,这样才不会造成误导。那么要如何定义网络数据流的地址呢?

    发送主机通常将发送缓冲区的数据按内存地址从低到高的顺序发出,接收主机将网络上收到的数据也是按照内存从低到高的顺序保存在自己的缓冲区中。因此网络数据流的地址规定:先发出的是低地址,后发出的是高地址,即所有发送到网络上的数据都必须是大端的。TCP/IP协议规定,网络数据流应该采用大端字节序,即低地址高字节。不管这个主机是大端机还是小端机,都会按照TCP/IP协议规定的网络字节序来发送数据,若是小端机,先将数据转换为大端,否则直接发送。

    为了使网络程序具有可移植性,让同样的C代码在大端机或者小端机上面编译后都能正常运行,可调用以下库函数做网络字节序和主机字节序的转换

    h表示host、to表示转化、n表示net、l和s分别表示32位长整数和16位短整数

    3.6、socket编程接口认识

    常见API

    // 创建 socket ⽂件描述符 (TCP/UDP, 客⼾端 + 服务器)

    int socket(int domain, int type, int protocol);

    // 绑定端⼝号 (TCP/UDP, 服务器)

    int bind(int socket, const struct sockaddr *address, socklen_t address_len);

    // 开始监听socket (TCP, 服务器)

    int listen(int socket, int backlog);

    // 接收请求 (TCP, 服务器)

    int accept(int socket, struct sockaddr* address, socklen_t* address_len);

    // 建⽴连接 (TCP, 客⼾端)

    int connect(int sockfd, const struct sockaddr *addr, socklen_t addrlen);

    先介绍struct sockaddr*  其他的写代码的时候介绍

    首先已知结论是网络通信本质上还是进程间通信,本地进程间通信有一套systemV标准,而网络中进程间通信遵循socket标准。实际上socket也支持本地进程间通信。

    这就必然会使得socket会有很多种类以满足很多常见,同时接口也会有很多通信接口规范。但是socket设计者只想设计一种通信接口,于是有了struct sockaddr*

    传给socket接口的参数类型都是struct sockaddr*  而实际上参数的定义却不是,若是网络通信则定义的类型是struct sockaddr_in,若是本地通信则定义的类型是struct sockaddr_un,在传参的时候强转即可

    这样就统一了接口。很像C++中的继承多态

    实际上struct sockaddr* 可设计成void*。因为void*可以接收任意类型参数,但是为什么不是这样?首先这是用C写的,设计的时候还C不支持void*,其次设计成struct sockaddr* 可阅读性更好

    赞(0)
    未经允许不得转载:171主机测评 » 网络基础
    分享到: 更多 (0)

    评论 抢沙发

    • 昵称 (必填)
    • 邮箱 (必填)
    • 网址