linux 网络传输,linux基础知识点

大家好,今天给各位分享linux 网络传输的一些知识,其中也会对linux基础知识点进行解释,文章篇幅可能偏长,如果能碰巧解决你现在面临的问题,别忘了关注本站,现在就马上开始吧!

Linux网络编程中网络传输KCP协议原理解析

在游戏开发中,尤其是MOBA游戏,延迟控制至关重要。传统的TCP协议在实时性方面并不占优势,因为它注重网络友好性和稳定性,而牺牲了包的实时性传输。因此,游戏开发者通常会基于UDP协议实现一套自己的网络协议,以保证包的实时传输和可靠性。这一过程中,KCP协议因其在实时性和可靠性方面的独特优势而受到广泛关注。

KCP(Keep-Current-Path)是一种自动重传请求协议,可以视为TCP协议的替代品,但其运行在用户空间中,专注于实现可靠传输,而牺牲了部分带宽以减少延迟。与TCP协议从网络整体利益出发不同,KCP更加注重自己的传输效率,不考虑整个网络的拥塞情况。当TCP检测到丢包时,首先会减缓传输速度以避免网络进一步拥堵,而KCP则会立即进行重传,以确保数据包不会耽误。

KCP可以被理解为一种可靠的UDP协议。UDP协议是无连接的,由于其实时性较好,通常应用于游戏或音视频通话等场景,且不需要提前建立连接,能节省设备资源,因此广泛应用于嵌入式设备中。此外,UDP在大量数据传输(如文件下载)以及DNS请求中也表现出色。需要注意的是,DNS的服务器节点间的数据同步通常使用TCP协议。

为了提高UDP的可靠性,KCP在其上封装了类似TCP的可靠性传输机制,如ACK机制、重传机制、序号机制、重排机制、窗口机制等,从而兼具TCP的安全性和UDP的实时性,并具备一定的灵活性。KCP的一个典型实现是KCP协议。

TCP协议的特点包括可靠传输(累积确认、超时重传、选择确认)、流量控制(滑动窗口)以及拥塞控制(慢开始、拥塞避免、快重传、快恢复)。KCP协议提供了对这些参数的配置能力,且没有建立/关闭连接的过程。

KCP协议的头部结构包括以下关键字段:连接号(conv)、命令字(cmd)、分片(frg)、接收窗口大小(wnd)、时间戳(ts)、序列号(sn)、下一个可接收的序列号(una)以及数据长度(len)和用户数据(data)等。

在KCP的实现中,数据接收过程首先将收到的数据存放在缓存中,并进行排序,然后从缓存中读取数据进行应用层消费。数据发送则涉及到分片、流量控制和拥塞控制等机制。KCP确认机制包括UNA(用于表示所有之前的数据包已接收)和单独的ACK(用于确认单个数据包)两种。KCP的重传机制更加灵活,支持超时重传时间的自定义、快速重传以及非退让流控等策略。

KCP协议的核心实现原理在于算法层面,而无需调用底层系统接口。用户只需在UDP系统调用时注册KCP回调函数,即可使用KCP协议。对比TCP协议,KCP在实现选择性重传(ARQ)时通过维护接收窗口(滑动窗口)进行数据处理。如果收到有序数据,会将其放入接收队列等待应用层消费。如果存在包丢失,KCP会判断并选择重传丢失的数据包。通过使用接收窗口当前偏移(rcv_nxt)判断当前需要接收的数据包,KCP在接收过程中实现了对数据包的有序处理。

KCP同样在面对网络不佳的情况时实现了拥塞控制,限制了发送端的数据包数量,以确保网络资源的有效利用。为了实现稳定通信和优化性能,KCP借助UNA和ACK机制实现了选择性重传,通过数据包字段进行优化。

在KCP的源码分析中,首先需要了解如何初始化KCP对象和实现回调函数,以与底层UDP系统调用进行交互。在发送数据时,通过调用ikcp_send方法将数据分片并放入发送队列,随后通过ikcp_output方法进行实际数据发送。在接收到网络数据后,调用ikcp_input方法解析数据并处理各种报文格式,如ACK、数据、探测窗口以及响应窗口等。

KCP协议在设计上避免了使用系统调用接口,并且无需建立或关闭连接(从KCP协议本身的角度来看)。许多影响速度的参数都可以进行配置,这使得KCP在不同场景下具有较高的灵活性。

在丢包率较高的网络环境下,KCP的优点会更加显著,尤其是在公网传输中。对于实时性要求较高的应用,如LOL游戏,KCP的使用可以提供更好的性能。然而,KCP的学习成本较高,且在某些运营商的网络中可能存在限制。

总之,KCP协议在游戏帧同步或数据实时传输领域具有一定的优势,通过调整和优化算法来实现高效可靠的数据传输。尽管存在学习成本和特定网络环境下的局限性,KCP仍然是一个值得深入研究和应用的网络传输协议。

在Hyper-V中实现windows与linux共享上网

相信不少读者都会做(或者曾经做过)这么一项活动——把一个Linux系统安装到Windows系统下的虚拟机软件中,然后在Windows这个大环境中对Linux进行学习或者一些实验操作。在进行这么一项活动时,不知道各位读者是否感受到网络连通的重要性(这里指外网的Internet),而事实上,无论是在虚拟机中还是在真实的物理机上“玩”Linux,(外网)网络都扮演着一个非常重要的角色。试想一下,当我们的Linux无法(外网)网路,这时我们又需要安装一个gcc编译器,各位读者会怎么做?采用源码编译?我想,gcc的编译安装这并不是一般人所能够做到的。采用rpm包安装?那光解决rpm包的依赖性就可能要折腾不少的时间。采用yum,并且把源指向安装光盘?这,确实是可以解决gcc的安装问题。但是,各位读者是否又想过这么一个问题,虽然Linux的安装光盘确实已经为我们提供了不少的软件包,但是一个安装光盘才有多大呀,CentOS 6.4的安装光盘也就只有那个四个来G,这就意味着,光盘并不是万能的,还会有不少的软件我们是无法从光盘中获取的,比如Mono,我们就必须自己从官网中下载一个并自己编译安装。(外网)网络是如此的重要,我们是不能够失去它的,哪怕是在虚拟机中也不例外。

在现实生活中,虚拟机软有非常多的种类,比较有名并且常用的有VM、VirtualBox等。如果各位正在阅读此文的读者是使用VM机作为自己的Linux虚拟机的,那么你们是幸福的,因为VM这款软件做得非常好,它自带的NAT技术一下子就可以帮各位读者解决联网问题,换句话说,只要作为大环境的Windows可以正常的访问网络,那么只需要在VM的网卡设置用选择“nat”选项或者采用“8号网卡(vmnet8)”,安装在VM中的Linux就已经获得了访问(外网)网络的权利了,用户完全无需为了网络的事情而烦恼和折腾。

   但是,既然在本文中是选择了Hyper-V作为虚拟机软件,那就代表着我们就没有VM那么幸福了,我们还得自己折腾一番才能争取到获得网络访问这个权利。

好的,正是进入主题,本文中,我们将讨论研究:

1、本文网络背景的介绍

2、如何在Linux中添加一张新网卡

3、如何实现Linux在Hyper-V中实现与Windows的共享宽带上网

4、TTL检测(路由封杀)网络环境的应对策略

1、当前实验网络背景的介绍

之前在网络中心常驻时,上网账号理论上是用不完的,当虚拟机中Linux想访问网络时,我们所采取的办法是正常的拨号上网,一台Linux要上网就拨一个号,十台Linux上网就拨十个号,通过这个方法,虚拟机中所有的Linux都能够访问网络。不过,这种方法是异常“奢侈”的,并且对于大部分读者来说也是非常不现实的。各位读者更多的则是像我当前的情况,从网络中心中撤离出来,回到宿舍,一共也就那么一个上网账号(还是自己花钱供养的),只能供一个主机同一时间访问网络的需要。

此外,当前的环境除了只有一个宽带账号的限制外,由于这里是一个校园网(包括许多高校的校园网、宽带小区或者部分地区电信、联通宽带用户),它们都会有防蹭网(路由器封杀)的这么一个功能,还真的只是一个宽带账号只能供一个主机访问网络(在这里,VM用户仍然不用担心这个问题)。

想要让Hyper-V中的Linux能够访问网络,各位读者可以通过一以下几个办法:

A、多开几个上网账号(非常耗费金钱)

B、买一个放封的路由(一次投资,多次回报,还是个不错的选择)

C、参考本文中的方法(虽不能保证一定能够成功,不过仍然值得一试,不行再采用前一种办法)

2、为Linux添加一块网卡

正式进入到我们的实验,为了不对当前的Linux环境造成干扰,我们决定采用为Linux添加一张新的网卡来进行我们当前的这个实验。

首先,先确保Hyper-V的“虚拟交换机管理器”中存在一个属性为“内部”适配器(如果没有,则需要自己添加一个,这里采用一张已有的网卡,各位读者不必为了这么长的名字而纠结)。

然后为Linux虚拟机添加一张网卡:

在这里,有几点是需要注意的:

(1)、虚拟交换机中请务必要选择“内部”属性的适配器(在这里选择的是刚刚新建的那张,名为:“Windows phone……”)

(2)、添加硬件时,建议选择“旧版的网络适配器”,以防止一些版本的Linux系统缺少对新版网卡的驱动。

然后启动我们的Linux系统,直接使用“setup”设置网卡:

我们发现刚才新增的网卡是并没有被Linux识别的(在这里,我们使用的是CentOS 6.4 X86_64版本,其他发行版的Linux可能会有所出入),我们需要手动的添加一个网卡配置文件。添加方法非常简单,进入“/etc/sysconfig/network-scripts/”目录,然后执行“cp ifcfg-eth0 ifcfg-eth1”(把eth0的配置文件再拷贝一份到eth1中),然后使用vi编辑器打开刚刚拷贝得到的“ifcfg-eth1”配置文件:

然后对该配置文件作出以下修改:

(1)、把“DEVICE”中由eth0改为eth1

(2)、删除“HWADDR”这一行(删除配置文件记录的网卡硬件地址)

(3)、删除“UUID”这一行(删除配置文件中硬件的唯一标识)

然后保存并退出。

继续使用vi编辑器打开“/etc/udev/rules.d/70-persistent-net.rules”,然后把里面的所有内容清空,保存并退出后重启Linux。

现在再setup就可以看到新添加的网卡了。

好的。就这样,我们成功的为Linux添加了一张新网卡。

3、对Hyper-V中的Linux赋予网络访问的权利

上一个小节中,我们添加了一张“内部”属性的适配器,现在我们把Windows中的宽带连接共享到这张“内部”适配器,让Linux能够共享Windows中的网络。

打开Windows中的“网络连接”:

里面有非常之多的网络适配器,这些大家都不用管,只需要留意图中两个蓝色框起来的适配器,一个为“宽带连接”(也就是Windows中的宽带连接),另一个是“vEthement(Internal Ethernet……)”(也就是在Hyper-V中新建的那一张内部网络适配器)。

在“宽带连接”中点击右键,选择“属性”,打开设置窗口,打开“共享”这个选项卡,勾上“允许其他网络用户通过此计算机的Internet连接来连接”,“家庭网络连接”这个下拉菜单中选择刚刚我们新建的“内部”网络适配器。

点击确定保存退出,断开当前的Windows宽带连接,重新拨号之后,刚才的设置即可生效。

然后继续设置我们的“内部”适配器的IP,如图所示,只要随意的设置一个与宽带连接不同网段的IP即可

然后,在Linux中的eth1网卡设置中采用DHCP的方式获取IP地址(有兴趣的读者可以分别尝试使用静态IP的方式和DHCP的方式获取Linux的IP,然后再对比一下“/etc/resolv”中的不同)

保存退出,并执行“service network restart”重启网络配置

现在尝试一下看能不能解析“www.baidu.com”的域名

嗯,非常好,我们的百度域名能够正常的解析,由于域名解析需要连网到DNS服务器,现在能够看到解析,这就表示,我们的Linux已经能够连网,具有网络访问的能力了。

4、应对拨号服务器的TTL检测

或许有一些读者遇过这么一种情况:现在有一个宽带的上网账号,由于某些原因(比如添置了一些新电脑之类的),想让几台电脑都能够共享这个宽带账号来上网,结果从电脑城中买回来一个路由器,非常正确的设置好相关的参数之后,竟然发现没有办法浏览网页,从路由器中的数据包监控中还发现,数据包不断的发送出去,却一个数据包都没有办法接收到。把路由器拿回电脑城中,路由器在哪里又能够正常的使用。

如果各位读者遇到了这种现象,并且排除了路由器故障这一问题之后,那就只能证明了一件事:当前的网路环境中存在对路由器使用的封杀,也就是在拨号服务器中有TTL的检测(当然,想要封杀路由器的使用方法有很多种,比较常用而且比较流行的办法就是采用TTL的检测,在本文中也是只针对TTL检测采取解决措施)。

关于什么是TTL值,各位读者可以用网上搜索详细的资料。在这里我只简单的解说一下:我们的数据包在网络中的传输,从一个网段的网络传输到另外一个网段的网络,这是需要路由器在其中发挥作用的,但是一个由多网段所组成的网络往往是非常庞大的(比如Internet),如果数据包没有一个传输次数的限制,那么就有可能发生这么一个事件:“数据包不断的在网络中传来传去,走遍了整个网络,并且还不断的重复这个动作”。这样,不仅使得网络的拥塞程度一下子大增甚至把整个网络挤垮,并且发送这个数据包的主机还无法获知这个数据包是否可达(也就是是否找到接收方或者接收方到底是否存在)。因此,为了解决这么一个问题,我们在发送数据包的时候,都会在数据包中设置一个TTL值,每当这个数据包经过一个路由器进行转发,数据包中的TTL值就会减1,直到数据包中的TTL值变为0,路由器就会自动的认为这个数据包是不可达的并自把这个数据包丢弃。

针对TTL值的这一个特性,只要在拨号服务器中增加一个TTL值的检测,只要用户是采用路由器上网的(具有放封功能的或者刷了放封固件的除外),到达拨号服务器中的数据包的TTL值就不是默认的TTL值(Windows默认的TTL为128,Linux默认的TTL值为64),如果在拨号服务器中再做这么一个小动作:“把所有不是默认TTL值的数据包全部丢弃”,这样就达到了对路由器封杀的效果。也就是各位读者在路由器的数据包监测中所看到的不断有数据包发出却一个数据包都没有办法收到的原因。

在本文中所介绍的Hyper-V共享上网中就遇到了这么一个问题(不一定所有读者都会遇到),比如我想从网上下载一个东西:

虽然DNS能够解析域名,但是却无法从网上下载东西。造成此现象的其中的原因就是:共享上网的原理跟使用路由器一样,而当前的校园网对路由器的使用有封杀。

要解决TTL检测并封杀路由器使用的方法比较直接,那就是修改数据包从网卡送出时的TTL值。

针对本文中的配置,我用excel画了一个简单的原理图,当虚拟机中的Linux通过eth1发送出一个数据包,该数据包会被发送到“内部”适配器中,然后“内部”适配器会充当一个路由的功能,把数据包转发到宽带连接中,接着,宽带连接也同样的充当同样的功能,把数据包转发出去。这里就存在着一个简单的算术题:“Windows默认的TTL值为128,也就是从宽带连接中出来的数据包必须是128的才不会被拨号服务器丢弃,而数据包每经过一次路由的转发TTL值就会减1,问从eth0中出来的数据包是多少时数据包才不会被拨号服务器丢弃?”聪明的读者一定能给很快的计算得出答案——130!!!

好的,既然我们已经计算出合适的TTL值,我们二话不多说的去设置Linux的数据包TTL值。我们只需使用vi编辑器打开“/etc/sysctl.conf”,然后再最后的地方添加上这么一句“net.ipv4.ip_default_ttl=130”,然后保存退出并重启网络。

这样,我们就可以突破了当前网络对路由器使用的封杀了。

瞧,这就可以下载东西了。

同时,这里还有一项需要读者们非常注意的地方:要时时刻刻的警惕seLinux和iptables所产生的作用,在本文中,如果这两项开启了的话,同样是无法下载东西的。各位读者要切记了。

至此,Linux(CentOS)如何在Hyper-V中实现与Windows宽带共享上网就到此结束了。

Linux传输命令掌握网络之重要工具linux传输命令

网络传输命令是Linux系统中连接客户端和服务器之间传输数据常用的一种手段。它是网络技术领域中不可缺少的重要工具,熟练掌握网络传输命令,势在必行。

Linux系统中常用的网络传输命令有Wget、SCP、FTP,这三类命令分别具有不同的用途:

Wget是Linux系统提供的一个基于HTTP或FTP协议的文件传输工具。它能够以命令行的方式实现文件的静态网络抓取,也就是下载的功能,通常可以用于从某一台网络服务器上下载文件,或者通过某一连接下载文件,具体的操作方式为:wget。

//以下为使用Wget下载文件涉及的一段示例代码

$ wget-O index.html 使用Wget下载文件

SCP则是Linux系统中安全复制文件传输的工具,它可以帮助实现机器之间的文件传输功能。具体的操作方式为:scp [-r] [-C] [-i]。

//以下为使用SCP进行文件传输涉及的一段示例代码

$ scp-r user@host:/home/user/mydir./mydir//使用SCP将远程文件夹复制到本地

FTP则是Linux系统中比较常用的文件上传下载传输工具,它可以完成Linux系统中不同用户之间远程文件传输的功能,例如:将本地文件上传到远程FTP服务器,以及将远程FTP服务器中的文件下载到本地,具体的操作方式为:ftp。

//以下为使用FTP上传文件涉及的一段示例代码

$ ftp

open

user

cd

put//上传文件到FTP服务器

总之,Linux传输命令,如Wget、SCP和FTP,是熟练掌握网络技术不可缺少的重要工具,其中所涉及到的相关操作仍尚有不少细节,在使用时还需要深入研究,才能充分挖掘出它们能够呈现出来的许多有用的功能。

阅读剩余
THE END