centos sync,centos7 ssh服务开启
CentOS下SWAP分区建立及释放内存详解
方法一:
一、查看系统当前的分区情况:
free-m
二、创建用于交换分区的文件:
dd if=/dev/zero of=/whatever/swap bs=block_size(10M)count=number_of_block(3000)
三、设置交换分区文件:
mkswap/export/swap/swapfile
四、立即启用交换分区文件:
swapon/whateever/swap
五、若要想使开机时自启用,则需修改文件/etc/fstab中的swap行:
/whatever/swap swap swap defaults 0 0
方法二
增加交换分区空间的方法:
1.查看一下/etc/fstab确定目前的分区
2.swapoff/dev/hd**
3.free看一下是不是停了.
4.fdisk删了停掉的swap分区
5.重新用FDISK建一个新的SWAP分区
6.mkswap/dev/hd**把新的分区做成swap
7.swapon/dev/hd**打开swap
8.修改/etc/fstab
操作实例:
1.查看系统Swap空间使用
# free
total used free shared buffers cached
Mem: 513980 493640 20340 0 143808 271780
-/+ buffers/cache: 78052 435928
Swap: 1052248 21256 1030992
2.在空间合适处创建swap文件
# mkdir swap
# cd swap
# dd if=/dev/zero of=swapfile bs=1024 count=10000
10000+0 records in
10000+0 records out
# ls-al
total 10024
drwxr-xr-x 2 root root 4096 7月 28 14:58.
drwxr-xr-x 19 root root 4096 7月 28 14:57..
-rw-r--r-- 1 root root 10240000 7月 28 14:58 swapfile
# mkswap swapfile
Setting up swapspace version 1, size= 9996 KiB
3.激活swap文件
# swapon swapfile
# ls-l
total 10016
-rw-r--r-- 1 root root 10240000 7月 28 14:58 swapfile
# free
total used free shared buffers cached
Mem: 513980 505052 8928 0 143900 282288
-/+ buffers/cache: 78864 435116
Swap: 1062240 21256 1040984
生成1G的文件
# dd if=/dev/zero of=swapfile bs=10M count=3000
创建为swap文件
#mkswap swapfile
让swap生效
#swapon swapfile
查看一下swap
#swapon-s
[root@cluster/]# swapon-sFilenameTypeSizeUsedPriority/dev/sda3 partition10201161728-1/state/partition1/swap/swapfile file307199920-2
加到fstab文件中让系统引导时自动启动
#vi/etc/fstab
/state/partition1/swap/swapfil swap swap defaults 0 0
完毕。
二,LINUX释放内存
细心的朋友会注意到,当你在linux下频繁存取文件后,物理内存会很快被用光,当程序结束后,内存不会被正常释放,而是一直作为caching.这个问题,貌似有不少人在问,不过都没有看到有什么很好解决的办法.那么我来谈谈这个问题.
先来说说free命令
[root@cluster/]# free-m
total used free shared buffers cached
Mem: 31730 31590 139 0 37 27537
-/+ buffers/cache: 4015 27714
Swap: 30996 1 30994
其中:
total内存总数
used已经使用的内存数
free空闲的内存数
shared多个进程共享的内存总额
buffers Buffer Cache和cached Page Cache磁盘缓存的大小
-buffers/cache的内存数:used- buffers- cached
+buffers/cache的内存数:free+ buffers+ cached
可用的memory=free memory+buffers+cached
有了这个基础后,可以得知,我现在used为163MB,free为86,buffer和cached分别为10,94
那么我们来看看,如果我执行复制文件,内存会发生什么变化.
[root@cluster/]# cp-r/etc~/test/
[root@cluster/]# free-m
total used free shared buffers cached
Mem: 31730 31590 139 0 37 27537
-/+ buffers/cache: 4015 27714
Swap: 30996 1 30994
在我命令执行结束后,used为244MB,free为4MB,buffers为8MB,cached为174MB,天呐都被cached吃掉了.别紧张,这是为了提高文件读取效率的做法.
引用[url][/url]为了提高磁盘存取效率, Linux做了一些精心的设计,除了对dentry进行缓存(用于VFS,加速文件路径名到inode的转换),还采取了两种主要Cache方式:Buffer Cache和Page Cache。前者针对磁盘块的读写,后者针对文件inode的读写。这些Cache有效缩短了 I/O系统调用(比如read,write,getdents)的时间。
那么有人说过段时间,linux会自动释放掉所用的内存,我们使用free再来试试,看看是否有释放?
[root@cluster/]# free-m
total used free shared buffers cached
Mem: 31730 31590 139 0 37 27537
-/+ buffers/cache: 4015 27714
Swap: 30996 1 30994
MS没有任何变化,那么我能否手动释放掉这些内存呢???回答是可以的!
/proc是一个虚拟文件系统,我们可以通过对它的读写操作做为与kernel实体间进行通信的一种手段.也就是说可以通过修改/proc中的文件,来对当前kernel的行为做出调整.那么我们可以通过调整/proc/sys/vm/drop_caches来释放内存.操作如下:
[root@cluster/]# cat/proc/sys/vm/drop_caches
0
首先,/proc/sys/vm/drop_caches的值,默认为0
[root@cluster/]# sync
手动执行sync命令(描述:sync命令运行 sync子例程。如果必须停止系统,则运行 sync命令以确保文件系统的完整性。sync命令将所有未写的系统缓冲区写到磁盘中,包含已修改的 i-node、已延迟的块 I/O和读写映射文件)
[root@server test]# echo 3/proc/sys/vm/drop_caches
[root@server test]# cat/proc/sys/vm/drop_caches
3
将/proc/sys/vm/drop_caches值设为3
[root@server test]# free-m
total used free shared buffers cached
Mem: 249 66 182 0 0 11
-/+ buffers/cache: 55 194
Swap: 511 0 511
再来运行free命令,发现现在的used为66MB,free为182MB,buffers为0MB,cached为11MB.那么有效的释放了buffer和cache.
有关/proc/sys/vm/drop_caches的用法在下面进行了说明
/proc/sys/vm/drop_caches(since Linux 2.6.16)
Writing to this file causes the kernel to drop clean caches,
dentries and inodes from memory, causing that memory to become free.
To free pagecache, use echo 1/proc/sys/vm/drop_caches;
to free dentries and inodes, use echo 2/proc/sys/vm/drop_caches;
to free pagecache, dentries and inodes, use echo 3/proc/sys/vm/drop_caches.
Because this is a non-destructive operation and dirty objects
这几天发现linux系统内存一直涨,即使把apache和mysql关闭了,内存也不释放,可以使用以下脚本来释放内存:
脚本内容:
#!/bin/sh
# cache释放:
# To free pagecache:
/bin/sync
/bin/sync
#echo 1/proc/sys/vm/drop_caches
# To free dentries and inodes:
#echo 2/proc/sys/vm/drop_caches
# To free pagecache, dentries and inodes:
echo 3/proc/sys/vm/drop_caches
利用系统crontab实现每天自动运行:
crontab-e
输入以下内容:
00 00***/root/Cached.sh
每天0点释放一次内存,这个时间可以根据自己需要修改设置
在运行./Cached.sh时如果提示错误:Permission denied权限的问题,可以运行
使用Linux下的btsync轻松实现数据同步linuxbtsync
Linux的BTSync是一款强大的文件同步应用程序,它可以帮助用户快速、安全地在计算机、服务器之间同步数据。BTSync可以满足Linux使用者在家庭和企业网络中数据同步、文件共享和灾备备份等多种功能需求。
BTSync是开源软件工具,可以在Linux桌面和服务器上运行。使用BTSync,用户可以安装从支持以下Linux发行版本:Ubuntu 12.04、CentOS&RHEL 6.4、Debian 6&7、Fedora 18&19、openSUSE 11.3&12.3。一旦安装完成,使用BTSync只需一行安装脚本即可开始
安装:
$ sudo add-apt-repository ppa:rel0-btsync/ppa
$ sudo apt-get update
$ sudo apt-get install btsync
另外,BTSync支持Raspbian,运行在Raspberry Pi上,同步文件有助于流畅的播放媒体文件。
要使用BTSync,首先在网站上下载重新编译的最新安装程序,然后使用以下命令安装:
sudo dpkg-i btsync_1.3.109_i386.deb
一旦安装完成,系统将为你创建一个“btsync”用户以及相应的守护进程。该守护进程以“nobody”用户就绪,并监听在TCP无状态端口8888上。
在Linux系统中,BTSync通过Web GUI被控制,用户可在本地网络和互联网上创建文件同步,当文件发生变化时自动同步数据。默认情况下,用户可在中设置BTSync,当然,用户也可以从命令行设置,只需运行btsync–config文件所述,即可操作btsync。
此外,BTSync可以通过API进行自动化,用户可以使用它按时同步数据,而无需手工操作。通常,用户需要安装curl或wget命令,并使用类似以下命令让BTSync将数据发送到另一台机器上:
$ curl-d‘{
“secret”:“YourSecretHere”,
“mode”:“sender”,
“add_path”:“Source Path”,
“remove_path”:“Destination Path”
}’
使用BTSync,用户可以在计算机之间轻松实现数据同步。它可以帮助Linux使用者在家庭和企业网络中实现文件共享、数据备份和灾难恢复等功能。
Rsync+Sersync实现文件实时同步
在文件实时同步场景中,Rsync+Sersync架构的选择依据数据量和复杂性。对于小规模数据(如几百MB),Rsync+Inotify-tools更为合适;而对于大文件量(GB至TB级别),Rsync+sersync的性能更为高效。
配置方面,以CentOS 7.5系统为例,首先在源服务器A上,需确保SELINUX关闭,防火墙设置允许rsync的873端口,并安装rsync客户端,调整配置文件,创建用户认证,并启动服务。同时,需要在目标服务器B上安装rsync服务端,关闭SELINUX,开放端口,配置认证,确认数据同步成功,表现为/data/test目录下test文件夹的出现。
为了实现实时同步,sersync工具在目标服务器B上部署。首先,确认内核支持inotify,调整其默认参数以优化。然后,安装sersync并配置监控选项,使其在启动时自动执行。还需编写脚本监控sersync运行状态,确保实时触发rsync同步无误。
然而,在实施过程中可能会遇到一些常见问题,如授权失败、pid文件冲突或权限设置不当。遇到错误如“auth failed on module rsync_data”时,检查认证文件权限;“failed to create pid file”可能是因为文件已存在,需清理或重新启动;“password file must not be other-accessible”强调了密码文件的权限设置;“chdir failed”则可能与目录权限相关,需要相应处理。
综上,Rsync+Sersync架构的选择和配置是根据具体需求进行的,同时需要对可能出现的问题有清晰的认识和解决方案。