Cachefiled
NFS不同共享客户端间的数据不同步
问题现象
当您用台ECS挂载同一个NFS文件系统,在ECS-A上append写文件,在ECS-B用tail -f观察文件内容的变化。在ECS-A写完之后,在ECS-B看到文件内容变化会有10-30秒的延时。然而相同的场景下,如果直接在ECS-B上打开文件(比如vi)却是立即可以看到更新的内容的。
原因
该现象与mount的选项以及tail -f实现相关。
用户使用的mount命令为:mount -t nfs4 /mnt/
对于在ECS-B上以这一方式NFS mount的文件系统,默认情况下kernel对文件和目录的属性维护了一份metadata缓存,文件和目录属性(包括许可权、大小、和时间戳记)缓存的目的是减少 NFSPROC_GETATTR 远程过程调用(RPC)的需求。
tail -f 的实现是sleep+fstat来观察文件属性(主要是文件大小)的变化,然后读入文件并输出。可见,tail -f是否能实时输出文件内容主要取决于fstat的结果,由于metadata cache的存在,fstat轮询到的并不是实时的文件属性。因此,即使在NFS服务器端文件已经更新了,但tail -f却没法知道文件已经改动了,于是输出就会出现延时。
解决方法
使用mount 的noac选项可以disable文件和目录属性的缓存。
mount -t nfs4 -o noac /mnt/
---------------------------------------------------------------------------------------------------------------
1.cachefiled介绍
FS-Cache 是指在文件系统和缓存之间的接口。 CacheFS 指的则是FS-cache的缓存后端。CacheFS做实际的数据存储和检索处理,并使用块设备的分区。
NFS,AFS等netfs因为受网络的影响,使得对数据访问和存储的实时性就有了一定的挑战,CacheFS(FS-cache缓存后端即客户端)可解决响应实效的问题 ,用于提供分布式文件系统的本地缓存.
cachefiled在2.6.30内核中,已作为内核的一部分。已支持NFS和AFS文件系统。
加载fscache模块:
modprobe -v fscache
确认nfs-utils的版本,cgslv4默认版本为1.2.2-7
[root@localhost ~]# rpm -qa |grep nfs-utils
nfs-utils-1.2.2-7.el6.x86_64
3.配置cachefiled
修改/etc/cachefilesd.conf文件
vi /etc/cachefilesd.conf
dir /var/cache/fscache
tag mycache
culltable 15
brun 20%
bcull 10%
bstop 5%
frun 20%
fcull 10%
fstop 5%
dir参数用于配置本地缓存目录。
tag参数用于指定一个FS-Cache的标签区分使用多个缓存
culltable参数用于设置缓存的等级,数字越大缓存的命中率越高,占有内存也越多。有效参数值在12-20之间。
brun,frun参数作用:如果剩余空间或缓存文件数量超过限制值,不会释放已使用缓存的空间
bcull,fcullp参数作用:如果剩余空间或缓存文件数量低于限制值,将停止写入缓存,并释放已经缓存的空间(释放最近比较少使用缓存对象。)
bstop,fstop3参数作用:如果剩余空间或文件数量低于限制值,将缓存停止,并释放至比brun,frun限制或更高才能重新工作。
必须满足:
0 <= bstop < bcull < brun < 100
0 <= fstop < fcull < frun < 100
配置文件完成后,执行/etc/init.d/cachefilesd start 启动cachefiled服务(建议关闭selinux,否则有可能导致cachefiled无法启动)
把cachefiled设置为开机启动:
chkconfig cachefiledsd on
4.测试缓存
nfs客户端挂载网络nfs共享盘符到本地,必须使用-o fsc参数,netfs挂载后,缓存并不会自动开始工作,只有发生了读或者写的操作后,缓存才会工作。cachefiled只支持小文件的缓存。
挂载命令:
mount -t nfs 172.16.100.127:/mnt /nfs -o fsc
可使用vi命令修改netfs中的文件,并检查/var/fscache/cache目录下是否生成@4a的类似文件,如存在表示缓存功能已经激活。
[root@localhost cache]# ls
@4a
如出现问题可查看分析/var/log/messages日志。
参考资料:https://www.cyberciti.biz/faq/centos-redhat-install-configure-cachefilesd-for-nfs/
Cachefiled的更多相关文章
- iOS-ASIHTTPRequest缓存机制
第三方网络请求库 * 我们在对网络请求的时候,可以使用系统为我们提供的NSURLRequest和NSURLConnection,它基本能实现我们的基本功能. * 但是有时我们使用第三方封装的库,可以轻 ...
随机推荐
- WPF中控制窗口显示位置的三种方式
首先新建一个WPF工程,在主界面添加一个按钮,并给按钮添加点击事件button1_Click,然后新建一个用于测试弹出位置的窗口TestWindow.1.在屏幕中间显示,设置window.Window ...
- Microsoft Dynamics CRM service 创建,更新等操作时,注意写抛出异常时,抛出SoapException异常
具体如下: using System.Web.Services.Protocols; try{ crmService.Update(procurementPlanEntity);//更新操作}catc ...
- 关于seo优化的核心思想
简单说下,针对网页检索结果进行评估,主要是围绕精确率和召回率进行,具体如下:1.相关性:query与结果说的是不是一回事2.需求强度:抓住主要需求3.丰富程度:详细全面4.有效性:能否真正满足5.时效 ...
- Hyperic Sigar API 举例
Hyperic HQ 是什么? Hyperic HQ 是一个开源的(General Public License,GPL授权)IT资源管理框架,让用户使用统一的界面来管理各种不同的IT资源的管理,Hy ...
- bzoj2458 最小三角形
Description Xaviera现在遇到了一个有趣的问题.平面上有N个点,Xaviera想找出周长最小的三角形.由于点非常多,分布也非常乱,所以Xaviera想请你来解决这个问题.为了减小问题的 ...
- 廖雪峰Java1-2程序基础-8字符和字符串
1.字符类型char char是基本的数据类型 char:保存一个字符,如英文字符.中文字符. Java使用unicode表示字符,可以将char赋值给int类型,查看字符对应的unicode编码. ...
- [UE4]C++中引用(&)的用法和应用实例
对于习惯使用C进行开发的朋友们,在看到c++中出现的&符号,可能会犯迷糊,因为在C语言中这个符号表示了取地址符,但是在C++中它却有着不同的用途,掌握C++的&符号,是提高代码执行效率 ...
- 怎样使用 css 的@media print控制打印
怎样使用 css 的@media print控制打印? <HTML> <HEAD> <TITLE> New Document </TITLE> < ...
- 如何下载spring的jar包?
文转载至:https://www.cnblogs.com/yjmyzz/p/3847364.html Spring官网改版后,很多项目的完整zip包下载链接已经隐掉了,虽然Spring旨在引导大家用更 ...
- SOAP,RESTFull以及RPC的认识
a.一般的系统,开发都是针对数据库开发,不存在系统之间的交互,但是随着现实是有好多系统(好多DB,DB不开放),这些系统之间要进行交互,就像人一样要互相帮助.所以 可以通过一下的方式: 1. ...