使用noatime属性优化文件系统读取性能
admin 9年前 (2015-09-13) 3715浏览 0评论
当文件被创建,修改和访问时,Linux系统会记录这些时间信息,当访问足够频繁将会是很大的开销,因为每次访问都会记录时间,所以 我们今天使用bonnie++来简单测试我们修改noatime给我们带来的性能提升有多少,我们先下载最新版本的bonnie++...
admin 9年前 (2015-09-13) 3715浏览 0评论
当文件被创建,修改和访问时,Linux系统会记录这些时间信息,当访问足够频繁将会是很大的开销,因为每次访问都会记录时间,所以 我们今天使用bonnie++来简单测试我们修改noatime给我们带来的性能提升有多少,我们先下载最新版本的bonnie++...
admin 9年前 (2015-07-15) 5426浏览 0评论
最近一直在忙着搞Ceph存储的优化和测试,看了各种资料,但是好像没有一篇文章把其中的方法论交代清楚,所以呢想在这里进行一下总结,很多内容并不是我原创,只是做一个总结。如果其中有任何的问题,欢迎各位喷我,以便我提高。 优化方法论 做任何事情还是要有个方...
admin 10年前 (2014-12-03) 7700浏览 0评论
1. 创建一个XFS文件系统 [root@localhost ~]# mkfs.xfs -f /dev/vdb1 meta-data=/dev/vdb1 isize=256 agcount=4, agsize=1966...
admin 10年前 (2014-12-03) 3768浏览 0评论
日前,同事反馈一个问题:在一个大分区(24T)中使用xfs文件系统,用来做历史文件备份,突然提示没有磁盘空间错误,先检查下: [root@imysql ~]# df -hT Filesystem Type Size Used Avail Use% M...
admin 10年前 (2014-12-03) 4793浏览 0评论
先贴出优化前后的对比,只是简单的用dd命令测试了一下而已,不怎么专业。写和读的文件为内存2倍。 优化前: #写性能 [root@sapling ~]# dd if=/dev/zero of=/data/test bs=8M count=1000 10...
admin 10年前 (2014-09-12) 3706浏览 0评论
现象: 客户在ext4文件系统下,以4KB数据块大小同步写性能在47MB/s左右,和PCI-E SSD 4K同步写性能200MB/s有差距。 根因分析: 1、文件系统下4KB同步写性能与200MB/s有差距,与文件系统行为有关。文件系统存...
admin 10年前 (2014-09-12) 3236浏览 0评论
Btrfs ,相信广大折腾帝们都不会陌生,被誉为“下一代 Linux 文件系统”的它,具有扩展性好、支持数据校验、支持多设备管理等等强大特性,使得 Ext4 也只能成为悲剧的过渡产品,还不赶快找一个 Ubuntu 10.10、Fedora 15、Me...
admin 11年前 (2014-06-25) 2831浏览 0评论
逻辑卷管理LVM是一个多才多艺的硬盘系统工具。无论在Linux或者其他类似的系统,都是非常的好用。传统分区使用固定大小分区,重新调整大小十分麻烦。但是,LVM可以创建和管理“逻辑”卷,而不是直接使用物理硬盘。可以让管理员弹性的管理逻辑卷的扩大缩小,操...
admin 11年前 (2014-04-29) 4152浏览 0评论
DRBD简介 DRBD (Distributed Replicated Block Device) 是 Linux 平台上的分散式储存系统。其中包含了核心模组,数个使用者 空间管理程式及 shell scripts,通常用于高可用性(high av...
admin 11年前 (2014-04-29) 2950浏览 0评论
由于大硬盘存储系统是windows系统,需要将本地的备份拷贝到该存储上。可以在存储服务器上安装ftp、http等等来上传,这也是一种解决办法。存储服务器已经将硬盘共享出去了,就不想在服务器上安装配置ftp等等,同时,我对windows服务器不熟。 那...
admin 11年前 (2014-03-10) 3448浏览 0评论
FastDFS是一个开源的轻量级分布式文件系统,由跟踪服务器(tracker server)、存储服务器(storage server)和客户端(client)三个部分组成,主要解决了海量数据存储问题,特别适合以中小文件(建议范围:4KB < ...
admin 11年前 (2014-01-09) 4352浏览 0评论
近在测试ext4的bigalloc特性,cluster为256K,放入了16个大文件,每个文件25GB。反馈我说碎片很多,我觉得很奇怪便问是怎么看出来碎片多的,他说是用fsck看的: #fsck.ext4 -f -y /dev/sdi1 e4fsck...
admin 12年前 (2013-05-27) 3139浏览 0评论
准备优化磁盘系统。通过noatime忽略写入读取文件的访问时间,同时取用ext3的写回缓存data=writeback。结果证实不能直接在/etc/fstab增加data=wrtebck的mount参数,否则会出现EXT3-fs: cannot ch...
admin 13年前 (2012-01-02) 3227浏览 0评论
第二天的主题就轻松一些也宽泛一些Intel的吴峰光介绍了writeback最近的改进方向。 吴峰光(intel)同学的讲座 以前的writeback是脏页到了一定的比例就开始,以后要改为曲线调节式的。...
admin 13年前 (2012-01-02) 5849浏览 0评论
最近看ext4代码,注意到了 punch hole (打洞)功能,就是可以把文件中间的一部分内容释放掉,但是剩余部分的文件偏移不变。于是我问马涛同学这个punch hole一般用在什么场合。马涛:可以用
admin 13年前 (2012-01-02) 3237浏览 0评论
几个月前朱照远同学向我提过一个epoll的疑似bug:1. 创建一个socket(sfd)并connect到某个server2. 创建 epoll_create(efd)3. 将socket的描述符sfd加入efd, 采用ET模式4. 调...
admin 14年前 (2011-05-30) 2937浏览 0评论
之前写过一个初步介绍Moosefs基本概念的文章,仅是简单测试之后,对mfs的一些理解和认识。最近在实际环境中部署了一套MooseFS系统,用于备份和其他之用,在这个过程中又遇到了些问题,于