比较每个文件系统上图片文件的访问性能

时间:2017-06-14 20:40:16    来源:未知    作者:www.sntuu.com
1概述
在图像服务器的产品线中,存储图片文件的十亿级,每个文件的大小在0.5k-100k之间,其中1K的文档数量低于50%,1-4K文件数量约为40%4K或以上10%以上,大量文件存储对文件系统的性能要求都非常高,特别是对于目前行业表现的图像服务进行研究。
 
由于在线闪存卡故障率非常高,所以寻找替代品,磁盘可以满足在线系统的需求吗?它是否符合未来的可扩展性(容量,文件数)?使用数据来更好地同步时间吗?
 
2有望解决问题
1,磁盘可以替换闪存卡吗?
目前发现1Tflash卡的故障率非常高,每周严重伤害数次,修复数据长时间,至少6小时。
2,测试jfs reiserfs xfs ext2文件系统在图片业务中的业务(读写)。
 
3测试方法和结果
3.1测试方法
1,模拟在线环境,压力测试设置具有相同在线环境的系统,提取全天7天的在线日志,使用压力工具(可以模拟所有数据),模拟在线环境进行压力测试(持续压力2小时以上)。
 
2,使用磁盘测试工具,设备性能测试
 
3,通过磁盘空间,inode节点号进行比较
 
4,通过在线数据同步,测试同步时间所需
 
3.2结果分析
1,使用磁盘可以取代闪存
 
从产品压力的模拟线上得出结论,使用HP机器使用jfs和ext2文件系统可以完全满足当前在线系统和下一个时间段的需求,具体如下:
 
 
 
注意:使用磁盘需要20分钟时间来填充缓存,在更大压力值为2000时对lighttpd充电。
 
2,图片服务目前网卡的瓶颈
 
在网络压力测试的模拟中,除了dell-reiserfs之外,所有文件系统都可以达到网卡峰值流量1G,随着时间延迟,平均价值会下降,但cpu会逐渐闲置,
 
3,在各种文件系统性能的图像服务业务测试中,以下结果
 
1)Flash上的ext2性能更突出
 
2)磁盘上jfs的性能更适合当前的在线业务
 
3)reiserfs空间占用更小,比其他文件系统节省空间60%-65%
以下与“
 
 
 
4,修改在线图片更新脚本可以减少10%的时间,
 
5,文件系统数据同步时间消耗完全不同,ext2在闪存卡中,jfs在磁盘的性能上非常好。
 
 
 
 
6,在磁盘上,HP机器小文件处理能力比dell更适合图片服务。

品牌 · 服务 · 影响力 — 老牌成都网站建设公司| 成都盛图网络| 新闻动态| 公司博客| 客服中心| 诚聘英才| 盛图团队| 联系盛图

  • 中国互联
    网协会
  • 网络110
    报警服务
  • 不良信息
    举报中心
  • 中国文明网
    传播文明
  • 互联网业
    自律同盟
  • 软件服务
    信誉品牌

Tel:028-69185520 028-86948309 Email:kf@sntuu.com Fax:028-86948309

(C)2016 成都盛图网络【成都盛图信息技术有限公司】 www.sntuu.com. 版权所有 严禁抄袭复制 信息产业部备案 蜀ICP备10015055号

成都网站建设公司【盛图网络】主营业务:成都网站建设成都网站制作成都网站设计等,成都网络公司优质服务商。