帝国论坛 → 技术交流区 → 网络编程 → FreeBSD的磁盘Soft Updates 【本版专题贴子】

帝国备份王2008开源版发布 帝国CMS模板下载中心 测试：生成20万数据共用107分钟 《帝国下载系统》全面免费 站长工具 - dotool.cn 1G双线帝国空间+200M数据库=158 上海电信20人合租10G促销价580元 自定义系统模型使用教程

主题：FreeBSD的磁盘Soft Updates [加入收藏夹]

harbinbeer 用户头衔：进士 * 精华贴   ：0 发贴数   ：2647 经验值   ：5010 注册时间：2005-07-17	信息 搜索 好友 发送悄悄话 【开源第一波：帝国备份王2008开源版发布】   [第 1 楼]
	FreeBSD的磁盘Soft Updates 　　 有两种传统的方法来把文件系统的元数据 (meta-data) 写入磁盘。 (Meta-data更新是更新类似 inodes 或者目录这些没有内容的数据) 　　 从前，默认方法是同步更新这些元数据(meta-data)。如果一个目录改变了，系统在真正写到磁盘之前一直等待。文件数据缓存(文件内容)在这之后以非同步形式写入。这么做有利的一点是操作安全。如果更新时发生错误，元数据(meta-data) 一直处于完整状态。文件要不就被完整的创建要不根本就不创建。如果崩溃时找不到文件的数据块，fsck(8) 可以找到并且依靠把文件大小设置为 0 来修复文件系统。另外，这么做既清楚又简单。缺点是元数据(meta-data)更新很慢。例如 rm -r 命令，依次触及目录下的所有文件，但是每个目录的改变(删除一个文件)都要同步写入磁盘。 这包含它自己更新目录，inode 表和可能对文件分散的块的更新。 同样问题出现大的文件操作上(比如 tar -x)。 提升用户价值 带动行业趋势 捌号主机—专业BSD主机服务
	2006-07-30 22:23:19 已设置保密 顶部 回复 引用 报告 编辑 删除

harbinbeer 用户头衔：进士 * 精华贴   ：0 发贴数   ：2647 经验值   ：5010 注册时间：2005-07-17	信息 搜索 好友 发送悄悄话 【《帝国网站管理系统》零基础实例入门教程】   [第 2 楼]
	第二种方法是非同步元数据更新。这是 Linux/ext2fs 和 *BSD ufs 的 mount -o async 默认的方法。所有元数据更新也是通过缓存。也就是它们会混合在文件内容数据更新中。这个方法的优点是不需要等待每个元数据更新都写到磁盘上，所以所有引起元数据更新大的操作比同步方式更快。同样，这个方法也是清楚且简单的，所以代码中的漏洞风险很小。缺点是不能保证文件系统的状态一致性。如果更新大量元数据时失败 (例如掉电或者按了重启按钮)，文件系统会处在不可预知的状态。系统再启动时没有机会检查文件系统的状态；inode 表更新的时候可能文件的数据块已经写入磁盘了但是相关联的目录没有，却不能用 fsck 命令来清理(因为磁盘上没有所需要的信息)。如果文件系统修复后损坏了，唯一的选择是使用 newfs(8) 并且从备份中恢复它。 　　 这个问题通常的解决办法是使用 dirty region logging 或者 journaling 尽管它不是一贯的被使用并且有时候应用到其他的事务纪录中更好。这种方法元数据更新依然同步写入，但是只写到磁盘的一个小区域。过后他们将会被移动到正确的位置。因为纪录区很小，磁盘上接近的区域磁头不需要移动很长的距离，所以这些比写同步快一些。另外这个方法的复杂性有限，所以出现错误的机会也很少。缺点是元数据要写两次 (一次写到纪录区域，一次写到正确的区域)。正常情况下，悲观的性能可能会发生。从另一方面来讲，崩溃的时候所有未发生的元数据操作可以很快的在系统启动之后从记录中恢复过来。 提升用户价值 带动行业趋势 捌号主机—专业BSD主机服务
	2006-07-30 22:23:43 已设置保密 顶部 回复 引用 报告 编辑 删除

harbinbeer 用户头衔：进士 * 精华贴   ：0 发贴数   ：2647 经验值   ：5010 注册时间：2005-07-17	信息 搜索 好友 发送悄悄话 【开源第一波：帝国备份王2008开源版发布】   [第 3 楼]
	Kirk McKusick，伯克利 FFS 的开发者，用 Soft Updates 解决了这个问题：元数据更新保存在内存中并且按照排列的顺序写入到磁盘 (“有序的元数据更新”)。这样的结果是，在繁重的元数据操作中，如果先前的更新还在内存中没有别写进磁盘，后来的更新就会捕捉到。所以所有的目录操作在写进磁盘的时候首先在内存中执行 (数据块按照它们的位置来排列，所以它们不会在元数据前被写入)。如果系统崩溃了这将导致一个固定的 “日志回朔”：所有不知如何写入磁盘的操作都像没有发生过一样。文件系统的一致性保持在 30 到 60 秒之前。它保证了所有正在使用的资源被标记例如块和 inodes。崩溃之后，唯一的资源分配错误是一个实际是“空闲”的资源的资源被标记为“使用”。 fsck(8) 可以认出这种情况并且释放不再使用的资源。它对于忽略崩溃后用 mount -f 强制挂上的文件系统的错误状态是安全的。 为了释放可能没有使用的资源，fsck(8) 需要在过后的时间运行。一个主意是用 后台 fsck：系统启动的时候只有一个文件系统的 快照 被记录下来。fsck 可以在过后运行。所有文件系统可以在“有错误”的时候被挂接，所以系统可以在多用户模式下启动。接着，后台 fsck 可以在所有文件系统需要的时候启动来释放可能没有使用的资源。 (尽管这样，不用 Soft Updates 的文件系统依然需要通常的 fsck。) 　　 它的优点是元数据操作几乎跟非同步一样快 (也就是比需要两次元数据写操作的 logging 更快)。缺点是代码的复杂性(意味着对于丢失用户敏感数据有更多的风险) 和高的内存使用量。另外它有些特点需要知道。崩溃之后，文件系统状态会“落后”一些。同步的方法用 fsck 后在一些地方可能产生一些零字节的文件， 这些文件在用 Soft Updates 文件系统之后不会存在，因为元数据和文件内容根本没有写进磁盘(可能发生在运行 rm 之后)。这可能在文件系统上安装大量数据时候引发问题，没有足够的剩余空间来两次存储所有文件。 提升用户价值 带动行业趋势 捌号主机—专业BSD主机服务
	2006-07-30 22:24:08 已设置保密 顶部 回复 引用 报告 编辑 删除

wm_chief 用户头衔：管理员 精华贴   ：21 发贴数   ：47863 经验值   ：109327 注册时间：2002-10-30	信息 搜索 好友 发送悄悄话 【《帝国网站管理系统》零基础实例入门教程】   [第 4 楼]
	顶.. [零基础入门教程] [模板制作教程] [采集使用教程]
	2006-07-31 08:34:36 已设置保密 顶部 回复 引用 报告 编辑 删除

快速回复
内容 表情	使用EBB代码 使用smile代码 显示签名 自动分析url 自动分析img
	【进入高级模式】   (按 Ctrl+Enter 直接提交)

顶部  加入收藏夹

关于帝国 | 广告服务 | 联系我们 | 法律声明 | 隐私条款 | 许可协议

Powered by： EBB Version 2.2.1