1、目 录综 合 评 论云 计 算 及 其 关 键 技 术 邓 倩 妮 陈 全 02未 来 需 要 云 计 算 姚 继 锋 07伯克利云计算白皮书(节选)卢大勇等译 1 0高 性 能 计 算 技 术并 行 图 形 绘 制 技 术 综 述 韩 伟 杰 李 晓 梅 张 文 16大规模数据密集型系统中的去重查询优化 宋怀明 安明远等 21基 于 共 享 内 存 的 机 群 服 务 检 查 点 机 制 研 究 梁 毅 王 磊 等 28一种改进的 调度策略研究 刘 胜 飞 张 云 泉 36浅 析 软 件 编 程 杜 晓 梅 肖 华 云 43高性能计算应用 年上海超级计算中心基础科学用户研究进展 王涛 编 译
2、 46流 固 耦 合 问 题 并 行 求 解 的 研 究 李 政 金 先 龙 等 50交 流 之 窗主 机 系 统 信 息 安 全 的 分 析 及 研 究 薛 刚 54科 学 计 算 应 用 软 件 系 列 介 绍 介 绍 及 其 在“魔 方 ”上 的 性 能 测 试 和 比 较 寇大治 刘源 王奉超 59工 程 计 算 应 用 软 件 系 列 介 绍火灾动态模拟器软件介绍 李 萍 63要 闻 集 锦 有 望 实 现 远 距 离 传 输 肖 湄 09 计 划 用 制 造 千 万 亿 次 超 级 计 算 机 李 苏 27 国家实验室将部署蓝色基因超级计算机 卢大勇 66年高性能计算的五大趋势 金
3、 溪 671表 云计算的应用领域2 高性能计算发展与应用 年第一期 总第二十六期云 计 算 及 其 关 键 技 术 邓 倩 妮 上海交通大学计算机系 上海 陈 全 上海交通大学计算机系 上海 摘 要 :论文对新兴的计算模型云计算进行了简要的介绍。论文给出了云计算的定义,介绍了云 计 算 的 发 展 背 景 和 应 用 场 景 , 分 析 了 云 计 算 和 网 格 计 算 以 及 传 统 超 级 计 算 的 区 别 , 总 结 了 云 计算 的 关 键 技 术 : 存 储 技 术 、 数 据 管 理 技 术 以 及 编 程 模 型 。关键词:云计算; 数据存储; 数据管理; 编程模型 云计算产
4、生背景及定义 云计算的定义云计算( )是一种新近提出的计算模 式 。 维 基 百 科 给 云 计 算 下 的 定 义 : 云 计 算 将 相 关的 能 力 以 服 务 的 方 式 提 供 给 用 户 , 允 许 用 户 在 不 了解 提 供 服 务 的 技 术 、 没 有 相 关 知 识 以 及 设 备 操 作 能力的情况下,通过获取需要服务 。中 国 云 计 算 网 将 云 定 义 为 : 云 计 算 是 分 布 式计算( ) 、并行计算( )和网格计算( )的发展,或 者 说 是 这 些 科 学 概 念 的 商 业 实 现 。 的分析师 定 义 云为:“云计算是一个具备高度扩展性和管理性并
5、能够胜任终端用户应用软件计算基础架构的系统池”。虽 然 目 前 云 计 算 没 有 统 一 的 定 义 , 结 合 上 述 定义 , 可 以 总 结 出 云 计 算 的 一 些 本 质 特 征 , 即 分 布 式计 算 和 存 储 特 性 , 高 扩 展 性 , 用 户 友 好 性 , 良 好 的管 理 性 。 云 计 算 技 术 具 有 以 下 特 点 :() 云 计 算 系 统 提 供 的 是 服 务 。 服 务 的 实 现 机 制对 用 户 透 明 , 用 户 无 需 了 解 云 计 算 的 具 体 机 制 , 就可 以 获 得 需 要 的 服 务 。() 用 冗 余 方 式 提 供 可
6、 靠 性 。 云 计 算 系 统 由 大 量商 用 计 算 机 组 成 机 群 向 用 户 提 供 数 据 处 理 服 务 。 随着 计 算 机 数 量 的 增 加 , 系 统 出 现 错 误 的 概 率 大 大 增加 。 在 没 有 专 用 的 硬 件 可 靠 性 部 件 的 支 持 下 , 采 用软 件 的 方 式 , 即 数 据 冗 余 和 分 布 式 存 储 来 保 证 数 据的 可 靠 性 。() 高 可 用 性 。 通 过 集 成 海 量 存 储 和 高 性 能 的 计算 能 力 , 云 能 提 供 一 定 满 意 度 的 服 务 质 量 。 云 计 算系 统 可 以 自 动 检
7、测 失 效 节 点 , 并 将 失 效 节 点 排 除 ,不 影 响 系 统 的 正 常 运 行 。() 高 层 次 的 编 程 模 型 。 云 计 算 系 统 提 供 高 级 别的 编 程 模 型 。 用 户 通 过 简 单 学 习 , 就 可 以 编 写 自 己的 云 计 算 程 序 , 在 “云 ”系 统 上 执 行 , 满 足 自 己 的需求。现在云计算系统主要采用模型。() 经 济 性 。 组 建 一 个 采 用 大 量 的 商 业 机 组 成 的机 群 相 对 于 同 样 性 能 的 超 级 计 算 机 花 费 的 资 金 要 少很 多 。 云计算的应用场景云 计 算 有 着 广
8、泛 的 应 用 前 景 。 如 表 所 示 :云 计 算 在 天 文 学 、 医 学 等 各 个 领 域 有 着 广 泛 的应 用 前 景 。领 域 应 用 场 景地 震 监 测海 洋 信 息 监 控科 研天 文 信 息 计 算 处 理信息分析海 量 病 历 存 储 分 析医 学医 疗 影 像 处 理病 毒 库 存 储网 络 安 全垃 圾 邮 件 屏 蔽动 画 素 材 存 储 分 析高 仿 真 动 画 制 作图 形 和图 像 处 理海 量 图 片 检 索服务在 线 实 时 翻 译互 联 网网 络 检 索 服 务综 合 评 论 3趋 势 科 技 和 瑞 星 等 安 全 厂 商 纷 纷 提 出 了
9、 “安 全云”计划。如今,每天有万多种新的病毒和木马产生 , 传 统 的 通 过 更 新 用 户 病 毒 库 的 防 毒 模 式 , 受 到了 严 峻 的 挑 战 , 用 户 端 的 病 毒 库 将 过 于 庞 大 。 趋 势科技和瑞星的 “安全云 ”将病毒资料库放在 “云 ”端 , 与 客 户 端 通 过 网 络 相 连 , 当 “云 ”在 网 络 上 发现 不 安 全 链 接 时 , 可 以 直 接 形 成 判 断 , 阻 止 其 进 入用 户 机 器 , 从 根 本 上 保 护 机 器 的 安 全 。据 趋 势 科 技 大 中 华 区 执 行 总 裁 张 伟 钦 介 绍 , 趋势 科 技
10、 已 投 入 了 大 量 资 金 , 在 全 球 数 个 地 方 建 设 了新 型 数 据 中 心 。 同 时 , 趋 势 科 技 还 花 费 了 多 万美 元 , 租 借 了 多 台 服 务 器 , 构 建 了 一 个 服 务 遍及 全 球 的 “安 全 云 ”。 目 前 趋 势 科 技 已 将 公 司 中 低端 的 部 分 产 品 线 放 到 “云 安 全 ”计 划 中 , 而 高 端 的大 部 分 产 品 线 , 仍 在 准 备 过 程 中 。谷歌提供的、 、 等 服 务 都 基 于 其 云 计 算 服 务 器 运 行 。 谷 歌 基 于 云 计算 提 供 的 翻 译 服 务 具 有 现
11、 今 最 好 的 性 能 。 对 互 联 网和 美 国 人 生 活 的 一 项 研 究 显 示 , 大 约 的 在 线 用 户使 用 以 上 “云 计 算 ”服 务 。 云计算的发展目前,亚马逊,微软,谷歌,等公司纷 纷 提 出 了 “云 计 划 ”。 例 如 亚 马 逊 的 ( ) 、 和 谷 歌 联 合 进 行 的 “蓝 云 ”计 划等 。 这 对 云 计 算 的 商 业 价 值 给 予 了 巨 大 的 肯 定 。 同时 学 术 界 也 纷 纷 对 云 计 算 进 行 深 层 次 的 研 究 。 例 如谷 歌 同 华 盛 顿 大 学 以 及 清 华 大 学 合 作 , 启 动 云 计 算学
12、术合作计划( ) ,推 动 云 计 算 的 普 及 , 加 紧 对 云 计 算 的 研 究 。 美 国卡 耐 基 梅 陇 大 学 等 提 出 对 数 据 密 集 型 的 超 级 计 算(: )进行研究,本 质 上 也 是 对 云 计 算 相 关 技 术 开 展 研 究 。 的 调 查 显 示 , 未 来 五 年 云 计 算 服 务 将 急 速 增长,预期年市场规模可达亿美元。目前企业导 入 云 计 算 已 逐 渐 普 及 , 并 且 有 逐 年 成 长 趋 势 。 估计 在 年 , 企 业 投 入 在 云 计 算 服 务 的 支 出 将 占 整体成本的,甚至在年提高至总支出的三分 之 一 。由
13、 此 可 见 , 在 各 大 公 司 以 及 学 术 界 的 共 同 推 动下 , 云 计 算 技 术 将 会 持 续 发 展 。 云计算与其他超级计算的区别 云计算与网格计算的区别 将 网 格 定 义 为 : 支 持 在 动 态 变 化 的 分布式虚拟组织( )间共享资源,协 同 解 决 问 题 的 系 统 。 所 谓 虚 拟 组 织 就 是 一 些 个人 、 组 织 或 资 源 的 动 态 组 合 。图 “云 ”系 统 的 结 构图 网格的结构图和图分别为云及网格的结构示意图。图 显示 , 云 计 算 是 一 种 生 产 者 消 费 者 模 型 , 云 计 算 系统 采 用 以 太 网 等
14、 快 速 网 络 将 若 干 机 群 连 接 在 一 起 ,用 户 通 过 因 特 网 获 取 云 计 算 系 统 提 供 的 各 种 数 据 处理 服 务 。 图 显 示 , 网 格 系 统 是 一 种 资 源 共 享 模 型 ,资 源 提 供 者 亦 可 以 成 为 资 源 消 费 者 , 网 格 侧 重 研 究的 是 如 何 将 分 散 的 资 源 组 合 成 动 态 虚 拟 组 织 。云 计 算 和 网 格 计 算 的 一 个 重 要 区 别 在 于 资 源 调度 模 式 。 云 计 算 采 用 机 群 来 存 储 和 管 理 数 据 资 源 ,运 行 的 任 务 以 数 据 为 中
15、心 。 即 调 度 计 算 任 务 到 数 据存 储 节 点 运 行 。 而 网 格 计 算 , 则 以 计 算 为 中 心 。 计算 资 源 和 存 储 资 源 分 布 在 因 特 网 的 各 个 角 落 , 不 强调 任 务 所 需 的 计 算 和 存 储 资 源 同 处 一 地 。 由 于 网 络带 宽 的 限 制 , 网 格 计 算 中 的 数 据 传 输 时 间 占 总 运 行时 间 的 很 大 一 部 分 。 云计算系统与传统超级计算机的区别超 级 计 算 机 拥 有 强 大 的 处 理 能 力 , 特 别 是 计 算能 力 。 年 月 日 , 最 新 一 期 的 榜 单 发布。冠
16、军 “ ”是为美国 国家 实 验 室 建 造 的 计 算 机 系 统 。 它 的 运 算 速 度 达 到 了( ) 和 开 发 团 队 开4 高性能计算发展与应用 年第一期 总第二十六期 。超级计算机包含个 处理器以及个分布于刀片服务器上的 芯片刀片服务器安装在个 机架上。 拥 有 的 内 存 , 外 存使用容量的存储,外存通过秒以太 网 进 行 连 接 。 耗 资 超 过 亿 美 元 。 对 超 级 计 算 机 的 排 名 方 式 可 以 看 出 ,传 统 的 超 级 计 算 机 注 重 运 算 速 度 和 任 务 的 吞 吐 率 。以 运 算 速 度 为 核 心 进 行 计 算 机 的 研
17、 究 和 开 发 。 而 云计 算 则 以 数 据 为 中 心 , 同 时 兼 顾 系 统 的 运 算 速 度 。传 统 的 超 级 计 算 机 耗 资 巨 大 , 远 超 云 计 算 系 统 。 例如,趋势科技花费多万美元租用多台服务器 , 构 建 自 身 的 “安 全 云 ”系 统 。 云计算的关键技术云 计 算 是 一 种 新 型 的 超 级 计 算 方 式 , 以 数 据 为中 列 存 储 的 数 据 管 理 模 式 。 将 表 按 列 划 分 后 存 储 。云计算的数据管理技术最著名的是谷歌的 数 据 管 理 技 术 , 同 时 开 发 团 队 正 在开发类似的开源数据管理模块。由
18、于 采 用 列 存 储 的 方 式 管 理 数 据 , 如 何 提 高 数据 的 更 新 速 率 以 及 进 一 步 提 高 随 机 读 速 率 是 未 来 的数 据 管 理 技 术 必 须 解 决 的 问 题 。 编程模式为 了 使 用 户 能 更 轻 松 的 享 受 云 计 算 带 来 的 服务 , 让 用 户 能 利 用 该 编 程 模 型 编 写 简 单 的 程 序 来实 现 特 定 的 目 的 , 云 计 算 上 的 编 程 模 型 必 须 十 分 简单 。 必 须 保 证 后 台 复 杂 的 并 行 执 行 和 任 务 调 度 向 用户 和 编 程 人 员 透 明 。云 计 算 采
19、 用 类 似 的 编 程 模 式 。 现在 所 有 厂 商 提 出 的 “云 ”计 划 中 采 用 的 编 程 模 型 ,中 心 , 是 一 种 数 据 密 集 型 的 超 级 计算 。 在 数 据 存 都是基于的思想开发的编程工具。储 、 数 据 管 理 、 编 程 模 式 等 方 面 具 有 自 身 独 特 的 技术 。 数据存储技术不仅仅是一种编程模型,同时也是一种高效的任务调度模型。这种编程模型并不仅适用于云计算,在多核和多处理器、 、 以 及 异 构 机 群 上 同 样 有 良 好 的 性 能 ,为 保 证 高 可 用 、 高 可 靠 和 经 济 性 , 云 计 算 采 用 。分 布
20、 式 存 储 的 方 式 来 存 储 数 据 , 采 用 冗 余 存 储 的 方式 来 保 证 存 储 数 据 的 可 靠 性 , 即 为 同 一 份 数 据 存 储多 个 副 本 。另 外 , 云 计 算 系 统 需 要 同 时 满 足 大 量 用 户 的 需求 , 并 行 地 为 大 量 用 户 提 供 服 务 。 因 此 , 云 计 算 的数 据 存 储 技 术 必 须 具 有 高 吞 吐 率 和 高 传 输 率 的 特 点 。云 计 算 的 数 据 存 储 技 术 主 要 有 谷 歌 的 非 开 源 的发的的开源实现( ) 。 大 部 分 厂 商 , 包 括 、 的“云 ”计 划 采
21、用 的 都 是 的 数 据 存 储 技 术 。未 来 的 发 展 将 集 中 在 超 大 规 模 的 数 据 存 储 、 数据 加 密 和 安 全 性 保 证 、 以 及 继 续 提 高 速 率 等 方面 。 数据管理技术云 计 算 系 统 对 大 数 据 集 进 行 处 理 、 分 析 向 用户提 供 高 效 的 服 务 。 因 此 , 数 据 管 理 技 术 必 须 能 够高效 的 管 理 大 数 据 集 。 其 次 , 如 何 在 规 模 巨 大 的 数据中 找 到 特 定 的 数 据 , 也 是 云 计 算 数 据 管 理 技 术 所 必须 解 决 的 问 题 。云 计 算 的 特 点
22、 是 对 海 量 的 数 据 存 储 、 读 取 后进 行 大 量 的 分 析 , 数 据 的 读 操 作 频 率 远 大 于 数 据 的更 新 频 率 , 云 中 的 数 据 管 理 是 一 种 读 优 化 的 数 据 管理 。 因 此 , 云 系 统 的 数 据 管 理 往 往 采 用 数 据 库 领域 传 统 分 布 式 文 件 系 统组 件 失 败 管 理 不作为处理 作为处理文 件 大 小 少 量 大 文 件 大 量 小 文 件数 据 写 方 式 在 文 件 末 尾 附 加 数 据 修 改 现 存 数 据数 据 流 和 控 制 流 数 据 流 和 控 制 流 分 开 数 据 流 和
23、控 制 流 结 合表 与传统分布式文件系统的区别该 编 程 模 式 仅 适 用 于 编 写 任 务 内 部 松 耦 合 、 能够 高 度 并 行 化 的 程 序 。 如 何 改 进 该 编 程 模 式 , 使 程序 员 得 能 够 轻 松 的 编 写 紧 耦 合 的 程 序 , 运 行 时 能 高效的调度和执行任务,是编程模型未来的 发 展 方 向 。 数据存储技术为 了 满 足 云 计 算 的 分 布 式 存 储 方 式 、 同 时 保 证数 据 可 靠 性 和 高 吞 吐 率 以 及 高 传 输 率 的 需 求 。 目 前各厂商多采用或的数据存储技术。以 为 例 。 是 一 个 管 理 大
24、 型 分 布 式 数 据 密集 型 计 算 的 可 扩 展 的 分 布 式 文 件 系 统 。 它 使 用 廉 价的 商 用 硬 件 搭 建 系 统 并 向 大 量 用 户 提 供 容 错 的 高 性能 的 服 务 。 和 普 通 的 分 布 式 文 件 系 统 有 以 下 区 别 , 如 表所示:系统由一个和大量块服务器构成。 存 放 文 件 系 统 的 所 有 的 元 数 据 , 包 括 名 字 空综 合 评 论 5间 、 存 取 控 制 、 文 件 分 块 信 息 、 文 件 块 的 位 置 信 息等。中的文件切分为的块进行存储。在 文 件 系 统 中 , 采 用 冗 余 存 储 的 方
25、 式 来 保 证数 据 的 可 靠 性 。 每 份 数 据 在 系 统 中 保 存 个 以 上 的 备份 。 为 了 保 证 数 据 的 一 致 性 , 对 于 数 据 的 所 有 修 改需 要 在 所 有 的 备 份 上 进 行 , 并 用 版 本 号 的 方 式 来 确保 所 有 备 份 处 于 一 致 的 状 态 。客户端不通过 读 取 数 据 , 避 免 了 大 量 读 操作使成为系统瓶颈。客户端从获取目标数 据 块 的 位 置 信 息 后 , 直 接 和 块 服 务 器 交 互 进 行 读操 作 。 的 写 操 作 将 写 操 作 控 制 信 号 和 数 据 流 分 开 ,如图 所
26、示 :列 , 每 行 动 态 地 划 分 到 记 录 板 中 。 每 个 节 点 管 理 大约 个 记 录 板 。 时 间 戳 是 一 个 位 的 整 数 , 表 示 数据 的 不 同 版 本 。在执行时需要三个主要的组件: 链 接 到每 个 客 户 端 的 库 , 一 个 主 服 务 器 , 多 个 记 录 板 服 务器 。 主 服 务 器 用 于 分 配 记 录 板 到 记 录 板 服 务 器 以 及负 载 平 衡 , 垃 圾 回 收 等 。 记 录 板 服 务 器 用 于 直 接 管理 一 组 记 录 板 , 处 理 读 写 请 求 等 。为保证数据结构的高可扩展性,采用三级 的 层 次
27、 化 的 方 式 来 存 储 位 置 信 息 , 如 图 所 示 。其中第一级的 中包含 的位置, 包含所有 的位置信息,每个 包含许多 的位置信息。具体见 。图 写 控 制 信 号 和 写 数 据 流即 , 客 户 端 在 获 取 的 写 授 权 后 , 将 数 据 传输 给 所 有 的 数 据 副 本 , 在 所 有 的 数 据 副 本 都 收 到 修改 的 数 据 后 , 客 户 端 才 发 出 写 请 求 控 制 信 号 。 在 所有 的 数 据 副 本 更 新 完 数 据 后 , 由 主 副 本 向 客 户 端 发出写操作完成控制信号。具体请见 。 数据管理技术为 了 满 足 云 计
28、 算 的 大 规 模 数 据 集 管 理 , 高 效 的数据定位需求。谷歌采用的数据管理技术。在 各 大 厂 商 的 支 持 下 , 开 发 团 队 正 在 开 发 其开 源 版 本 。以为例。数据管理方式设计者 给出了如下定义: “是一种为了 管 理 结 构 化 数 据 而 设 计 的 分 布 式 存 储 系 统 , 这 些数 据 可 以 扩 展 到 非 常 大 的 规 模 , 例 如 在 数 千 台 商 用服务器上的达到()规模的数据。 ”对数据读操作进行优化,采用列存储的方式,提高数据读取效率。管理的数据的存储结构为: , : , : 。的基本元素是:行,列,记录板和时 间 戳 。 其
29、中 , 记 录 板 是 一 段 行 的 集 合 体 。中的数据项按照行关键字的字典序排图 中存储记录板位置信息的结构 编程模型技术当 前 各 厂 商 提 出 的 “云 ”计 划 的 编 程 工 具 均基于的编程模型。是一种处理 和 产 生 大 规 模 数 据 集 的 编 程 模 型 , 程 序 员 在 函数 中 指 定 对 各 分 块 数 据 的 处 理 过 程 , 在 函 数中 指 定 如 何 对 分 块 数 据 处 理 的 中 间 结 果 进 行 归 约 。用户只需要指定和函数来编写分布式的并行程序。当在机群上运行程序时,程序 员 不 需 要 关 心 如 何 将 输 入 的 数 据 分 块
30、 、 分 配 和 调度 , 同 时 系 统 还 将 处 理 机 群 内 节 点 失 败 以 及 节 点 见通信的管理等。图给出了一个程序的具体 执 行 过 程 。从图可以看出,执行一个程序需要五个步骤:输入文件、将文件分配给多个并行 地 执 行 、 写 中 间 文 件 ( 本 地 写 ) 、 多 个 同时运行、输出最终结果。本地写中间文件在减 少 了 对 网 络 带 宽 的 压 力 同 时 减 少 了 写 中 间 文 件 的 时间耗费。执行时,根据从获得的中间文件位置信息,将命令发送给中间文件所在节点执 行 , 进 一 步 减 少 了 传 送 中 间 文 件 对 带 宽 的 需 求 。6 高性
31、能计算发展与应用 年第一期 总第二十六期图 程序的具体执行过程模型具有很强的容错性,当节点出现错误时,只需要将该节点屏蔽在系统外 等 待 修 复 , 并 将 该 上 执 行 的 程 序 迁 移 到 其他上重新执行同时将该迁移信息通过发送给需要该节点处理结果的节点。使用 检 查 点 的 方 式 来 处 理 出 错 失 败 的 问 题 , 当 出 现 错 误 时 , 可 以 根 据 最 近 的 一 个 检 查 点 重新选择一个节点作为并由此检查点位置继续运行 。 结语综 上 所 述 , 云 计 算 是 一 种 新 型 的 计 算 模 式 。它 的 最 主 要 特 征 是 系 统 拥 有 大 规 模
32、 数 据 集 、 基 于 该数 据 集 , 向 用 户 提 供 服 务 。 它 使 用 大 量 的 普 通 商 用机 来 构 建 系 统 , 通 过 冗 余 存 储 的 方 式 确 保 整 个 系 统的 可 靠 性 和 可 用 性 。 与 传 统 超 级 计 算 机 在 底 层 编程 不 同 , 数 据 密 集 计 算 的 云 系 统 上 使 用 基 于 的 高 级 编 程 模 式 。 这 使 得 编 程 人 员 可 以 不 用考 虑 底 层 的 并 行 化 方 式 , 专 心 与 程 序 的 逻 辑 实 现 。普 通 用 户 经 过 简 单 的 学 习 , 可 以 编 写 出 满 足 自 身
33、 需要 的 简 单 程 序 。越 来 越 多 的 厂 商 提 出 了 自 己 的 “云 ”计 划 ,并 投 入 大 量 资 金 推 动 云 计 算 的 发 展 。 这 恰 恰 为 云 计算 提 供 了 良 好 的 发 展 机 遇 。 虽 然 现 在 的 云 计 算 并 不能 完 美 地 解 决 所 有 的 问 题 , 但 是 在 不 久 的 将 来 , 一定 会 有 越 来 越 多 的 云 计 算 系 统 投 入 实 用 , 云 计 算 系统 也 会 不 断 地 被 完 善 , 并 推 动 其 他 科 学 技 术 的 发 展 。参 考 文 献 : 维基百科: 中国云计算网。 :? , :, , ; ; , (): , , : , , : , , : , , , , , : , (): , , : , , , (): , :, , : , ; ; : ! : , , : , 综 合 评