1、-_1 引言1.1 目的通过对系统整体架构和技术规范的描述，为下一步大规模设计开发提供基础和规范。1.2 对象与范围项目管理人员，开发人员，测试人员。1.3 概述系统一期，以实现功能为主，效率性能为辅，但设计兼顾未来性能的扩展，以减少未来重构的工作量。webapp 按逻辑分为两层，第一层用户服务接入，第二层内部服务。第一层一期不分模块，以二级目录形式表示不同模块，第二层根据不同服务分模块，第一层和第二层之间使用 hessian 通信。第一层和第二层独立部署，第二层的不同模块也可以独立部署。下一期考虑第一层分模块的二级域名独立部署，并实现单点登录。web app 采用集群负载均衡，数据库采用负载
2、均衡和读写分离，以满足一定的性能需求。 文档描述了各层结构和模块使用的技术和框架。最后描述了开发的规范和用到的开发工具。文档只是描述了一期的架构，2 系统架构图一期系统架构如下-_用户浏览器W e b A P P ( b u l l )r m i 缓存同步负载均衡 ， 动静分离 （ n g i n x ）h t t p动态请求网络存储静态请求i后台管理系统（ h o u r s e ）管理员浏览器h t t ph e s s i a n文件存取邮件服务器物流公司A 8 系统第三方网站短信平台银行 ， 第三方支付H e s s i a n H e s s i a nW e b A P P ( b
3、 u l l )W SS m t pa p i支付( l i on )物流( a n te l o pe )邮件( e a gl e )短信( p i ge o n )搜索( d o g)对外服务( c a me l )进销存( f o x)调用外部( m o us e )数据库读写分离 ， 负载均衡 （ A m o e b a ）J D B CJ D B CD B ( m a s t e r )D B（ s a l v e r ）D B（ s a l v e r ）D B（ s a l v e r ）D B（ s a l v e r ）O D B CR E P L I C A T I O N
4、-_3 层次和模块3.1 前端负载均衡nginx 是一个口碑很好的开源免费 WEB 服务器，国内很多大型网站都转选 nginx 平台，比如腾讯，豆瓣等。Nginx 可以实现动静分离和 web app 的负载均衡。3.1.1 动静分离动静分离可以很好得分担服务器的负载，有两种方式实现动静分离。1使用 2 级域名，配置专门的静态文件服务器。2利用 nginx 的 url 转发功能，把静态请求转发到静态服务器或在 nginx 本地处理，动态请求转发到应用服务器。我们目前部署上采用第二种方式，同时也实现第一种方式。系统可以配置动态服务器地址和静态服务器地址，在生成页面时获取这两个地址，对图片、js 脚
5、本、css 和静态页面使用静态配置生成 url，对 ajax 请求和动态页面使用动态服务器地址生成url。3.1.2 负载均衡nginx 可以配置 upstream 服务器组，实现组内的负载均衡。通过 ip_hash 的方式把动态请求转发到组内的某台服务器，同时保证客户端在 IP 不变的情况下一直访问同一台服务器，解决 session 保持问题。3.2 Web app网站前端，基于 j2ee，spring 框架开发。3.2.1 页面展示和控制系统有三种页面方式。1 动态同步请求，通过 velocity 模板生成页面，客户端刷新整个页面。2 ajax 异步请求。Ajax 异步请求又有三种形式：与
6、 velocity 模板结合返回 html 串；返回 json 格式；直接返回简单的字符串。3 模板生成的纯静态页面前台页面采用的框架和第三方技术有：-_1 jquery-core （事件处理， ajax 请求，页面刷新） 。2 Jqzoom （图片放大器）3 Jquery-validator（输入验证）3.2.2 权限安全控制使用 apache shiro 框架实现权限控制。Shiro 是一个强大、使用简单的权限安全框架。同时 Shiro 也能与 cas 单点登录整合，方便在下一期扩展多个应用模块。框架把权限系统分成 subject（当前用户） ，manager( 管理所有用户 )，real
7、ms( 权限数据)三层。支持基于实际资源和基于角色的权限校验，同时我们扩展 shiro 的 UsernamePasswordToken，Realm 实现基于验证码和数据库用户密码的用户登录验证。在过滤器层，我们暂时只使用 shiro 的 3 种类型过滤器控制访问：1AnonymousFilter 匿名过滤器 任何人可以访问。2AuthenticatingFilter 认证过滤器 必须通过身份认真才能访问（跳转到登录页面） 。可以对当前 subject 直接调用方法完成判断是否登录，登录，注销等操作，方便对登录功能的扩展。3.2.3 控制器层采用 spring 基于注解的控制器，控制器支持 ve
8、locity 视图返回，ajax json 返回和ajax text 返回。3.2.4 数据验证使用和扩展 apache 的 common-validator。3.2.5 逻辑层采用 spring 基于注解的事务控制。3.2.6 数据持久层采用 ibatis 框架，基于 sqlmap 配置实现数据的读写，sqlmap 配置可以控制底层 sql-_语句，便于数据库的调优。3.2.7 缓存的处理使用缓存可以降低与数据库的交互次数，极大提高系统性能。我们采用 ehcache 缓存框架。用到两种缓存方式：1 页面缓存：直接在过滤器层对页面进行缓存处理，在过滤器层就可以返回缓存的页面，不用转到控制器去处
9、理。对于页面比较复杂，调用业务逻辑比较多的页面，采用页面缓存效果很好，比如首页。2 基于注解的方法缓存，可以对方法的返回值缓存，存入的参数可以组成 key。可以在逻辑层使用缓存，也可以在持久层试用。对于请求简单，访问量大，但修改频率比较低的数据进行缓存可以达到很好的效果。比如商品分类，系统数据字典，地区等数据。Ehcache 支持分布式缓存，ehcache 支持服务器之间通过 rmi 调用保持所有服务器之间缓存同步。缓存的两种过期机制：1 定时过期，直接通过 ehcache 的配置确定缓存过期频率。2 主动通知，管理员在后台系统进行某些操作后，通过 hessian 远程调用通知应用服务器缓存过
10、期。只需通知一台应用服务器，应用服务器之间通过 ehcache自带分布式缓存复制方式同步缓存。后台管理系统可以提供刷新缓存功能，管理员在后台管理系统主动刷新缓存。3.2.8 去其他模块之间的通信通过 hessian 远程调用框架，实现与其他模块功能之间的通信。Hessian 是一个基于 http 的二进制远程过程调用框架，比 webservice 更高效。与 Spring框架很好结合，开发简单。3.3 后台管理系统管理员用来维护网站的系统。基于 j2ee spring 框架。与网站前台使用到的技术差不多，现只介绍不同点：-_3.3.1 页面的展示大部分请求采用页面刷新的机制。头部，中部左侧菜单
11、和底部固定不变。中部右侧 iframe 为主操作区，每次操作刷新页面。商品描述的编辑需要使用到富文本编辑器，我们采用开源的 TinyMCE，TinyMCE 在国内应用比较广泛。3.3.2 缓存机制后台系统访问不是很频繁，同事管理员需要的是实时的数据，所以后台管理系统不对数据进行缓存。3.3.3 权限管理采用 sping security 框架进行权限的控制，基于用户、角色和资源的授权机制。3.4 支付模块：支付模块主要功能是订单的管理，与银行等支付系统的交互。基于 j2ee spring 框架。采用 spring mvc 模式。3.4.1 与银行和其他支付系统的交互需要提供一个 Url 地址，
12、供银行在用户完成支付后回调，通知系统已经支付成功。3.4.2 与内部模块之间的通信主要来自网站前端的调用。基于 hessian 机制。-_3.5 物流模块支付模块目前主要功能是调用物流公司的接口跟踪物流状态，随着系统的不断发展，在拥有自己的物流后，可能发展成一个庞大的系统。基于 j2ee spring 框架。采用spring mvc 模式。基于 hessian 机制对外提供远程效用服务。3.6 邮件模块邮件模块主要用来向客户发送邮件。基于 j2ee spring 框架。采用 spring mvc 模式。3.6.1 邮件发送使用 java mail 包发送邮件，支持以固定模板发送邮件。3.6.2
13、 定时发送使用 spring+quartz 框架实现定时任务发送邮件。3.6.3 与内部模块之间的通信为网站前端和后台管理系统提供远程调用服务。基于 hessian 机制。3.7 短信模块短信模块主要用来向客户发送短信。基于 j2ee spring 框架。采用 spring mvc 模式。3.7.1 邮件发送调用短信设备 api 发送短信，支持以固定模板发送短信。-_3.7.2 定时发送使用 spring+quartz 框架实现定时任务发送短信。3.7.3 与内部模块之间的通信为网站前端和后台管理系统提供远程调用服务。基于 hessian 机制。3.8 进销存模块调用 A8 系统接口，实现库存
14、的管理。基于 j2ee spring 框架。采用 spring mvc 模式。3.8.1 Web service 调用采用 spring+xfile 框架调用 a8 系统 webservice。3.8.2 与内部模块之间的通信为网站前端和后台管理系统提供远程调用服务。基于 hessian 机制。3.9 搜索模块为网站提供搜索服务。包括商品检索和问答式搜索的问题检索。基于 j2ee spring 框架。采用 spring mvc 模式。3.9.1 检索框架我们使用国产开源 coreSeek 搜索引擎，基于俄国开源项目 Sphinx 研发并独立开发的搜索引擎。自带中文分词器 mmseg，有大量中文
15、文档。提供 JAVAAPI。索引建立效率高并且与业务无关。在国内有大量成功案例。-_3.9.2 与内部模块之间的通信为网站前端提供远程调用服务。基于 hessian 机制。3.10 第三方服务调用模块调用第三方合作服务商的接口。基于 j2ee spring 框架。采用 spring mvc 模式。3.10.1 Web service 调用采用 spring+xfile 框架调用第三方服务 webservice。3.10.2 与内部模块之间的通信为网站前端和后台管理系统提供远程调用服务。基于 hessian 机制。3.11 对外服务接口对外部系统提供 webservice 接口服务3.11.1
16、Web service 服务采用 spring+xfile 框架对外提供 webservice 服务。3.11.2 与内部模块之间的通信调用内部其他模块的服务。基于 hessian 机制。3.12 数据库使用 mysql5.5 数据库存储数据，并使用读写分离机制提高数据库性能。-_3.12.1数据库读写分离我们使用开源的 mysql 代理 Amoeba 实现数据库的读写分离，把写请求发送到主服务器，读请求发送到从服务器，主从之间通过 mysql 自带的复 制 机 制 实 现 数 据 的 同 步 。3.12.2数据库负载均衡Amoeba 支持轮询和权重两种负载均衡机制，我们使用权重负载机制实现读
17、服务器的负载均衡。3.12.3数据库表引擎的选择主服务器必须使用 innodb 支持事务的存储引擎，行级锁表。而从服务器可以考虑使用myisam 引擎，不支持事务，表级锁表，具有更高的读写效率，但不支持外键。3.12.4主从数据库的差异优化主服务器只需要建立唯一索引和外键约束，其它针对对查询优化的索引可以不建立，这要可以提高主服务器的性能。从服务器字段使用 char 而不用 varchar，没有 varchar, text, blob 字段的表是静态表，反之是动态表，静态表的检索效率要比动态表好若干倍。4 工程命名工程以动物命名，结合了各种动物特征与我们各工程的职责：公共接口工具 magpie（喜鹊） 网站前台服务 bull（公牛）物流 cheetah （猎豹）支付 lion （狮子）进销存接口 fox（狐狸）搜索 dog （狗）邮件 eagle （鹰）短信 pigeon （鸽子）后台管理 horse(马)调用第三方合作接口 mouse(老鼠)对外服务接口 camel(骆驼)
