1、 包头社保系统问题全面诊断报告工程师：赵欣报告生成日期: 2010-4-8Note:Note:Note:Note: To add additional approval lines, Press Tab from the last cell in the table above.Note: You can delete any elements of this cover page that you do not need for your document. For example, Copy Number is only required if this is a controlled d
2、ocument and you need to track each copy that you distribute.一 系统整体架构描述：应用服务器S1存储阵列包头社保系统Oracle 包头社保数据中心包头社保中间件应用服务器系统SAN光纤交换机应用服务器S2包头社保数据中心主要有个主要的逻辑子系统组成，分别是：中间件应用集群服务器子系统，数据库集群子系统，存储子系统。这个子系统的功能及实施配置情况如下：（） 中间件应用集群服务器子系统：由两台组成应用集群，应用服务器为，其中在应用服务器和上分别同时部署运行医保结算系统和中心端业务系统，该子系统的主要功能是提供应用业务系统的运行环境，支撑客
3、户端使用业务系统。（） 数据库集群子系统：由两台IBM P570组成Oracle数据库RAC集群，数据库版本为“Oracle Database 10g Enterprise Edition Release 10.2.0.1.0 - 64bi”，该子系统的主要功能是提供业务数据的7*24的操作与管理以及保证业务数据安全。（） 存储子系统：由IBM DS-8000存储设备组成，主要功能是提供数据的存储以及高效的数据读写。二 中间件应用集群服务器子系统问题排查： （1）问题分析： 影响中间件服务器性能参数：参数名称原先设置分析结果JVM heap Size 1G满足应用需要，没有问题数据库连接池初始
4、连接数1太低，不满足应用需要数据库连接池最大连接数15太低，不满足应用需要数据库连接池连接增长数1太低，不满足应用需要 根据以上对影响中间件服务器性能参数的分析，可以看出JAVA虚拟机内存参数配置（JVM heap Size）没有问题，并且可以满足应用需要；数据库连接池相关参数的配置太小，不满实际应用需要，建议要根据实际情况进行调整。（2）问题解决方案： 通过分析实际应用情况以及业务高峰期的并发用户数，对数据库连接池参数作出了如下调整： 数据库连接池初始连接数调整为：50 数据库连接池最大连接数调整为：100 数据库连接池连接增长数调整为：5三 数据库集群子系统问题排查： （1）内存使用问题分
5、析与排查： 基本内存使用参数配置：参数名称参数作用参数值分析结果sga_target决定系统全局区SGA的大小，由于大部分操作都要在SGA中完成，所以该参数对数据库的性能起到决定性的作用。5G略显小sga_max_size决定SGA最大可以设置为多少5G略显小pga_aggregate_target决定用户全局区PGA的大小，该参数决定是否用户的大量计算可在内存中完成，因此该参数对数据库性能也起到非常关键的作用。1G可以满足需要，建议再调大一些 基本内存使用情况指标：指标项检查该指标所依据的脚本命令检查结果分析结果建议操作Data Buffer Cache命中率select 1 - (phy.
6、VALUE - lob.VALUE - dir.VALUE) / ses.VALUE Buffer Cache Hit Ratio from v$sysstat ses, v$sysstat lob, v$sysstat dir, v$sysstat phy where ses.NAME = session logical reads and dir.NAME = physical reads direct and lob.NAME = physical reads direct (lob) and phy.NAME = physical reads;98%以上基本满足要求，理想状态应该达到9
7、9%以上。主要的原因可能是由于SGA大小略显小的缘故。由系统集成人员适当调整SGA大小。调整时要参考最大可用内存数，建议该参数值应该在8G以上。SharePool中liberary cache命中率SELECT SUM(PINHITS - RELOADS) / SUM(PINS) HIT RADIO, SUM(RELOADS) / SUM(PINS) RELOAD PERCENT FROM V$LIBRARYCACHE;98%以上满足要求，不过重载率为0.26%略显高，可能会影响系统SQL语句软解析度系统SQL语句软解析度select (t1.value - t2.value) / t1.va
8、lue) * 100 from (select value from v$sysstat where name like parse% and name in (parse count (total) t1, (select value from v$sysstat where name like parse% and name in (parse count (hard) t2;93%过低，作为一个具有高并发访问量的联机在线事务系统来说，SQL语句 的软解析度应该在98%以上，最低不能低于97%。建议排查频繁被使用功能 的程序代码，看一下是否合理使用了绑定变量。查询PGA工作状态信息sele
9、ct name profile, cnt, decode(total, 0, 0, round(cnt * 100 / total) percentage from (select name, value cnt, (sum(value) over() total from v$sysstat where name like workarea exec%);100%工作于optimal状态满足要求查看内存与硬盘的排序比例select d.VALUE Disk, m.VALUE Mem, (d.VALUE / m.VALUE) Ratio from v$sysstat m, v$sysstat
10、d where m.NAME = sorts (memory) and d.name = sorts (disk);基本全部属于内存排序满足要求（2）I/O问题分析与排查： 基本I/O参数配置：参数名称参数作用参数值分析结果db_file_multiblock_read_count控制数据库多块读取时一次最多读多少数据块16建议调整到32log_archive_max_processes控制归档进程最大数3满足要求db_writer_processes控制数据库写操作进程数量2根据当前数据库数据文件数量，该值显得略低，建议调高disk_asynch_io控制数据库是否使用异步I/Otrue满足
11、要求 数据库I/O使用指标：指标项检查该指标所依据的脚本命令检查结果分析结果建议操作检查数否存在磁盘I/O瓶颈select event, total_waits, time_waited ,total_timeouts,average_wait from v$system_event t where event in (log file switch completion, log file switch (checkpoint incomplete), log file switch (archiving needed), control file parallel write, log f
12、ile parallel write);系统中存在比较频繁的引发增量检查点的操作，致使CKPT进程过于繁忙，引发了一定I/O压力基本满足要求，但增量检查点引发过于频繁检查频繁使用的程序，是否存在频繁执行Commit的情况。Commit操作要尽量使用批量提交，本着以事务单元为提交的准则。（） 资源竞争问题分析与排查： 资源竞争相关基本参数设置参数名称参数作用参数值分析结果log_checkpoint_timeout指定距下一个检查点出现的最大时间间隔 (秒数)。1800满足要求Undo_retention用来指定要在数据库中保留的已提交的撤消信息的时间900满足要求Processes指定可同时连接到一个 Oracle Server 上的操作系统用户进程的最大数量1000满足要求Open_cursors指定一个会话一次可以打开的游标 (环境区域) 的最大数量, 并且限制 PL/SQL 使用的 PL/SQL 游标高速缓存的大小, 以避免用户再次执行语句时重新进行语法分析。3000满足要求Dml_locks所有用户获取的表锁的最大数量4860满足要求数据库事务锁问题：指标项检查该指标
