收單通系統
系統應急方案及處理流程手冊
目錄1 引言 3
1.1 編寫目的 3
1.2 故障級別 3
2 系統結構和特點 5
2.1 收單通系統的特點 5
2.1.1 實時性 5
2.1.2 併發性 5
2.1.3 7x24執行 5
2.2 系統體系結構 6
2.2.1 體系結構和資訊架構 6
2.2.2 系統ha配置 6
2.3 系統應用結構 7
3 應用故障應急處理流程 8
3.1 聯機交易異常 8
3.2 管理服務異常 8
3.3 二次清算交易異常 9
3.4 基礎服務異常 10
4 硬體故障應用處理流程 11
4.1 硬體故障範圍 11
5 資料庫和日誌處理 12
5.1 資料庫異常處理流程 12
6 jdk和weblogic處理 13
7 備機啟動流程 14
本文根據收單通系統的特點，綜合考慮軟體和硬體二大方面，闡述了大集中收單通系統的應急方案，供相關開發人員和系統執行維護人員參考。
說明：1、硬體故障和系統軟體故障，由系統執行部門進行硬體和系統軟體維護和除錯，應用系統進行重新安裝和相關的系統恢復工作；
2、應用軟體和應用支援軟體故障，由應用系統進行故障恢復工作。
收單通系統是重要的收單業務系統，對系統的實時性或者說是反應時間有較高要求。
由於刷卡消費習慣，造成收單業務在部分時間段具有較高的交易峰值。系統需要考慮併發交易對網路和應用系統的資源要求。
收單通系統必須支援7x24不間斷執行。
從體系結構來看，收單通系統主要涉及行內系統，與其直接相關的重要系統包括：ssb系統、網控器、ics系統等。
系統的網路結構比較複雜，對於網路的要求相對比較高；在系統應急方案中，系統互聯性的保障至關重要。
為了保證系統在突發情況下可以迅速恢復，在生產環境中，相關系統都進行了ha配置。
本系統採用冷備機制。在系統故障時，啟用冷備機即可。
根據業務邏輯，本系統可以分為以下四個服務組：
基礎服務組
管理服務組
聯機交易服務組
二次清算服務組
現象：交易監控中發現聯機交易有較多的不成功情況。
影響：聯機交易異常：
● 業務中斷，造成交易終止，部分情況下會出現錯帳
處理流程：
● 分行執行人員：
1、確定網路無異常；
2、確認與本系統相關其他系統是否異常；
3、在確認本系統異常情況下，重啟聯機交易服務組：執行命令
hishutdown –g pay;
hiboot –g pay 並確認系統正常啟動。
現象：分行或支行業務人員登陸收單通管理臺不能正常進行業務處理或者無法登入。
影響：業務人員無法正常進行業務處理
處理流程：
● 分行執行人員：
1、檢查系統網路，確認網路無故障；
2、檢視系統日誌，確認是否為管理服務問題；
3、如果為管理服務問題，則重啟管理服務組，執行命令：
hishutdown –g mng
hiboot –g mng 確認重啟成功。
4、重啟成功後，通知業務人員進行業務處理。
現象：由本系統發起的二次清算交易部分或完全不成功。
影響：商戶不能正常入賬
處理流程：
● 分行執行人員：
確定交易異常原因，並通過業務人員進行調賬。
現象：由於基礎服務原因，如資料庫，非同步訊息伺服器等，造成大部分交易不成功。在進行系統檢查後發現基礎服務異常。
影響：交易異常
處理流程：
● 分行執行人員：
重新啟動基礎服務組，執行hishutdown –g base, hiboot –g base。確認服務組重啟成功，並且交易正常。
硬體故障包括儲存系統、網絡卡等物理系統故障。在發生物理故障，並短期內無法處理時，應切換到備機。
在備機正常進行業務處理後，再來處理原主機系統的硬體故障。
資料庫的處理流程主要包括：
1、 檢查資料庫dbm程序是否正常，service埠是否開啟；如異常，用dbm使用者重新啟動，dbadmin stop / dbadmin start。
2、 檢查相應資料庫的db2agent程序是否正常，如異常，採用db instance使用者重新啟動，dbstop / dbstart。
3、 採用db2工具檢查表空間和日誌的磁碟空間，如空間不足，請擴大空間或備份，資料庫的備份策略和操作詳見《系統備份恢復方案》。
4、 採用快照，檢查資料庫是否存在deadlock，如存在查明原因，dbagent重新啟動。
在資料庫出現異常時，造成應用無法訪問，並短期沒得到解決情況下，應切換到備機系統。
在jdk和weblogic出現異常時，造成應用無法正常啟動，並短期沒得到解決情況下，應切換到備機系統。
備機啟動流程主要包括：
1、 斷開原主機的網路連線；
2、 修改備機的網路配置為原主機網路配置；
3、 啟動資料庫（用db2inst1使用者執行db2start）
4、 啟動應用系統（用ubsadm使用者在使用者根目錄下執行./
給排水系統應急處理作業方案
1.0 目的 為保證小區正常的供水與排水，特制訂如下事故應急處理措施。2.0 範圍 適用於給排水系統緊急事故的處理。3.0 職責 3.1 維修人員負責處理給排水系統各類緊急事故 3.2 管理處人員發現給排水系統故障應立即告知維修人員 4.0 作業內容 4.1 主裝置或主裝置電氣部分故障 4.1.1 ...
系統應急預案及快速恢復方案
為了建立健全我局資訊系統應急工作機制，提高應對突發事件的組織指揮能力和應急處置能力，滿足突發情況下資訊系統保障和資訊系統恢復工作需要，保障資訊系統穩定執行，保護納稅人合法權益，維護地稅系統良好社會形象，確保相關稅收業務有序進行，按照省 市地稅局有關要求，特制訂本預案。1 影響資訊系統安全的突發事件 ...
電力系統巡檢及應急維修方案
需要注意的是動觸頭的壓力簧片容易磨損斷裂，在檢查觸頭時發現簧片有疲勞變形 裂紋時及時更換。交流接觸器維修保養 a 清除滅弧罩內的碳化物和金屬顆粒 b 清除觸頭表面及四周的汙物 但不要修銼觸頭 燒蝕嚴重不能正常工作的觸頭應更換 c 清潔鐵芯上的油汙及髒物 d 檢查復位調簧情況 e 擰緊所有緊韌體。熱繼...