Hướng Dẫn Vận Hành Hệ Thống System

Dự án nâng cấp hệ thống máy chủ

Core-Banking
Ngân hàng TMCP An Bình

Hướng Dẫn Vận Hành Hệ Thống System P

Áp dụng cho
AN BINH BANK

Thực hiện bởi

Tập Đoàn Công Nghệ CMC – CMC Corporation
Tầng 17, CMC Tower
Phố Duy Tân, Phường Dịch Vọng, Quận Cầu Giấy
Hà Nội

ABBANK/CMC Confidential
Page 1/65
 Hướng Dẫn Vận Hành cho System P

Mục lục
1 Hướng dẫn vận hành........................................................................................................................... 3
1.1 Tổng quan hệ thống........................................................................................................................ 3
1.2 Sơ đồ tổ chức An Binh Bank.......................................................................................................... 3
1.2.1 Manager............................................................................................................................... 3
1.2.2 System Administrator........................................................................................................... 3
1.2.3 System Operator:................................................................................................................. 4
1.3 Sơ đồ RACK hệ thống...................................................................................................................... 4
1.4 Thông tin cấu hình máy chủ............................................................................................................. 5
1.5 Thông tin IP hệ thống...................................................................................................................... 5
1.6 Qui trình kiểm tra vận hành hằng ngày............................................................................................. 6
1.6.1 Kiểm tra môi trường vật lý.................................................................................................... 6
1.6.2 Kiểm tra máy chủ dt24-app-hw-p1.......................................................................................8
1.7 Các tác vụ quản trị và bảo trì......................................................................................................... 11
1.7.1 Kiểm tra tình trạng hệ thống............................................................................................... 11
1.7.1.1 Kiểm tra lỗi hệ thống...................................................................................................... 11
1.7.1.2 Kiểm tra filesystems....................................................................................................... 12
1.7.1.3 Kiểm tra sự thống nhất fileset........................................................................................ 12
1.7.1.4 Kiểm tra trạng thái cluster.............................................................................................. 13
1.7.2 Thay đổi cấu hình trên AIX................................................................................................. 19
1.7.2.1 Tăng dung lượng filesystem........................................................................................... 19
1.7.2.2 Tăng dung lượng filesystem trên PowerHA...................................................................22
1.7.2.3 Thêm hdisk vào một PowerHA volume group...............................................................28
1.7.2.4 Cài đặt phần mềm mới................................................................................................... 34
1.7.2.5 Cấu hình mạng............................................................................................................... 40
1.7.2.6 Tạo sao lưu hệ thống..................................................................................................... 43
1.7.2.7 Áp dụng bản vá OS mới nhất.........................................................................................47
1.7.2.8 Start cluster.................................................................................................................... 51
1.7.2.9 Dừng cluster................................................................................................................... 55
1.7.2.10 Chuyển cluster resource group..................................................................................57

ABBANK/CMC Confidential
Page 2
 Hướng Dẫn Vận Hành cho System P

1 Hướng dẫn vận hành

1.1 Tổng quan hệ thống
Hệ thống bao gồm 2 máy chủ IBM P780 được cấu hình PowerHA và 01 máy chủ TSM server cài đặt trên
IBM P720

1.2 Sơ đồ tổ chức An Binh Bank

1.2.1 Manager
Name:
Email:
Phone number:

1.2.2 System Administrator

Name:
Email:

ABBANK/CMC Confidential
Page 3
 Hướng Dẫn Vận Hành cho System P

Phone number:

Name:
Email:
Phone number:

Name:
Email:
Phone number:

1.2.3 System Operator:

Name:
Email:
Phone number:

Name:
Email:
Phone number:

Name:
Email:
Phone number:

Name:
Email:
Phone number:

1.3 Sơ đồ RACK hệ thống

Server p780 DT24-APP-HW-P101: Rack SR21
Server p780 DT24-APP-HW-P101: Rack SR22
Server p720 ABB-T24-BK: Rack SR01

ABBANK/CMC Confidential
Page 4
 Hướng Dẫn Vận Hành cho System P

1.4 Thông tin cấu hình máy chủ

Tên máy CPUs RAM Card mạng Card FC
Dt24-app-hw- 2xMultifunction card 4
p1 3x4-port Ethernet
card
Dt24-app-hw- 2xMultifunction card 4
p2 3x4-port Ethernet
card
Abb-t24-bk 3x4-port Ethernet 2
card

1.5 Thông tin IP hệ thống

Tên máy IP Netmask Gateway
Dt24-app-hw-p1 192.168.0.1 255.255.255.0 10.32.8.2
10.32.8.41
Dt24-app-hw-p2 192.168.0.2 255.255.255.0 10.32.8.2
10.32.8.42
Abb-t24-bk 10.32.8.5 255.255.255.0 10.32.8.2

ABBANK/CMC Confidential
Page 5
 Hướng Dẫn Vận Hành cho System P

1.6 Qui trình kiểm tra vận hành hằng ngày

Kiểm tra trực Kiểm tra

Kiểm tra hệ Kiểm tra
quan môi trực quan
điều hành Cluster
trường máy chủ

1.6.1 Kiểm tra môi trường vật lý

Ngày tháng:
Người vận hành:
Thứ Kiểm tra thiết bị Mong muốn Kết Hướng xử lý khi có bất
tự quả thường
1 Dây nguồn Đã cắm Liên lạc với
Administrator và Manager
2 Server covers Đã lắp Liên lạc với
Administrator và Manager
3 Cáp mạng Đã cắm Liên lạc với
Administrator và Manager
4 Cáp FC Đã cắm Liên lạc với
Administrator và Manager
5 Các cáp khác Đã cắm Liên lạc với
Administrator và Manager

Chữ ký…………..

Kiểm tra trực quan máy chủ

Ngày tháng:
Người vận hành:
Thứ Kiểm tra thiết bị Mong muốn Kết Hướng xử lý khi có bất
tự quả thường
1 P780-01 Không sáng Liên lạc với
Attention LED Administrator và Manager
2 P780-01 Power Xanh Liên lạc với
LED Administrator và Manager
3 P780-02 Không sáng Liên lạc với

ABBANK/CMC Confidential
Page 6
 Hướng Dẫn Vận Hành cho System P

Attention LED Administrator và Manager

4 P780-02 Power Xanh Liên lạc với
LED Administrator và Manager
5 P720 Attention Không sáng Liên lạc với
LED Administrator và Manager
6 P720 Power Xanh Liên lạc với
LED Administrator và Manager

Chữ ký …………..

ABBANK/CMC Confidential
Page 7
 Hướng Dẫn Vận Hành cho System P

1.6.2 Kiểm tra máy chủ dt24-app-hw-p1

Ngày tháng:
Người vận hành:
Máy : P780 – S/N….
Thứ Kiểm tra thiết bị Mong muốn Kết Hướng xử lý khi có bất
tự quả thường
1. Kiểm tra bằng Ping được và Liên lạc với
lệnh ping không bị mất Administrator và Manager
#ping 10.32.8.41 gói tin
2. Kiểm tra ssh Có thể đăng Liên lạc với
login nhập Administrator và Manager
3. Server dt24-app- Không có nhật Liên lạc với
hw-p1 Kiểm tra lỗi ký lỗi Administrator và Manager
phần cứng
#errpt –d H
4. Server dt24-app- Không có nhật Liên lạc với
hw-p1 Kiểm tra lỗi ký lỗi Administrator và Manager
phần mềm
#errpt –d S
5. Server dt24-app- Không fileset Liên lạc với
hw-p1 Kiểm tra các hư hỏng Administrator và Manager
gói phần mềm
#lppchk –v
6. Server dt24-app- % Sử dụng < Liên lạc với
hw-p1 Kiểm tra 80% Administrator và Manager
dung lượng
filesystem
#df –g

Chữ ký …………..

Kiểm tra máy chủ dt24-app-hw-p2

Ngày tháng:
Người vận hành :
Máy: P780 – S/N….

Thứ Kiểm tra thiết bị Mong muốn Kết Hướng xử lý khi có bất

ABBANK/CMC Confidential
Page 8
 Hướng Dẫn Vận Hành cho System P

tự quả thường
1. Kiểm tra bằng Ping được và Liên lạc với
lệnh ping không bị mất Administrator và Manager
#ping 10.32.8.42 gói tin
2. Kiểm tra ssh Có thể đăng Liên lạc với
login nhập Administrator và Manager
3. Server dt24-app- Không có nhật Liên lạc với
hw-p2 Kiểm tra lỗi ký lỗi Administrator và Manager
phần cứng
#errpt –d H
4. Server dt24-app- Không có nhật Liên lạc với
hw-p2 Kiểm tra lỗi ký lỗi Administrator và Manager
phần mềm
#errpt –d S
5. Server dt24-app- Không fileset Liên lạc với
hw-p2 Kiểm tra các hư hỏng Administrator và Manager
gói phần mềm
#lppchk –v
6. Server dt24-app- % Sử dụng < Liên lạc với
hw-p2 Kiểm tra 80% Administrator và Manager
dung lượng
filesystem
#df –g

Operator Signature…………..

Kiểm tra máy chủ Abb-t24-bk

Ngày tháng:
Người vận hành:
Máy: P720 – S/N….

Thứ Kiểm tra thiết bị Mong muốn Kết Hướng xử lý khi có bất
tự quả thường
1. Kiểm tra bằng Ping được và Liên lạc với
lệnh ping không bị mất Administrator và Manager
#ping 10.32.8.5 gói tin

ABBANK/CMC Confidential
Page 9
 Hướng Dẫn Vận Hành cho System P

2. Ssh login to Có thể đăng Liên lạc với

server nhập Administrator và Manager
3. Server abb-t24-bk Không có nhật Liên lạc với
Kiểm tra lỗi phần ký lỗi Administrator và Manager
cứng
#errpt –d H
4. Server abb-t24-bk Không có nhật Liên lạc với
Kiểm tra lỗi phần ký lỗi Administrator và Manager
mềm
#errpt –d S
5. Server Abb-t24-bk Không fileset Liên lạc với
Kiểm tra các gói hư hỏng Administrator và Manager
phần mềm #lppchk
–v
6. Server abb-t24-bk % Sử dụng < Liên lạc với
Kiểm tra dung 80% Administrator và Manager
lượng filesystem
#df -g

Chữ ký…………..
Kiểm tra máy chủ PowerHA
Ngày tháng:
Người vận hành:

Thứ Kiểm tra thiết bị Mong muốn Kết Hướng xử lý khi có bất
tự quả thường
1. Kiểm tra ping Ping được và Liên lạc với
#ping không bị mất gói Administrator và Manager
10.32.8.11 tin
2. Kiểm tra ssh Có thể đăng nhập Liên lạc với
login đến service Administrator và Manager
IP
3. Kiểm tra cluster Số lượng Liên lạc với
hearbeat heartbeat bị mất : Administrator và Manager
#cltopinfo 0

ABBANK/CMC Confidential
Page 10
 Hướng Dẫn Vận Hành cho System P

4. Kiểm tra trạng Cluster stable 2 Liên lạc với

thái cluster nodes ở trạng thái Administrator và Manager
#clstat online
T24rg online trên
node
dt24apphwp1

Chữ ký…………..

1.7 Các tác vụ quản trị và bảo trì

1.7.1 Kiểm tra tình trạng hệ thống

1.7.1.1 Kiểm tra lỗi hệ thống
Sử dụng câu lệnh
# errpt –d –H
# errpt –d –S

ABBANK/CMC Confidential
Page 11
 Hướng Dẫn Vận Hành cho System P

Nếu như có bất kỳ sự kiện lỗi nào, sử dụng câu lệnh:

#errpt –a
Để xem chi tiết. Nếu không thể giải quyết lỗi, có thể gọi trung tâm hỗ trợ của IBM để được hỗ trợ
1.7.1.2 Kiểm tra filesystems
Sử dụng câu lệnh df –g để kiểm tra trạng thái, dung lượng filesystem

ABBANK/CMC Confidential
Page 12
 Hướng Dẫn Vận Hành cho System P

Nếu 1 filesystem bị đầy, có thể tang dung lượng của nó ( cách thức được trình bày ở phần sau của tài
liệu này)
1.7.1.3 Kiểm tra sự thống nhất fileset
Kiểm tra tình trạng cái gói phần mềm đã được cài đặt

ABBANK/CMC Confidential
Page 13
 Hướng Dẫn Vận Hành cho System P

Nếu 1 fileset chưa phù hợp, nó có thể được đưa ra màn hình. Cần phải cài đặt bản vá hoăc cài lại fileset
đấy.
1.7.1.4 Kiểm tra trạng thái cluster
Kiểm tra trạng thái cluster

ABBANK/CMC Confidential
Page 14
 Hướng Dẫn Vận Hành cho System P

Thông tin cluster sẽ được hiển thị

ABBANK/CMC Confidential
Page 15
 Hướng Dẫn Vận Hành cho System P

Trạng thái cluster ở trạng thái STABLE là hệ thống hoạt động bình thường

ABBANK/CMC Confidential
Page 16
 Hướng Dẫn Vận Hành cho System P

Kiểm tra trạng thái thông tin heartbeat

Sử dụng câu lệnh cltopinfo

ABBANK/CMC Confidential
Page 17
Hướng Dẫn Vận Hành cho System P

ABBANK/CMC Confidential
Page 18
 Hướng Dẫn Vận Hành cho System P

Kiểm tra trạng thái online các Resoure

Sử dụng câu lệnh clRGinfo

ABBANK/CMC Confidential
Page 19
 Hướng Dẫn Vận Hành cho System P

Cluster phải ở trạng thái ổn định, và cả 2 nodes đều online. Nếu không, kiểm tra log tại /var/hacmp/log để
biết chi tiết

1.7.2 Thay đổi cấu hình trên AIX

1.7.2.1 Tăng dung lượng filesystem
Sử dụng câu lênh smitty chfs

ABBANK/CMC Confidential
Page 20
 Hướng Dẫn Vận Hành cho System P

Ví dụ nếu muốn tăng dung lượng /tmp

Lựa chọn file system muốn tăng dung lượng

ABBANK/CMC Confidential
Page 21
 Hướng Dẫn Vận Hành cho System P

Lựa chọn dung lượng filesystem hệ thống

ABBANK/CMC Confidential
Page 22
 Hướng Dẫn Vận Hành cho System P

1.7.2.2 Tăng dung lượng filesystem trên PowerHA

Trong trường hợp muốn tăng dung lượng các filesystem trên cluster sử dụng câu lệnh
smitty hacmp

ABBANK/CMC Confidential
Page 23
 Hướng Dẫn Vận Hành cho System P

Lựa chọn Initialization and Standard Configuration

ABBANK/CMC Confidential
Page 24
 Hướng Dẫn Vận Hành cho System P

Chon Configuration Resources Make Highly Available

ABBANK/CMC Confidential
Page 25
 Hướng Dẫn Vận Hành cho System P

Chọn Configure Volume Group, Logical Volumes and Filesystems

ABBANK/CMC Confidential
Page 26
 Hướng Dẫn Vận Hành cho System P

Chọn file systems

ABBANK/CMC Confidential
Page 27
 Hướng Dẫn Vận Hành cho System P

Chọn Add a File System

ABBANK/CMC Confidential
Page 28
 Hướng Dẫn Vận Hành cho System P

Chọn “Change/Show characteristics of a file system”

Chọn file system muốn được thay đổi
Đặt dung lượng mới cho filesystem muốn được thay đổi

1.7.2.3 Thêm hdisk vào một PowerHA volume group

Sử dụng câu lệnh smitty hacmp

ABBANK/CMC Confidential
Page 29
 Hướng Dẫn Vận Hành cho System P

Lựa chọn Initialization and Standard Configuration

ABBANK/CMC Confidential
Page 30
 Hướng Dẫn Vận Hành cho System P

Chon Configuration Resources Make Highly Available

ABBANK/CMC Confidential
Page 31
 Hướng Dẫn Vận Hành cho System P

Chọn Configure Volume Group, Logical Volumes and Filesystems

ABBANK/CMC Confidential
Page 32
 Hướng Dẫn Vận Hành cho System P

Chọn Volume Groups

ABBANK/CMC Confidential
Page 33
Hướng Dẫn Vận Hành cho System P

ABBANK/CMC Confidential
Page 34
 Hướng Dẫn Vận Hành cho System P

Chọn “Set Characteristics of a Volume Group”  “Add Physical disk to Volume group” để thêm đĩa mới
vào trong volume group
1.7.2.4 Cài đặt phần mềm mới
Sử dụng câu lệnh smitty installp

ABBANK/CMC Confidential
Page 35
 Hướng Dẫn Vận Hành cho System P

Chọn Install Software

ABBANK/CMC Confidential
Page 36
 Hướng Dẫn Vận Hành cho System P

Chọn thư mục chứa bộ cài

ABBANK/CMC Confidential
Page 37
 Hướng Dẫn Vận Hành cho System P

Chọn option Accept new license agreements là Yes

ABBANK/CMC Confidential
Page 38
 Hướng Dẫn Vận Hành cho System P

Chọn F4 để List ra các fileset muốn cài đặt. Chọn file system bằng cách sử dụng F7

ABBANK/CMC Confidential
Page 39
 Hướng Dẫn Vận Hành cho System P

Nhấn Enter

ABBANK/CMC Confidential
Page 40
 Hướng Dẫn Vận Hành cho System P

1.7.2.5 Cấu hình mạng

Sử dụng câu lệnh smitty mktcpip

ABBANK/CMC Confidential
Page 41
 Hướng Dẫn Vận Hành cho System P

Chọn Card mạng

ABBANK/CMC Confidential
Page 42
 Hướng Dẫn Vận Hành cho System P

Thay đôi thông số, nhấn Enter

ABBANK/CMC Confidential
Page 43
 Hướng Dẫn Vận Hành cho System P

1.7.2.6 Tạo sao lưu hệ thống

Để tạo 1 bootable system backup, cho băng từ vào ổ bang từ và sử dụng câu lệnh:
#smitty mksysb

ABBANK/CMC Confidential
Page 44
 Hướng Dẫn Vận Hành cho System P

Lựa chọn Tape

ABBANK/CMC Confidential
Page 45
 Hướng Dẫn Vận Hành cho System P

Nhấn Enter

ABBANK/CMC Confidential
Page 46
Hướng Dẫn Vận Hành cho System P

ABBANK/CMC Confidential
Page 47
 Hướng Dẫn Vận Hành cho System P

1.7.2.7 Áp dụng bản vá OS mới nhất

Tải bản AIX TL SP mới nhất, copy bản vá OS vào hệ thống sau đó sử dụng câu lệnh:
#smitty install_update

Chọn Update Installed Software to Lastest Level ( Update All)

ABBANK/CMC Confidential
Page 48
 Hướng Dẫn Vận Hành cho System P

Chọn thư mục chứa software

ABBANK/CMC Confidential
Page 49
 Hướng Dẫn Vận Hành cho System P

Chọn option Accept new license agreements là Yes

ABBANK/CMC Confidential
Page 50
 Hướng Dẫn Vận Hành cho System P

Kiểm tra trạng thái bản vá hệ điều hành thông quá câu lệnh
#oslevel –s

ABBANK/CMC Confidential
Page 51
 Hướng Dẫn Vận Hành cho System P

1.7.2.8 Start cluster

Sử dụng câu lệnh smitty clstart

ABBANK/CMC Confidential
Page 52
 Hướng Dẫn Vận Hành cho System P

Chọn các option, Nhấn Enter

ABBANK/CMC Confidential
Page 53
Hướng Dẫn Vận Hành cho System P

ABBANK/CMC Confidential
Page 54
Hướng Dẫn Vận Hành cho System P

ABBANK/CMC Confidential
Page 55
 Hướng Dẫn Vận Hành cho System P

1.7.2.9 Dừng cluster

Sử dụng câu lệnh smitty clstop

ABBANK/CMC Confidential
Page 56
 Hướng Dẫn Vận Hành cho System P

Chọn các option

ABBANK/CMC Confidential
Page 57
 Hướng Dẫn Vận Hành cho System P

1.7.2.10 Chuyển cluster resource group

Sử dụng câu lệnh smitty cl_admin

ABBANK/CMC Confidential
Page 58
 Hướng Dẫn Vận Hành cho System P

Chọn Resource Group and Applications

ABBANK/CMC Confidential
Page 59
 Hướng Dẫn Vận Hành cho System P

Chọn Move a Resource Group to Another Node / Site

ABBANK/CMC Confidential
Page 60
 Hướng Dẫn Vận Hành cho System P

Chọn Move Resource Group to Anther node

ABBANK/CMC Confidential
Page 61
 Hướng Dẫn Vận Hành cho System P

Chọn resource muốn chuyển

ABBANK/CMC Confidential
Page 62
 Hướng Dẫn Vận Hành cho System P

Chọn node sẽ chuyển

ABBANK/CMC Confidential
Page 63
 Hướng Dẫn Vận Hành cho System P

Nhấn Enter

ABBANK/CMC Confidential
Page 64
Hướng Dẫn Vận Hành cho System P

ABBANK/CMC Confidential
Page 65