14

Số và ký hiệu: 202/BB-

00
Ngày ban hành: 21/06/2022

08

22
/20
/06
STT Người ký Đơn vị Thời gian ký Ý kiến

22

21
1 ĐÀO ĐỨC Trưởng phòng Tác 21/06/2022

y,
/20

k
CHUNG động hệ thống - 18:15:24

da
Phòng Tác động Hệ

/06

ng
thống - Trung tâm

hu
22
Vận hành khai thác

C
toàn cầu - TCT

:07

uc
VTNet - Tổng công

D
ty Mạng lưới Viettel

14

D ao
2 LÊ NGUYỄN Phó phòng Tác động 21/06/2022

g_

ng
VĂN VŨ Hệ thống - Phòng 18:10:56

ho
Tác động Hệ thống -

Tu

t
Trung tâm Vận hành

he
khai thác toàn cầu -

nh

ng
TCT VTNet - Tổng

do
Vi
công ty Mạng lưới

ac
ep
Viettel

gT
Di

on
ph
ai
_M

ng
uo
14

Tr
00
08

:24
:15
18
22
22

/20
/20

/06
21
/06

y,
22

ak
gd
7
4:0

un
Ch
_1

uc
ng

oD
Tu

Da
ng
nh

tho
Vi

he
iep

ng
do
iD

ac
Ma

gT
on
4_

ph
1
00

ng
uo
08

Tr

Tài liệu này thuộc sở hữu của Viettel. Việc phát tán, sử dụng trái phép bị nghiêm cấm
 14
Số và ký hiệu: 202/BB-

00
Ngày ban hành: 21/06/2022

08

22
/20
TT VẬN HÀNH KHAI THÁC TOÀN CẦU CỘNG HÒA XÃ HỘI CHỦ NGHĨA VIỆT

/06
PHÒNG TÁC ĐỘNG HỆ THỐNG NAM

22

21
Độc lập - Tự do - Hạnh phúc

y,
/20

k
Hà Nội, ngày tháng năm 2022

da
/06

ng
BIÊN BẢN

hu
22

C
HỌP RÚT KINH NGHIỆM VÀ QUY TRÁCH NHIỆM

:07

uc
SỰ CỐ DI ĐỘNG BCHT04 – TĐHT – TT VHKTTC

D
14

D ao
g_
Vào hồi 10h00’ ngày 21 tháng 06 năm 2022 đã diễn ra cuộc họp Phòng Tác

ng
n

ho
động Hệ thống (P.TĐHT) – Trung tâm Vận hành Khai thác Toàn cầu (TT

Tu

t
he
VHKTTC) về việc rút kinh nghiệm, quy trách nhiệm sự cố Di động BCHT04 của

nh

ng
nhân sự P.TĐHT.

do
Vi
I. Thành phần, địa điểm:

ac
ep

gT
1. Thành phần:
Di

on
+ Đ/c Đào Đức Chung: Trưởng Phòng TĐHT, chủ trì cuộc họp,
ph
ai
_M

+ Đ/c Phạm Thị Kim Dung: Nhân viên P.TĐHT, thư ký cuộc họp,
ng
uo

+ Cùng 97/119 ~81.5% tổng quân số CBCNV P.TĐHT tại HNI, DNG,
14

Tr

HCM (có 22 đ/c vắng mặt: Nghỉ phép, nghỉ dưỡng, đi học quân sự).
00
08

2. Địa điểm:
:24

Phòng họp giao ban T3 – KCNC Hòa Lạc. Cầu TH KV2, KV3, jabber,
:15

zoom.
18

II. Nội dung:

22
22

/20

1. Tường trình vi phạm:

/20

/06

- Đ/c chủ trì thông báo lỗi vi phạm của nhân sự P.TĐHT:
21
/06

+ Đ/c Hoàng Minh Công – Kỹ sư di động (FE): Không chọn đúng kịch bản
y,

xây dựng MOP và form test khi tạo CR. Gây sự cố: 507 phản ánh (70 HOT,
22

ak

13 Bạc, 33KHDN)/trên 1.6k thuê bao bị ảnh hưởng (là những thuê bao bị
gd
:07

un

chuyển về 2G lúc xảy ra nghẽn)

Ch
14

+ Đ/c Hoàng Minh Công đọc nội dung tường trình và bản kiểm điểm nhận
uc
g_

thức cá nhân: Chi tiết theo nội dung tường trình và bản kiểm điểm cá nhân kèm
oD
un

theo.
Da
T

- Tóm tắt nội dung vi phạm:

ng
nh

+ Ngày 07/06/2022 tôi có nhận SR “SR_VN_20220607_588305

tho
Vi

SR_PS_Khai báo LAC TAC, mapping LAC TAC tắt 3G BDG, chuyển
he
iep

ng

BCHT03,04 BDG sang MP1E01” do đồng chí halq tạo. Tôi đã tạo CR:
do
iD

CR_NORMAL_CORE_MOBILE_20023631038: [VMSA] Khai báo mapping

ac
Ma

TA-LA 4G-2G chuyển BCHT04 theo SR_VN_20220607_588305 theo HD BO

gT
on
4_

bàn giao.
ph
1
00

ng
uo
08

Tr

Tài liệu này thuộc sở hữu của Viettel. Việc phát tán, sử dụng trái phép bị nghiêm cấm
 14
Số và ký hiệu: 202/BB-

00
Ngày ban hành: 21/06/2022

08

22
+ Sau khi sự cố xảy ra, đến ngày 13/6 tôi mới biết thông tin CR tôi tạo gây

/20
lỗi do không có trường “–gan” trong lệnh create la và sau đấy BO mới thông

/06
tin cần nhập trường ta và old_ta để hiện “–gan” trong lệnh create_la. Trong

22

21
HD của BO không có mô tả trường “old_ta”, không nói trong trường hợp nào

y,
/20

k
sử dụng cấu trúc lệnh hiện “–gan” trong lệnh “create_la” cũng như mô tả cách

da
/06
nhập dữ liệu để hiện “–gan”.

ng
hu
22
+ Về form test tôi đã xây dựng kịch bản test không phù hợp với yêu cầu.

C
Trong trường hợp này kịch bản test phải là test ở TAC tác động. Thông thường

:07

D uc
TAC sẽ tương ứng đúng với LAC của BSC/RNC nhưng trong trường hợp này

14

ao
do vô tuyến tắt 3G một phần nên vị trí của LAC 2G không tương ứng với TAC

D
g_

ng
4G. Do vậy khi test dịch vụ, mặc dù đã test lại LAC của BCHT04 nhưng TAC

ho
Tu
lại không, do đó không phát hiện được lỗi.

t
he
nh

ng
2. Ý kiến đóng góp của CBCNV

do
Vi
● CBQL - P.TĐHT:

ac
- Đ/c Lê Nguyễn Văn Vũ – PP TĐHT – Phụ trách Di Động:
ep

gT
Di

on
+ Để tránh lỗi lặp lại các mảng cần audit lại Mop chuẩn. Ngoài BO audit,
ph
ai

FE khi nhận bàn giao thực hiện thấy MOP không phù hợp thì báo BO
_M

ng

update lại.
uo
14

Tr

+ Với CR nhạy cảm nguy cơ ảnh hưởng dịch vụ lớn cần crosscheck lại về
00

mặt logic, cách thức test và MOP chuẩn.

08

+ Với CR cần WO test hoặc file test, FE tác động cần test và kiểm tra đầy
:24

đủ kết quả trả về.

:15

+ Với CR kéo dài sau 4h sáng cần tăng cường kiểm soát nguy cơ.
18
22

⇨ Nhìn nhận lỗi đầu tiên khi thực hiện đầu việc mới và đây là sự cố diện rộng
22

/20

nên đề xuất hình thức xử lý mức khiển trách.

/20

/06

- Đ/c Phạm Xuân Hà – PP TĐHT – Phụ trách IP&BRCĐ:

21
/06

+ Nhân sự vi phạm không cố tình vi phạm QTQĐ, đã thực hiện theo hướng
y,
22

ak

dẫn nhưng chưa cẩn thận, tỷ mỷ khi thực hiện lần đầu với một việc mới tiếp
gd

nhận đã không xác minh kỹ lại kịch bản với BO, dẫn tới việc chọn lựa sai kịch
:07

un

bản để tạo theo, đồng thời tạo form test không đúng với yêu cầu.
Ch
14

+ Ánh xạ hiện trạng MOP chuẩn, hướng dẫn các mảng còn nhiều bất cập,
uc
g_

nhiều hướng dẫn chưa rõ ràng, tường minh dễ dẫn đến nguy cơ lỗi tương tự
oD
un

xảy ra lặp lại, cần phải tổ chức audit lại các MOP chuẩn, hướng dẫn thực thi
Da
T

của các mảng.

ng
nh

tho

 Đề xuất hình thức kỷ luật theo NQLĐ là khiển trách.

Vi

he

● CBCNV:
iep

ng

ĐỀ XUẤT HÌNH
Ý KIẾN ĐÓNG GÓP
do

STT CBCNV
iD

THỨC KỶ LUẬT
ac

Nguyễn Thị + Đối với vi phạm của đ/c Hoàng Minh Công: Qua
Ma

+ Đ/c Hoàng Minh

gT

1 Huyền Diễm- bản kiểm điểm cá nhân thì yếu tố chủ quan đã rõ
Công: KI D quý 2.
on

ràng nhưng trong đó cũng có phần khách quan khi

4_

FE CNTT
ph
1
00

ng
uo
08

Tr

Tài liệu này thuộc sở hữu của Viettel. Việc phát tán, sử dụng trái phép bị nghiêm cấm
 14
Số và ký hiệu: 202/BB-

00
Ngày ban hành: 21/06/2022

08

22
ĐỀ XUẤT HÌNH
STT CBCNV Ý KIẾN ĐÓNG GÓP

/20
THỨC KỶ LUẬT
liên quan đến hướng dẫn Mop chuẩn chưa rõ ràng

/06
dẫn đến lỗi chủ quan của đ/c Công.

22

21
+ Đánh giá đ/c Công là nhân sự nhiệt tình, cẩn thận

y,
/20
trong công việc, trong các năm gần đây chưa có lỗi

k
da
vi phạm.

/06

ng
 Đề xuất hình thức kỷ luật KI D Quý 2

hu
22
+ Thứ nhất lỗi chủ quan đã rõ ràng nhưng đ/c

C
Hoàn cũng có khía cạnh khác về hướng dẫn Mop

:07

uc
chuẩn của BO không đầy đủ, chi tiết, khá nhiều

D
đầu việc mảng Di động cùng chung 1 MOP chuẩn,

14

ao
đề xuất BO/FE làm rõ các tham số input/output.

D
g_
+ Thứ hai về lỗi khách quan, đ/c Công chuyên

ng
n

ho
Bùi Thanh môn tốt, kinh nghiệm lâu năm, nhân sự của nhóm + Đ/c Hoàng Minh

Tu
2

t
Hoàn - FE DD gần đây có thay đổi nên cũng chưa hỗ trợ nhau Công: KI D quý 2.

he
crosscheck được các CR có ảnh hưởng lớn dẫn tới

nh

ng
không phát hiện sớm được vấn đề. Đề xuất cần

do
Vi
phải crosscheck MOP với những CR nhạy cảm,

ac
ep
mức rủi ro cao.

gT
 Đề xuất KI D quý 2
Di

on
ph
ai
_M

ng
uo
14

Tr

+ Lỗi cơ bản cũng có khách quan và chủ quan, đ/c

00

Công cũng đã nhận ra lỗi và tự nhận hình thức kỷ

08

Mai Diệp luật cao.

:24

+ Đ/c Hoàng Minh

3 Vĩnh Tùng - + Xét đến việc tạo CR theo hướng dẫn nhưng chưa
:15

Công: KI D quý 2
FE DD tường mình rõ ràng thì cũng góp phần gây là lỗi
18

tạo CR sai.
22
22

 Đề xuất KI D quý 2
/20
/20

/06
21
/06

y,
22

ak
gd
:07

un
Ch
14

+ Vấn đề của đ/c Công là lỗi MOP, khi phát hiện

uc

ra lỗi thì không trao đổi với BO để thực hiện. Vấn

g_

oD

Lê Việt Hùng đề 2 là form test chưa đảm bảo tạo sai.

un

+ Đ/c Hoàng Minh

- Trưởng ca + Đánh giá đ/c Công là nhân sự cẩn thận, có trách
Da

4
T

Công: KI D quý 2
tác động FE nhiệm, thành tích trong các năm qua tốt chưa có vi
ng
nh

phạm và cũng đã có danh hiệu CSTĐ.

tho

 Đề xuất KI D Quý 2
Vi

he
iep

ng
do
iD

ac
Ma

Trần Anh + Xác định lỗi chủ quan cá nhân khi tạo CR tuy
gT

+ Đ/c Hoàng Minh

5 Sơn- FE nhiên có 1 phần khách quan do hướng dẫn còn
on
4_

Công: KI D quý 2
CNTT chưa rõ ràng, dùng cho nhiều việc.
ph
1
00

ng
uo
08

Tr

Tài liệu này thuộc sở hữu của Viettel. Việc phát tán, sử dụng trái phép bị nghiêm cấm
 14
Số và ký hiệu: 202/BB-

00
Ngày ban hành: 21/06/2022

08

22
ĐỀ XUẤT HÌNH
STT CBCNV Ý KIẾN ĐÓNG GÓP

/20
THỨC KỶ LUẬT
+ Đối với Form test dịch vụ để kiểm soát kết quả

/06
tác động thì phải xây dựng thật chi tiết, cụ thể tránh

22

21
việc test không đúng yêu cầu, không phát hiện ra

y,
/20
lỗi.

k
da
 Đề xuất KI D quý 2

/06

ng
hu
22
III. Kết luận đ/c chủ trì:

C
:07
- Về lỗi vi phạm, CBCNV P.TĐHT cần nhận thức, hiểu rõ vấn đề về lỗi vi

D uc
phạm sự cố này. Lỗi do MOP tác động và form test sai, không đúng yêu

14

ao
cầu.

D
g_

ng
- Nguyên nhân lỗi có một phần khách quan nhưng không phủ nhận được lỗi

ho
Tu
chủ quan của cá nhân vi phạm.

t
he
- Với những CR nhạy cảm, mức rủi ro cao, ảnh hưởng lớn cần phải được

nh

ng
crosscheck về mặt logic, cách thức test kiểm soát, MOP chuẩn. Các nhóm

do
Vi
chuyên môn cần tự tổ chức kiểm tra hàng ngày.

ac
ep

gT
- Bộ phận CHTH, CĐS phòng TĐHT cần xây dựng kế hoạch audit toàn bộ
Di

on
MOP chuẩn các mảng đang sử dụng sao cho tường minh, đồng nhất.
ph
ai

⇨ Đánh giá toàn diện sự việc, động cơ, mục đích không có tính trục lợi cá
_M

ng
uo

nhân, cá nhân có ý thức cao về lỗi vi phạm của mình khi nhận hình thức KI
14

Tr

D năm.
00

⇨ Xét đến đề xuất, nhận xét của các CBQL, CBCNV đồng nghiệp làm việc
08

trực tiếp với đ/c Hoàng Minh Công ở P.TĐHT, nhìn nhận về con người,
:24
:15

tính trách nhiệm, tinh thần làm việc và quá trình công tác tốt của đ/c nên
18

quyết định đề xuất hình thức kỷ luật: Đ/c Hoàng Minh Công mức khiển
22
22

trách.
/20
/20

Cuộc họp kết thúc hồi 11h30’ cùng ngày.

/06
21
/06

THƯ KÝ CUỘC HỌP CHỦ TRÌ CUỘC HỌP

y,
22

ak

(Ký ghi rõ cấp bậc, họ tên) (Ký ghi rõ cấp bậc, họ tên)
gd
:07

un
Ch
14

uc
g_

oD
un

Phạm Thị Kim Dung ĐÀO ĐỨC CHUNG

Da
T

ng
nh

tho
Vi

he
iep

ng
do
iD

ac
Ma

gT
on
4_

ph
1
00

ng
uo
08

Tr

Tài liệu này thuộc sở hữu của Viettel. Việc phát tán, sử dụng trái phép bị nghiêm cấm