Petrodata System &~A.

rnforrnador r.,ChlOlogy Or..tsourcing Company

"6."'"

Date To From Subject

: 01 October 2010 : Team Investigasi Aptikasi FASjMMISjHRIS : Petrodata System : Laporan Investigasi Aplikasi FAS/MMIS/HRIS

Uraian Singkat Kronologis Database server mengalami dikarenakan deadlock antara service interuption proses kompresi pertama windows kali pada tanggal 23-Sep-2010 pkl, 09:00

dan proses akses oracle, setelah dilakukan transaksi. Saat server live semua data-data yang di agar user dapat

service restart, server kembali beroperasi hingga pada 23-Sep-2010 pkl. 13:30, server kembali down dan tidak bisa up kembali dimana sernua user aplikasi tidak dapat melakukan down, dari tim kami berusaha memperbaiki backup pada pagi hari 24-Sep-2010 database sesuai dengan prosedur yang ada namun tidak ke server backup dengan tujuan tidak terlalu lama.

berhasil. Dimana pada akhirnya dilaksanakan backup plan yakni memindahkan pkl. 07:00 melakukan transaksi kembali sehingga proses downtime Aplikasi FAS dapat di akses pada 24-Sep-2010 backup serta telah di announcement Handoko).

pkl. 11:10 dengan akses database server ke machine yakni FAS Admin (Hari Sukamto, Firman

ke semua pihak terkait

Aplikasi MMIS dan HRIS dapat diakses pada 24-Sep-2010 pkl. 22:00, informasi ini kemudian diteruskan oleh PIC HRIS (Nadia) menginfokan dan MMIS (Mariana) ke masing-masing user, dimana PIC MMIS (Mariana) bahwa telah ada kesepakatan antara IT MMIS (Pak Dindin) dengan PIC MMIS (Mariana) kembali beroperasi normal, sehingga tidak

bahwa user akan tetap menunggu server live (10.10.10.59) terjadi dua kali closing, Pada 25-Sep-2010 menggunakan (10.10.10.59). pkl. 09:00, user FAS sudah dapat

melakukan

transaksi

seperti

biasa dengan

server backup. Database live (10.10.10.59)

baru dapat bekerja normal pada 27-Sep-2010

pkl, 03:00 dan apllkasi pada 27-Sep-2010 pkl, 03:37 dengan koneksi yang sudah diarahkan ke server live

PT.Petro Data Sistem
Komplek Rasuna Epicentrum Bakrie Tower, 25th floor

r r

JI. HR.Rasuna Said Jakarta Selatan 12960 1 6221.56.100.200
6221.2994.1456 ·info@petrodata-system.com

www.petrodata-system.com

Perbaikan Perbaikan yang dilakukan yakni melakukan install database instance baru dan dilakukan patch database dikarenakan metalink pada versi oracle sebelumnya yakni 10.com www. Temuan Beberapa hal yang ditemukan penyebab database down adalah : 1.T"(hn"l( JV Outsourunq Company Detail Kronologis Kejadian "'6" Mengenai kronologis kejadian dapat dilihat pada lampiran. database oracle ltu sendiri tidak sanggup merelease transaksi-transaksi output) di undo tablespace.2994.1456 E ·info@petrodata-system. Kesimpulan Tidak diperkenankan melakukan automatic compress pada physical disk karena bisa menyebabkan deadlock. Settingan mengalami krisis size.0. PT.4 bugs.56. dimana hal ini dapat membuat file crash dan corrupt. 25th floor JI.Petrodata System &~A ntorrnar'or. HR. Oracle gagal dalarn melakukan proses I/O (Input guna menulis file ke dalam Undo Tablespace di karenakan file tidak dapat di akses undo tablespace yang dibuat auto extend yang mengakibatkan physical disk karena terjadi lock by System disebabkan oleh proses kompresi. Rasuna Said Jakarta Selatan 12960 P 622l.200 F 6221.0.2. menurut import informasi dari oracle kembali data-data sehingga kemudian berdasarkan Status Update yang terakhir.petrodata-system.100.2.Petro Data Sistem Komplek Rasuna Epicentrum Bakrie Tower. 2.com . Saat oracle melakukan proses start up.1 terdapat perlu dilakukan patch ke versi 10.

1456 E' . (Akan di plan aleh pihak PDS) dan secara autornatis di run setiap jam archive log dan full backup.56.10. HR. Karena hal ini akan deadlock melakukan compress dengan proses oracle yang berusaha menulis agar as dalam dan membaca informasi pada file.100. 5.om .60 02:00 dimana letak file backup berada di local hard drive.jnfo@petrodata-system. sejak 27-Sep-2010) Perlu ditambahkannya Perlu diaktifkannya kapasitas hardisk di server database. Rasuna Said Jakarta Selatan 12960 p 6221. (Done. 3. (Akan di plan oleh pihak PDS) Saat ini job backup berada di server 10.petrodata-system. Siang dan Malam) lakukan pengecekan pada undotablespace tidak overload.Petrodata System &"A Irro 'nation Tee"ln0logy itsourcinq Company "'AY Action Plan 1. sebaiknya juga secara automatis di-copv kan ke tempat yang lain. settingan auto compress pada physical disk. 25th floor JI. Tablespace yang digunakan oleh system sebaiknya tidak dibuat auto extend (Done 26-Sep2010) Undo tablespace tidak dilakukan settingan auto extend (Done 26-Sep-201O) Tidak melakukan antara proses 4. 7.10.Petro Data Sistem Komplek Rasuna Epicentrum Bakrie Tower. Ari Tasman Application Supervisor PT.200 ~ 6221. 6.c. Selain di lakasi ini. 2.2994.om www. (Sedang dalam persiapan storage) Mengetahui. (Done 26-Sep-2010) Secara periodically (Pagi.

melakukan startup database 13. melakukan melalui 8. alter database 23.10.10. restart sebagai sys 16.10.Petrodata System ltorrrl< uo 'T '( f'L loqv Ou sou . Shutdown 5.petrodata-system. Semua Aplikasi tidak bisa connect database Down) ke 23-Sep-2010 09:00 23-Sep-2010 09:30 (Data base 6. startup 23-Sep-2010 23-5ep-2010 17:00 12. exit dari sqlplus. Run Application suda h bisa connect 10. open sqlplus da n connect database database database service listener listener 2. membuka console sqlplus 13:30 17. startup database dari sqlplus.59 service database listener status Hal yang dilakukan melakukankoneksi ke database Terakhlr Gagal Sukses Sukses Sukses Sukses Sukses 2. remote ke server 10. 14.59 service database listener Sukses Sukses Sukses Sukses Sukses Sukses koneksi database Gagal Sukses 5ukses Sukses Sukses dari console Gagal 1. Shutdown Shutdown Database 5. shutdown 10. alter database mount open PT.59 8.inq C 1rH1Y List Kronologis database down Description Masalah Dari Tanggal/Jam Sampai Tanggal/Jam 1. Mencoba melalui toad.10. server 10.1456 E info@petrodata-system.200 F 6221. Startup 6. Startup Database Service pengecekan dad sqlplus untuk test apakah aplikasi ke database ke Admin FAS bahwa aplikasi dan koneksi database 7. melakukan rnelalut console sqlplus di server 10. disconnect 18.10.2994. Disconnect Sukses Sukses Sukses Sukses console sqlplus di server 10.10.10. announcement gunakan melalui ke PIC MMIS (Mariana) PIC HRIS (Nadia) bahwa aplikasi sudah bisa di Sukses by phone melakukankoneksi ke database toad remote ke server 10.10.10. shutdown 9. Melakukan 3. Mencoba 2. Semua Aplikasi tidak bisa connect database down) ke (Database 11.56. Saat server on. Announcement sudah bisa digunakan 11. Petro Data Sistem Komplek Rasuna Epicentrum Bakrie Tower.com www. alter database open 20. Startup Database Listener Service Database Service pengecekan 7. open sqlplus dalam posist namount 22.1 00. Startup Shutdown Database Database Listener Service 1. Melakukan 4. 25th floor JL HR. Melakukan 4.com .59 9. disconnect dari sqlplus Sukses Sukses Sukses Gagal 21. Melakukan 3.10.59 Sukses Gagal Sukses Sukses Gagal 15. Rasuna Said Jakarta Selatan 12960 P 6221 . open sqlplus dalam posisi mount 19.

semua file . alter database mount 25. 26. mengembalikan arah bacaan cantrall file ke semula 17. alter database resetlogs PT.200 r 6221. Menunggu DBA 23-5ep-2010 17:00 23-5ep-2010 22:30 No Action 1. contact DBA (Pak Sudar). hal pertama yang di temuka n yakni error i/o untuk undotbs1 :::I.trc file dan log error di folder bdump 8. contact DBA office (Edvin)untuk meminta saran. open sqlplus dalam posisi mount 14. setelah dipindahkan melakukan alter database open hanya untuk undotbsl 16.2994. start listener Sukses Gagal 5ukses Sukses Sukses Sukses Gagal 23.56.DBFyang terdapat di drive C:\ ke laptop 3. rnenghapus undotbsl yang ada di external disk 18. DBA Datang dan langsung proses perbaikan transaksi 23-5ep-2010 22:30 24-5ep-2010 07:30 Sukses non-compress 11. beliau confirm akan datang ke office setelah selesai dengan pekerjaannya di kantor untuk melakukan perbaikan.i nfo@petrodata-system. open database 21. open sqlplus dan masuk pada kondisi nomount 5. DBA Datang jam 22:30 2. HR.59 22. mengubah arah baca control file untuk undotbs1 yang semula ke physical ha rdisk di pindahkan ke external disk 15. Melakuka n remote ke server 10. melakukan backup . alter database mount 6. Dan dari saran yang diberikan adalah saran yang sudah dilakukan sebelurnnva.10. 25th floor J1. rnerakuxa n ceK pmsrcai aan ternvata ditemukan kondisi hardisk dalam posisi compress 10.10. 25. mengembalikan posisi settingan hardisk ke - COIl1'Jany - - Sukses Sukses Sukses Gagal - I - 4. diskusi dengan lJl3Amengenai kronorogts kejadian 3.Rasuna Said Jakarta Selatan 12960 p 6221. memmdahkan arah baca control tile dan physical disk ke external disk hanya untuk undotbsl 20.10.com .Petrodata System Information TecrinoIoqv Outsourc'nq 24. melakukan copy ulang undotbsl ke external 5ukses Sukses Gagal Sukses Sukses Sukses disk 19. restart server 10.petrodata-system.10. melakukan pengeceka n ke . open sqlplus dalam posisi nomount 24.100.59 4.DBFsudah dalam posisi uncompress kecuali undotbs1 karena muncul error Sukses not enough resource 12. melakukan copy undotbs1 ke hardisk Sukses external 13. alter database open 7. dan menceritakan rnasalah ini. Petro Data Sistem Komplek Rasuna Epicentrum Bakrie Tower.com www.1456 I:.

melakukan drive noresetlogs di disk per users Gagal Sukses backup .com . open sqlplus dalam postst mount 3.10. Company 26.10.10. melakukan Firman 4. Mempersiapkan Database backup 24-Sep-2010 07:00 24-Sep-2010 11:00 Suksss Sukses Sukses Sukses data per user (FAS.58 2.. melakukan ke server 10.10. Mempersiapkan application server 24-Sep-2010 11:00 24-Sep-2010 16:00 10. backup data di server 10. alter database 9. Bertemu membahas 7. 2.10. cross check MMIS dan H RIS database sekaligus cek applikasi ke internal PIC MMIS Sukses 8. Membantu Database cross check MMIS & HRIS 24-Sep-2010 20:00 24-Sep-2010 22:00 2.10. clear user 3. ~ Jakarta Selatan 12960 6221.DBF yang terdapat . ubah arah koneksi report server dari 6.10. alter database 27. Announcement informasi digunakan (Maria ria].58 Sukses Sukses 2.2994.info@petrodata-system.10. menambahkan ODBC ke server 10.petrodata-system. normal Dimana dalam diskusi discuss kondlsi server yang terjadi ini pihak IT EMP akan menunggu MMIS dan HRIS terjadi double langsung guna menghindari input. HR.58 1 pengecekan aplikasi Ke rA~ AUMIN (rtan Sukarnto. 25th floor JI."A ~~ C:\ dan D:\ ke external l. HRIS (Nadia) yakni hara p diteruskan ke user bahwa aplikasi sudah bisa dengan menggunakan remote server backup Sukses Sukses Sukses 1. g=f-ou 1 57 :8889/form s/frmservlet?confi Sukses 1.com www.10.10.Petrodata System lrformatron Iechnoloqy Cutsourcinr.59 2. error_logfile. Tim FAS dar! PDS melakukan pihak FAS Admin Handoko) (Hari Sukamto bahwa database melakukan settingan slap untuk digunakan proses di server form agar untuk dan Tim FAS dari PDS la ngsung turun untuk membantu penyetingan arah database semua aplikasi l.200 6221. 0.MMIS. Announcement Handoko) rubah ke http://10. Meeting 24-Sep-2010 16:00 24-Sep-2010 20:00 live kembali pak Rinaldy dan Pak Arief di It 27 serta kondisi server FAS.56. Petro Data Sistem Komplek Rasuna Epicentrum Said Bakrie Tower. DBA [Pak Vaber dan Pak Tony) datang dan duduk oiskuks) membahas - kronologisnya 1.100. melakukan proses bypass undotbsl S. import 5. check kondisi data 5. mencoba mengubah status undotbsl datafile yang sebelumnya online menjadi pagi 6. Proses perbaikan database 24-Sep-2010 20:00 25-Sep-2010 04:30 open pada offline dan Suksas Gagal Gagal - 4. saya kembali PT. Rasuna p. ba hwa link untuk aplikasi di Sukses Sukses 3.HRIS) konfirmasi & Firman ke lokasi ke 4. DBA ijin untuk akan dilanjutkan pulang karena ada acara pada hari minggu ke kost untuk istirahat 7.10.1456 E.59 ke 10 .

4 9. " .10.0.2. backup database 58 3.--. dalam proses perbaikan muncul error dikarenakan flash recovery area not found area 4.2994.Petro Data Sistem Komplek Rasuna Epicentrum Said Bakrie Tower.57:8889/forms/frmservlet?confi g=f-our 2.'.' Jakarta Selatan 12960 00. menerima 11. eek kondisi 5. install getdataback 7. g=H1 MMIS yakni http://10. Kembali ke Lt 25 25-Sep-2010 16:01 25-Sep-2010 03:30 menanyakan yang didapat telephone agar dapat dilakukan dar! Mas Dindin Kesimpulan closing saat akan status database. server 59 sudah kembali 10:00 untuk 5.1 ke 10.1456 info@petrodata-system.56.10. pulang ke kost dan kembali lagi ke kantor jam monitoring database undotbs di server 10. Standby support confirmed ke bahwa hari sabtu dan minggu user HRIS tidak ada dan akan monitoring hingga user dan database 1. melakukan cara agar status pada datafile sarna agar bisa dibaea oleh oracle 6. melakukan proses untuk bypass undotbs1 3. create tablespace 11. petrodata-system. create users 12. .fr~ Petrodata System tnformaton 1.0. -.10. '.200 6221. Rasuna p. 5 7.10.2.com www. PIC HRIS (Nadia) menginformasikan untuk 4. import data PT. proses install database dari 10.10. . monitoring backup dan menunggu tidak ada user connection 2.'. untuk g=ml. keputusan terakhir melakukan install data base ba ru 08:00 04:30 8. Lanjut proses perbaikan database 25-Sep-2010 27-Sep-2010 5. 25th floor JI."..10. Standy support untuk Aplikasi 25-Sep-2010 09:00 25-Sep-2010 16:00 bahwa user telah di sampaikan aplikasi sudah dapat digunakan. PIC MMIS (Mariana) meneruskan informasi database 5.' .. istirahat lanjut 4. meneari sotusi agar proses arah settingan oracle tidak mengarah ke flash recovery 12.58 1.com . re-Announcement (Mariana) sudah bisa digunakan kembali concern ke PIC MMIS dari Pak Rinaldy informasi dimana bahwa link nfi dan HRIS (Nadia) bahwa aplikasi karena hingga jam 08:00 belum ada informasi 10.8889/forms/frmservlet?co HRIS yakni dan link untuk http://10. standby dikarenakan support Technology Outsourcmq C ornpany di It 29 untuk FAS yakni user sudah mulai lakukan transaksl ke ala mat sernentara http://10. DBA membaea detail error log 2. . patch database 10. F E 6221.57:8889/forms/frmservlet?confi 3. MMIS akan melakukan normal.10.10. HR.

view. 2.10. Dalam case ini mengakibatkan file akan di lock sehingga tidak bisa akses. trigger. Kirim email ke IT Personel PDS (Nadia.. HR. Mariana dan Ibrahim) mengecek agar blsa datang lebih kestabllan aplikasi awal untuk Beberapa Hal yang perlu diperhatikan untuk menjadi bahan koreksi yakni : 1. u ndotbs dimana tidak seharusnya kemudian di tunjang dengan fungsi archive log pada database.com . announcement HRIS(internal ke semua user FAS.~~ ~'Y 111formd!.Petro Data Sistem Komplek Rasuna Epicentrum Bakrie Tower. ~o~.com www.10. 25th floor JI. announcement ke field pada jam 02:16 agar tidak melakukan dipindahkan transaksi karena akan arah koneksi aplikasi ke server 10. Lakukan backup setiap hari dan full database backup per periodically. PIC) bahwa dengan koreksi PIC). direstore sewaktu-waktu. index package untuk semua database 14. cek data yang telah bergerak khususnya 16.1456 E.petrodata-system.59 18. Jangan lakukan automatic compress pada hardisk.2994.!.~~ Ari Tasman Application Supervisor PT.0" Technr-loqy C utsourcing Company 13.Petrodata System 6. buat config sementara FAS untuk meta kukan cek aplikasi di server 10.10.200 [' 6221. undotbs mengalami kenaikan Mengetahui.56. function. data base up pada jam 03:00 dan a plikasi up pada jam 03:37 19. Harus diperhatikan size yang signifikan.Rasuna Said Jakarta Selatan 12960 p 6221. 20.59 17. ·info@petrodata-system. cek procedure. Dimana pada archive log ini dapat 3. Grant table 15. MMIS(lnternal aplikasi sudah bisa digunakan bahwa HRIS dan MMIS belum stabll.100.10.

Sign up to vote on this title
UsefulNot useful