Volume 5 Nomor 2 | September 2020  168

## EVALUASI FAKTOR-FAKTOR SUKSES SISTEM INFORMASI RUMAH SAKIT PADA RUMAH SAKIT XYZ MENGGUNAKAN MODEL DELONE
& MCLEAN

## EVALUATION OF SUCCESS FACTORS IN HOSPITAL INFORMATION SYSTEM AT XYZ HOSPITAL USING DELONE & MCLEAN MODELS
Miftah Muhammad 1 , Assaf Arief 2
12 Fakultas Teknik, Program Studi Teknik Informatika Universitas Khairun, Ternate Email: miftahmuh@gmail.com

## Abstrak
Rumah  Sakit  XYZ  sebagai  salah  satu  lembaga  pemerintah,  saat  ini  sedang berupaya  untuk  mentransformasikan  pelayanannya  guna  meningkatkan  kepuasan pasien  dengan  menerapkan  sistem  informasi  rumah  sakit.  Namun,  dalam penerapannya  selama  setahun,  banyak  keluhan  terkait  sistem  baru  tersebut. Penelitian  ini  bertujuan  untuk  mengetahui  faktor  sukses  yang  mempengaruhi kepuasan  pengguna  dan  manfaat  yang  dirasakan  oleh  pengguna  di  RS  XYZ dengan  menggunakan  model  sukses  Delone  McLean.  Pengumpulan  data  yang dibutuhkan  dilakukan  dengan  serangkaian  kuesioner  yang  dikembangkan  sesuai model.  PLS-SEM  digunakan  untuk  menguji  model  penelitian  dengan  software Smart  PLS  3.0.  Manfaat  penelitian  ini  mengacu  pada  manfaat  yang  dirasakan pengguna  saat  menggunakan  sistem  informasi  rumah  sakit  dalam  hal  membantu pengguna  dalam  meningkatkan  efisiensi  dan  efektifitas  dalam  melakukan aktivitasnya.  Hasil  penelitian  terhadap  75  responden  menunjukkan  bahwa penggunaan  sistem,  kepuasan  pengguna,  dan  faktor  organisasi  berpengaruh terhadap  keuntungan  yang  dirasakan,  sedangkan  kualitas  informasi,  kualitas sistem,  dan  kualitas  layanan  berpengaruh  signifikan  terhadap  penggunaan  sistem informasi,  namun  hanya  kualitas  informasi  dan  penggunaan  sistem  yang berpengaruh signifikan berpengaruh pada kepuasan pengguna. Hasil penelitian ini dapat  menjadi  masukan  bagi  RS  XYZ  untuk  memperbaiki  sistem  informasinya kedepannya.
Kata Kunci: Sistem Informasi Rumah Sakit, Model Sukses, Delone McLean.

## Abstract
XYZ  Hospital,  as  a  government  agency  is  currently  trying  to  transform  its services  to  increase  patient  satisfaction  by  implementing  a  hospital  information system.  However,  in  its  implementation  for  a  year,  there  were  many  complaints
regarding  the  new  system.  This  study  aims  to  determine  the  success  factors  that affect user satisfaction and the benefits felt by users at XYZ Hospital by using the Delone  success  model.  Data  collection  is  done  with  a  series  of  questionnaires developed  according  to  the  model.  PLS-SEM  is  used  to  test  the  research  model with Smart PLS 3.0 software. The benefits of this study refer to the benefits felt by users  when  using  hospital  information  systems  in  terms  of  helping  users  to increase efficiency and effectiveness in carrying out their activities. The results of 75  respondents  showed  that  system  use,  user  satisfaction,  and  organizational factors  affected  perceived  benefits.  In  contrast,  information  quality,  system quality,  and  service  quality  had  a  significant  effect  on  the  use  of  information systems.  However,  only  the  quality  of  information  and  system  use  had  a significant  effect  on  user  satisfaction.  The  results  of  this  study  can  be  used  as suggestions for XYZ Hospital to improve its information system in the future.
Keywords: Hospital Information System, Delone McLean IS Success model
PENDAHULUAN Penggunaan  Teknologi  Informasi dan Komunikasi (TIK) untuk memberikan  nilai  kepada  pengguna dalam berbisnis telah terbukti memberikan  manfaat  yang  luar  biasa antara  lain  peningkatan  produktivitas, efisiensi,  peningkatan  layanan  kepada pelanggan  dan  peningkatan  peluang bisnis.  Dampak  positif  TIK  dalam dunia  bisnis  saat  ini  sedang  dilakukan oleh instansi pemerintah yang bertujuan untuk
meningkatkan pelayanan  kepada  masyarakat  secara lebih efektif dan efisien [1], [2].
Rumah  Sakit  XYZ  yang  berlokasi di  Pulau  Jawa  merupakan  salah  satu instansi  pemerintah  yang  saat  ini sedang berusaha melakukan transformasi pelayanan untuk meningkatkan  kepuasan  pasien.  Salah satu upayanya adalah dengan mengimplementasikan sistem
informasi  yang  mengintegrasikan data  kesehatan  pasien  dan  sistem manajemen rumah sakit yaitu keuangan  dan  administrasi.  Sistem informasi tersebut telah
diimplementasikan  sejak  Januari 2019  untuk  mendukung  transaksi operasional  setiap  hari.  Aplikasi  ini diharapkan  dapat  berjalan  dengan lancar,  namun  dalam  tiga  bulan terakhir  (September  -  Desember 2019)  berdasarkan  dokumen  daftar pengaduan  terdapat  335  pengaduan dari pengguna.
Salah satu keluhannya  adalah  dari  unit  rekam medis  yang  melaporkan  riwayat kunjungan  pasien  pada  aplikasi tidak  sesuai  dengan  hasil  yang diinginkan.
Daftar sebaran
pengaduan dari setiap subunit disajikan pada Tabel 1.
Tabel 1. Persentase Keluhan Pengguna
Unit % Keluhan Unit % Keluhan
Pendaftran dan Rekam Medis 40 % Keuangan 4% Rawat jalan 20 % ICU 14 % Rawat Inap 9 % Ruang operasi 11 % Farmasi/Obat 7 % Lainnya 4 % Banyaknya jumlah keluhan
menunjukkan  bahwa  pengguna  tidak puas  dengan  sistem[3].  Berdasarkan penelitian  [4]  dan  [5],  kepuasan pengguan  merupakan  indikator  utama yang  menunjukkan  berhasil  tidaknya sistem informasi.
Wawancara pendahuluan  dengan  pengguna  yang sedang  menggunakan  sistem  aplikasi, salah  satu  dampak  yang  ditimbulkan oleh penerapan aplikasi adalah menurunnya  aktivitas  pengguna  dan mempengaruhi  waktu  tanggap  pasien serta  menurunkan  kepuasan  pasien  di RS XYZ.
Studi ini bertujuan untuk mengevaluasi faktor-faktor yang mempengaruhi  pengguna  dalam  hal membantu  meningkatkan  efisiensi  dan efektivitas dalam melakukan pekerjaannya  di  RS  XYZ  dengan menggunakan  model  Delone  McLean IS Success dan memberikan
rekomendasi  untuk  perbaikan  aplikasi.
Oleh karena itu,  dirumusan pertanyaan penelitian adalah sebagai berikut:
1. Faktor-faktor apa saja yang
mempengaruhi pengguna saat menggunakan aplikasi?
2. Perbaikan apa yang harus dilakukan  oleh  manajemen  untuk meningkatkan penerapan aplikasi?

## LANDASAN TEORI
E-Government E-government berarti penggunaan TIK di lembaga pemerintah atau publik untuk meningkatkan  dan  mempromosikan layanan  yang  lebih  efisien  dan efektif kepada warganya [2][6][7].

## Sistem Informasi Kesehatan
Sistem  Informasi  Kesehatan (SIK)  adalah  aplikasi  yang  fokus utamanya pada kebutuhan administrasi  rumah  sakit.  Banyak rumah sakit telah menggunakan SIK untuk  mengelola  banyak  aspek, yaitu klinis, finansial, dan administrasi.  Berdasarkan  Peraturan Menteri Kesehatan Republik Indonesia  nomor  82  tahun  2013 disebutkan bahwa untuk mendukung fungsi badan pelayanan publik dalam meningkatkan efisiensi  dan  efektifitas  operasional rumah sakit perlu diterapkan penerapan RIS[8].

## Model Sukses Delone McLean
Model  sukses  Delone  McLean merupakan  model  yang  digunakan untuk mengukur tingkat keberhasilan  dan  efektifitas  suatu sistem informasi dengan
memberikan  kerangka  kerja  yang komprehensif[14]. Model ini dipilih karena  telah  divalidasi[10],  dan beberapa  dimensi  yang  digunakan sesuai  untuk  aplikasi  wajib  seperti
SIK  di  rumah  sakit  XYZ.  Model tersebut disajikan pada Gambar 1.
Gambar 1. Model Sukses Sistim Informasi ( Delone & McLean , 2003)

## METODE PENELITIAN
Studi  ini  menggunakan  pendekatan
campuran ( mixed-method ). Teknik penelitian kuantitatif dilakukan dengan penyebaran  kuisioner  dan  didukung dengan  studi  dokumen  perusahaan sebagai teknik kualitatif untuk memperoleh  pemahaman  yang  lebih komprehensif  terkait  kondisi  saat  ini dan masalah yang dihadapi pengguna.
Tahapan  metodologi  penelitian  ini adalah  tahap  identifikasi  masalah, tahap  analisis  data,  kesimpulan  dan rekomendasi  perbaikan  seperti  yang disajikan pada Gambar 2.
Gambar 2. Tahapan Penelitian
Pada  identifikasi  masalah,  kami melakukan  telaah  Pustaka  dan mengumpulkan  data  awal  untuk mengetahui kondisi eksisting penggunaaan  aplikasi  SIK,  hasil yang  diharapkan  oleh  manajemen dan jumlah pengguna yang menggunakan  KIS. Daftar indikator
disusun  berdasarkan  dimensi  dalam model  konseptual.  Kemudian  kami menyusun  kuesioner  berdasarkan indikator.
Instrumen  penelitian  terdiri  dari 25  item  yang  dirancang.  Instrumen survei  menjelaskan  enam  variabel: kualitas  sistem,  kualitas  informasi, layanan, organisasi, kepuasan pengguna,  dan  manfaat.  Setiap variabel  berisi  beberapa  indikator yang  diracik  berdasarkan  penelitian sebelumnya  agar  sesuai  dengan penelitian  saat  ini;  yang  disajikan pada  Tabel  2.  Pengukuran  item survei  didasarkan  pada  skala  tipe Likert  lima  poin  yang  berkisar  dari "sangat tidak setuju" hingga "sangat setuju".
Tabel 2. Variabel & Indikator Survey Variabel & Id Indikator Ref Keamanan Informasi (KI) Kelengkapan, Akurasi, Kekinian, Realibel, ketepatan waktu. [14] [15] Kualitas Sistem (KS) Kemudahan, waktu respons, Keramahan antarmuka, Tingkat kesalahan layanan. [15][ 12] Kualitas Layanan (KL) Dukungan teknis, Pelatihan, respon yang bagus, Kompetensi. [5][1 4] [12][ 15] Organisasi (O) Dukungan manajemen, Strategi, Komunikasi yang efektif. [12]
Variabel & Id Indikator Ref Kepuasan Pengguna (KP) Keluhan dari pasien/pengguna. [3][1 2] Keuntungan Bersih (KB) Efektivitas, Efisiensi, Bermanfaat langsung [14][ 12] [15] Penggunaan Sistem (PS) Cepat, hemat waktu dan hemat tenaga. [20]
Sampel  yang  digunakan  dalam penelitian  ini  adalah  seluruh  karyawan yang menggunakan aplikasi  SIK untuk menunjang  aktivitasnya  sehari-hari yang berjumlah 250 pengguna.
Berdasarkan  rumus  Slovin  dengan batas  toleransi  kesalahan  10%  maka total  responden  dalam  penelitian  ini adalah 75 responden. Kami membagikan  kuesioner  online  kepada pengguna yang bertugas untuk melayani pasien secara langsung
(perawat dan staf) dan kuesioner online didistribusikan  ke  pengguna back- office .  Dari  semua  kuesioner  yang dibagikan,  didapatkan  75  responden. Data  yang  telah  terkumpul  kemudian divalidasi  dengan  menggunakan  uji validitas dan reliabilitas[12], kemudian dilakukan  pengujian  model  konseptual dengan  menggunakan  analisis  PLS- SEM  menggunakan  software  Smart PLS 3.0.
Model  konseptual  yang  digunakan dalam  penelitian  ini  mengacu  pada Delone  &  McLean  IS  Success[14], namun  agar  sesuai  dengan  penelitian saat  ini  karena  manajemen  telah mengamanatkan pengguna untuk menggunakan SIK, sehingga penggunaan  sistem  (actual  use)  dapat dievaluasi dari sudut pandang
kegunaan[13].  Adapun  perancangan model evaluasi SIK seperti disajikan pada Gambar 3.
Gambar 3. Konseptual Model
Penelitian  ini  akan  menguji hipotesis sebagai berikut:
 H1:  Kualitas  Informasi  (KI) berpengaruh  positif  signifikan terhadap Kepuasan Pengguna
 H2:  Kualitas  Informasi  (KI) berpengaruh  positif  signifikan terhadap Penggunaan Sistem
 H3:  Kualitas  Sistem  (KS) berpengaruh  positif  signifikan terhadap Kepuasan Pengguna
 H4:  Kualitas  Sistem  (KS) berpengaruh  positif  signifikan terhadap Penggunaan Sistem
 H5:  Kualitas  Layanan  (KL) berpengaruh  positif  signifikan terhadap Kepuasan Pengguna
 H6:  Kualitas  Layanan  (KL) berpengaruh  positif  signifikan terhadap Penggunaan Sistem
 H7:  Penggunaan  Sistem  (PS) berpengaruh  positif  signifikan terhadap Manfaat Bersih
 H8:  Kepuasan  pengguna  (KP) berpengaruh  positif  signifikan terhadap Manfaat Bersih.
 H9:  Organisasi  (O)  berpengaruh positif signifikan terhadap Manfaat Bersih.
 H10:  Penggunaan  Sistem  (PS) berpengaruh  positif  signifikan terhadap Kepuasan Pengguna.

## HASIL DAN PEMBAHASAN
Data Responden Pengumpulan data melalui kuesioner online dari pengguna aplikasi  SIK,  kuesioner  yang  dibagi menjadi  dua  tahap.  Tahap  pertama tentang demografi responden dan tahap kedua  tentang  indikator  konstruksi. Ada 25 pertanyaan terkait konstruk dan 2 pertanyaan terkait demografi responden. Demografi
responden disajikan pada Tabel 4. Tabel 3. Data Responden Data Responden Keterangan Persentase (%) Umur Tidak Ada 1.37 20 – 25 20.55 26 – 35 54.79 36 – 45 18.55 46-55 2.74 Pendidikan D3 54.42 D4/S1 46.21 S2/S3 2.37 Hasil Evaluasi dengan Model Hasil evaluasi dengan
melakukan  evaluasi  outer  model dan  inner  model.  Outer  model terdiri  dari  uji  validitas  dan  uji reliabilitas.  Untuk  inner  model terdiri  dari  R-square  dan  path coefficient  untuk  mengukur  daya prediksi model.
Pengujian  validitas  terdiri  dari validitas  konvergen  dan  validitas diskriminan.  Validitas  konvergen berkaitan  dengan  prinsip  bahwa indikator  suatu  konstruk  harus sangat berkorelasi. Validitas konvergen dilakukan dengan menghitung  loading  factor  dan Average Variance Extracted (AVE). Uji validitas diskriminan menyatakan  bahwa  indikator  suatu konstruk seharusnya tidak berkorelasi  tinggi  dengan  konstruk lain. Validitas diskriminan dilakukan dengan menghitung cross-loading  indikator[17].  Nilai faktor  loading  indikator  harus>  0,7 untuk  lulus  uji  validitas  konvergen [14].  Indikator  yang  memiliki  nilai antara 0.4 dan 0.7 dapat dipertahankan atau dihapus
tergantung  pengaruhnya  terhadap nilai  Composite  Reliability  (CR) atau  AVE.  Tabel  6  menunjukkan nilai  factor  loading  dari  masing- masing indikator final model[17].
Tabel 6. Nilai Loading factors Indikator Nilai Indikator Nilai KI1 0.874 PS01 0.929 KI2 0.890 PS02 0.622 KI3 0.816 PS03 0.868 KI4 0.708 KP1 0.811
KL1 0.910 KP2
0.708 KL2 0.721 KP3 0.768 KL3 0.801
OR1 0.551 KL4 0.784 OR2
0.846 KS1 0.760 OR3 0.939 KS2 0.748 KB1 0.861 KS3 0.732 KB2 0.741 KS4 0.574 KB3 0.982 Pada  perhitungan  iterasi  validitas konvergen, kami membuang dua indikator:  KS4,  dan  OR1,  karena penghapusan  indikator  tersebut  dapat meningkatkan  nilai  CR.  Langkah selanjutnya  adalah  memeriksa  nilai AVE.  Menurut  [17]  nilai  AVE  harus> 0,5.  Tabel  7  menunjukkan  nilai  AVE untuk semua variabel atau konstruk.
Tabel 7. Nilai AVE
Langkah selanjutnya adalah melakukan pengujian reliabilitas dilakukan untuk mengetahui konsistensi indikator dalam merefleksikan  variabel.  Pengujian  ini dilakukan
dengan menghitung composite  reliability  (CR).  Nilai  CR harus>  0,70.  Hasil  CR  diatas  0,70 untuk  semua  variabel  yang  berarti semua variabel tersebut reliabel seperti disajikan pada Tabel 8.

## Tabel 8. Nilai CR dan Cronbach’s
Alpha ID Composite Reliability Cronbach’s Alpha
KI 0.917 0.880 KB 0.838 0.711 OR 0.940 0.873 KL 0.912 0.870 KS 0.883 0.802 KP 0.884 0.803 PS 0.846 0.731
Berdasarkan  data  pada  Tabel  8 CR memiliki nilai> 0,7 yang berarti alat  ukur  yang  digunakan  dalam penelitian  ini  konsisten  dan  akurat untuk digunakan.
Langkah selanjutnya adalah pengujian  koefisien  jalur  ( path coefficient ) untuk mengetahui hubungan  yang  signifikan  antar variabel untuk membuktikan hipotesis  apakah  variabel  tertentu berpengaruh  signifikan  terhadap variabel  lain  atau  tidak.  Variabel dianggap signifikan jika nilai koefisien  jalur>  0,1  dan  nilai  p <0,05. Karena penelitian ini mengadopsi  studi  satu  sisi  maka bobot  koefisiennya  signifikan  jika nilai  t-statistik  lebih  besar  dari 1.645  (sesuai  taraf  signifikansi  5%) [18][19].  Hasil  pengujian  hipotesis disajikan pada Tabel 9.
Tabel 9. Hasil Pengujian Hipotesis ID Path Coefficient T- Statistics P- Value Hasil KI-KP (H1) 0.540 6.655 0.000 Significant KI-PS (H2) 0.413 4.007 0.001 Significant KS-KP (H3) 0.127 1.291 0.094 Not Significant KS-PS (H4) 0.413 5.793 0.000 Significant KL-KP (H5) 0089 1.324 0.093 Not Significant KL-PS (H6) 0.208 2.093 0.018 Significant KP-KB (H7) 0.455 3.262 0.001 Significant PS – KB (H8) 0.362 2.809 0.136 Significant OR-KB (H9) 0.292 2.737 0.041 Significant ID Nilai AVE Hasil Kualitas Informasi (KI) 0.736 Diterima Keuntungan  Bersih (KB) 0.635 Diterima Organisasi (O) 0.887 Diterima Kualitas Layanan (KL) 0.722 Diterima Kualitas Sistem (KS) 0.717 Diterima Penggunaan  Sistem (PS) 0.648 Diterima Kepuasan  Pengguna (KP) 0.717 Diterima
PS-KP (H10) 0.458 2.700 0.000 Significant A. Model Final
Setelah  dilakukan  analisis  terhadap
seluruh data yang terkumpul, didapatkan  faktor-faktor  apa  saja  yang berpengaruh signifikan terhadap keberhasilan  penerapan  SIK  di  RS XYZ.  Model  akhir  dari  penelitian  ini dapat dilihat pada Gambar 4.
Gambar 4. Model Final

## KESIMPULAN DAN REKOMENDASI
Aplikasi  SIK  digunakan  untuk memberikan  pelayanan  administrasi kepada  pasien.  Hasil  penelitian  ini menemukan bahwa
penggunaan
sistem, kepuasan pengguna, dan organisasi akan mempengaruhi keuntungan bersih yang akan dirasakan oleh  pengguna.  Berdasarkan  hasil penelitian  ini  kualitas  informasi  akan mendominasi kepuasan pengguna.
Adapun rekomendasi hasil
penelitian adalah sebagai berikut:
Perbaikan  kembali  sistem  informasi (SIK) yang dibutuhkan oleh setiap unit
untuk  menunjang  pekerjaannya  dan membuat ulang laporan berdasarkan kebutuhan pengguna.
Harus  ada  mengaudit  data  dalam database  dan  melakukan  proses pengujian untuk mengetahui penyebab  kesalahan  dalam  data yang ditampilkan dalam laporan. Berdasarkan analisis, kualitas informasi  pada  SIK  seperti  ketidak lengkapan  dan  ketidaktepatan  data dipengaruhi  oleh  fitur  sistem  yang tidak  dapat  diandalkan  sehingga perlu  dilakukan  upgrade  dari  sisi fitur sistem.

## UCAPAN TERIMA KASIH
Penulis mengucapakan bayak terima kasih  kepada  tim  riset  kepulauan digital Fakultas Teknik Unkhair.

## DAFTAR PUSTAKA
[1]O.  Al-Hujran,  M.  M.  Al-Debei, A. Chatfield, and M. Migdadi, “ The imperative of influencing citizen  attitude  toward  e- government adoption and use ,” Comput. Human Behav. , vol. 53, pp. 189–203, 2015.
[2]Y.  Q.  Zhu  and  A.  Kindarto,  “ A garbage can model of government IT project failures in  developing  countries:  The effects  of  leadership,  decision structure and team competence ,” Gov.  Inf.  Q. , vol.  33,  no.  4,  pp.  629–637, 2016.
[3]R. Vaezi, A. Mills, and W. Chin, “ User Satisfaction with
Information Systems: A Comprehensive Model of Attribute-level Satisfaction, ”
Commun.  Assoc.  Inf.  Syst. ,  no. April, pp. 165–206, 2019.
[4]R.  Vaezi,  A.  Mills,  and  W.  Chin,
“ User satisfaction with information systems: A comprehensive model of attribute-level satisfaction ,” Commun.  Assoc.  Inf.  Syst. ,  vol. 45, no. 1, pp. 165–206, 2019.
[5]A. L. Diar, P. I. Sandhyaduhita, and N. F. A. Budi, “ The Determinant Factors of Individual Performance from Task Technology  Fit  and  IS  Success Model  perspectives:  a  case  of Public Procurement Plan Information  System  (SIRUP), ”  in 2018  International  Conference on  Advanced  Computer  Science and Information Systems (ICACSIS) , 2018, pp. 69–74.
[6]M.  A.  Sarrayrih  and  B.  Sriram, “ Major  challenges  in  developing a  successful  e-government:  A review  on  the  Sultanate  of Oman, ” J.  King  Saud  Univ.  -
Comput.  Inf.  Sci. ,  vol.  27,  no.  2, pp. 230–235, 2015.
[7]R. Bilkova and A. Kralova, “ Adoption model of m- government  services ,”  in 2017 International Conference on Information and Digital Technologies  (IDT) ,  2017,  pp.
52–55.
[8]Kementerian Kesehatan, “ Peraturan
Menteri Kesehatan Republik Indonesia Nomor 97 Tahun 2015 Tentang Peta Jalan Sistem Informasi Kesehatan Tahun
2015-2019 ,” Peta  Jalan  Sist.
Inf.  Kesehat.  Tahun  2015  - 2019 , pp. 1–76, 2015.
[9]I.  Ayebazibwe,  H.  C.  Kimaro, and J. J. Kaasbøll, “ System use and  user  satisfaction  in  the adoption of electronic medical records  systems:  A  case  of
DHIS2 tracker implementation in Tanzania ,” in IFIP
Advances  in  Information  and
Communication  Technology ,
2019.
[10]C. Bossen,  L. G. Jensen, and F. W.  Udsen,  “ Evaluation  of  a comprehensive  EHR  based  on the  DeLone  and  McLean model for IS success: Approach, results, and success factors ,” Int.  J.  Med.  Inform. , vol.  82,  no.  10,  pp.  940–953, 2013.
[11]L.  Van  Cauter,  D.  Verlet,  M. Snoeck,  and  J.  Crompvoets, “ The explanatory power of the
Delone  &  McLean  model  in the  public  sector:  A  mixed- method  test ,” Inf.  Polity ,  vol.
22, no. 1, pp. 41–55, 2017.
[12]L.  M.  Erlirianto,  A.  H.  N.  Ali, and  A.  Herdiyanti,  “ The
Implementation of the Human, Organization, and Technology-Fit (HOT-Fit) Framework  to  Evaluate  the Electronic  Medical  Record
(EMR)  System  in  a  Hospital ,” Procedia  Comput.  Sci. ,  vol.
72,  no.  December,  pp.  580– 587, 2015.
[13]A.  I.  Ojo,  “ Validation  of  the Delone and McLean information  systems  success
model ,” Healthc.  Inform.  Res. , vol. 23, no. 1, pp. 60–66, 2017.
[14]W.  H. DeLone and E. R. McLean, “ The DeLone and McLean model of information systems success: A ten-year  update ,” J.  Manag.  Inf.
Syst. ,  vol.  19,  no.  4,  pp.  9–30, 2003.
[15]D.  R.  Sadat,  “ M-Government
Implementation  Evaluation  in
Encouraging Citizen Participation  in  Indonesia:  A Case  Study  of  Lapor! ,”  p.  100,
2014.
[16]J.  B.  Kouame,  “ Using  Readability Tests to Improve the, ” J. Multidiscip. Eval. , vol. 6, no. 14, pp. 132–139, 2010.
[17]A.  Hair Joseph  F (Kennesaw State University)  Hult  G  Tomas  M
(Michigan State University) Ringle  Christian  M  (Hamburg University of Technology, Germany  and  The  University  of Newcastle,  Australia)  Sarstedt Marko (Otto-von-Guericke University,  Madeburg,  Germany,
“3b.HairBook2017PLS2ndEd.
(1).pdf,” pp. 46–49, 2017.
[18]W.  Abdillah  and  J.  Hartono,
“ Partial  Least  Square  (PLS)
Alternatif  Structural  Equation Modeling (SEM) Dalam Penelitian  Bisnis ,” Andi  Offset ,
2016.
[19]S.  Guritno  and  H.  Siringoringo, “ Perceived  Usefulness,  Ease  of use, and Attitude Towards Online Shopping  Usefulness  Towards
Online Airlines Ticket Purchase ,” Procedia  -  Soc.  Behav.  Sci. ,  vol.
81, pp. 212–216, 2013.