p-ISSN : 2460-3562 / e-ISSN : 2620-8989

## Evaluasi Usability Sistem Informasi Karir dan Tracer Study Universitas Jambi Menggunakan Metode System Usability Scale (SUS) dan Heuristic Evaluation (HE)
Lesi Melyani a1 , Dedy Setiawan s2 , Pradita Eko Prasetyo Utomo a3
a Program Studi Sistem Informasi Fakultas Sains dan Teknologi Universitas Jambi Jl. Jambi - Muara Bulian No.KM. 15, Mendalo Darat, Kec. Jambi Luar Kota, Kabupaten Muaro Jambi, Jambi
lesimelyani1@gmail.com dedy_setiawan@unja.ac.id pradita.eko@unja.ac.id

## Abstrak
Sistem Karir dan Tracer Study di Universitas Jambi merupakan salah satu sistem yang dipakai untuk memperoleh informasi mengenai pendidikan dan karir alumni. Penelitian ini  memiliki tujuan untuk mengevaluasi kegunaan sistem  informasi  mengadopsi  metode System  Usability  Scale (SUS)  dan Heuristic  Evaluation (HE).  Sampel penelitian ini adalah alumni Universitas Jambi yang telah menggunakan sistem informasi Karir dan Tracer Study . Sampel penelitian menggunakan teknik nonprobability sampling dengan teknik purposive sampling . Sampel yang diambil berjumlah 50 untuk metode SUS dan 5 untuk metode HE. Hasil evaluasi yang mengadopsi metode System Usability  Scale menunjukkan  skor  SUS  sebesar  63,75.  Skor  ini  menunjukkan  bahwa  sistem  sudah  cukup  layak untuk  digunakan  dengan  persentil  peringkat  65%.  Skor  tersebut  berada  dalam  kategori  C,  yang  berarti  sistem dapat  diterima.  Skala  adjective  juga  menunjukkan  bahwa  sistem  tergolong  OK,  sehingga  sistem  ini  dapat digunakan  dengan  baik.  Skor  SUS  63,75  menunjukkan  bahwa  sistem  berada  pada  kategori  marginal,  artinya penggunaan sistem informasi Karir dan Tracer Study di Universitas Jambi sudah dapat diterima. Net Promoter Score (NPS)  responden  menunjukkan  bahwa  mereka  memberikan  respon  positif  terhadap  sistem  ini.  Evaluasi dengan  metode Heuristic  Evaluation yang  menyertakan  ahli  sebagai  evaluator  juga  menghasilkan  nilai  63%, menunjukkan bahwa sistem sudah layak digunakan dan fitur-fiturnya berjalan dengan baik. Kata kunci: Usability, System Usability Scale, Heuristic Evaluation

## Evaluation of the Use of Career Information Systems and Tracer Study at Jambi University Using the System Usability Scale (SUS) and Heuristic Evaluation (HE) Methods

## Abstract
The Career and Tracer Study System at the University of Jambi is one of the systems used to obtain information about the education and careers of graduates. This study aims to evaluate the usefulness of information systems using the System Usability Scale (SUS) and Heuristic Evaluation (HE) methods. The sample of this research is Jambi University graduates who have used the Career and Tracer Study information system. The research sample used a nonprobability sampling technique with a purposive sampling technique. The samples taken were 50 for the SUS method and 5 for the HE method. The evaluation results that adopted the System Usability Scale method showed a SUS score of 63.75. This score indicates that the system is feasible enough to use with a rating percentile of 65%. The score is in category C, which means the system is acceptable. The adjective scale also shows that the system is classified as OK, so this system can be used properly. The SUS score of 63.75 indicates that the system is in the marginal category, meaning that the use of the Career and Tracer Study information system at the University of Jambi is acceptable. Respondents' Net Promoter Score (NPS) indicated that they gave a positive response to this system. Evaluation using the Heuristic Evaluation method, which includes experts as evaluators, also produces a value of 63%, indicating that the system is feasible to use and its features are running well.
Keywords: Usability, System Usability Scale, Heuristic Evaluation

## I. P ENDAHULUAN
Perkembangan  pesat  teknologi  memiliki  dampak signifikan  terhadap  berbagai  sektor  kehidupan  manusia. Teknologi  dapat  diartikan  sebagai  pengembangan  dan penerapan berbagai perangkat atau sistem yang mendukung manusia dalam mengatasi masalah sehari-hari. [1].  Kehidupan  sehari-hari  dipenuhi  dengan  penggunaan berbagai  teknologi  yang  tak  terpisahkan  seperti  teknologi informasi,  yang  telah  memberikan  Pengaruh  yang signifikan terasa dalam berbagai aspek kehidupan manusia. Misalnya,  dalam  konteks  pendidikan,  perkembangan teknologi telah diterapkan dalam jenjang pendidikan tinggi melalui Sistem Karir dan Tracer Study. Sistem Karir dan Tracer Study berfungsi sebagai pusat pelatihan  dan  sarana  komunikasi  antara  perguruan  tinggi dengan  para  alumni.  Secara  harfiah, Tracer  Study terdiri dari  dua  kata  yaitu "tracer" yang  berarti  pencarian  atau penelusuran,  dan "study" yang  dalam  konteks  kata  kerja berarti belajar, sedangkan dalam konteks kata benda berarti pendidikan  [2].  Menurut  Dikti,  2012  Pusat  karir  di perguruan  tinggi  berperan  dalam  memenuhi  kebutuhan informasi  tentang  dunia  kerja  bagi  perguruan  tinggi  dan menjawab  tantangan  di  dunia  kerja    [3].  Menurut  Cahyo Nugroho,  2018  dengan  jumlah  lulusan  yang  mencapai ribuan,  Peran utama  perguruan  tinggi  adalah  menyiapkan lulusan  dengan  baik  untuk  mencapai  kesuksesan  dalam karir di dunia kerja dan industri [4]. Bersama dengan para pemangku  kepentingan,  perguruan  tinggi  berkolaborasi untuk  membantu  alumni  meraih  kesuksesan  dalam  karir mereka. Sistem Karir dan Tracer Study Universitas Jambi telah  dirilis  Pada  15  oktober  2022.  Sebuah  sistem  yang dikembangkan  dari  dua  sistem  yang  ada  sebelumnya  di Universitas  Jambi,  yaitu  Sistem  Karir  Universitas  Jambi dan Sistem Tracer Study Universitas Jambi, Yang sekarang namanya  menjadi  Sistem  Karir  dan Tracer  Study Universitas  Jambi  Versi  2.0.  Sistem  ini  telah  di  upgrade untuk  bagian  penelusuran  data  alumni,  pertanyaan  yang diajukan  kepada  alumni  sudah  difilter  sehingga  akan muncul  sesuai  dengan  pilihan  yang  diisi  oleh  alumni. Contohnya jika alumni memilih sudah bekerja maka untuk bagian melanjutkan pendidikan tidak ditampilkan lagi dan setelah  mengisi  bagian  tersebut  jawaban  langsung  bisa di simpan pada sistem. Dibagian Karir, alumni dapat melihat lowongan  kerja  yang  tersedia,  melihat  detail  lowongan kerja dan mengirim lamaran kerja, dan juga di sistem karir dan tracer  study baru  ini  calon  alumni  harus  atau diwajibkan  mengisi  data  Tracer  Study  pada  Sistem Informasi Karir dan Tracer Study jika mereka tidak mengisi data tracer study maka tidak bisa mengambil perlengkapan untuk  wisuda,  sehingga  dengan  hal  ini  data  tracer  study alumni mudah didapatkan dan lembaga pun tidak kesulitan lagi  memperoleh  data  alumni  untuk  kegunaan  universitas dan lainnya.
Sistem  Karir  dan  Tracer  Study  ini  mengandalkan partisipasi  alumni  dalam  memperoleh  datanya.  Sehingga perlu diketahui apakah sistem karir dan tracer study yang baru  dikembangkan  ini  sudah user  friendly, mudah digunakan  serta  mengetahui  seberapa  efektif  dan  efisien sistem  tersebut  diterapkan  di  Universitas  Jambi.  Oleh karena  itu  perlu  adanya  pengkajian  lebih  mendalam
terhadap  penggunaan  sistem  karir  dan  Tracer  Study Universitas Jambi.
Evaluasi  sistem  informasi  adalah  proses  penilaian terhadap  sistem  yang  sedang  berjalan  [5].  Penerimaan terhadap  sistem  informasi  dapat  diukur  menggunakan beberapa  model  evaluasi  yang  telah  dikembangkan  saat ini[6].  Tujuan  utama  dari  evaluasi  ini  adalah  sebagai penilaian  aksesibilitas  kegunaan  sistem,  mengevaluasi pengalaman  keterlibatan  pengguna  dalam  berinteraksi dengan  sistem,  selain  itu,  mengenali  permasalahan  yang timbul dalam sistem [7]. Menurut International Organization for Standardization (ISO) 9241-11, usability didefinisikan  tingkat  di  mana  produk  memungkinkan pengguna  tertentu  untuk  mencapai  tujuan  mereka  dengan efektivitas,  efisiensi,  dan  kepuasan  yang  optimal  dalam konteks penggunaannya [8]. Usability juga dapat diartikan sebagai  dimensi  di  mana  pengguna  mampu  memperoleh akses  ke  fungsionalitas  sistem  dengan  tingkat  efektivitas, efisiensi,  dan  kepuasan  yang  memadai  dalam  mencapai tujuan khusus [9].
Metode  pengukuran usability dikenal  sebagai System Usability Scale (SUS) telah dibuat oleh Jhon Brooke sejak tahun  1986.  SUS  memiliki  beberapa  keunggulan  yang mencakup  kemudahan  penggunaan,  di  mana  hasilnya diekspresikan  dalam  skala  0-100  yang  mudah  dipahami. Selain  itu,  metode system  usability  scale tidak  perlu melakukan  perhitungan  yang  rumit  dan  dapat  diakses secara  gratis  tanpa  biaya  tambahan.  Kevalidan  dan reliabilitas system usability scale juga telah terbukti dalam penggunaannya[10].
Heuristic  Evaluation ialah  metode  evaluasi  yang melibatkan  para  pakar  usability  sebagai  penilai  untuk mengidentifikasi  masalah  pada  suatu  sistem.  Metode  ini dikembangkan  oleh  Jakob  Nielsen  dan  Rolf  Molich,  dan menggunakan  seperangkat  heuristik  yang  sederhana  dan umum  untuk  menyusun  kritik  terhadap  sistem. Heuristic Evaluation bisa  dilaksanakan  pada  tahap  perencanaan konsep, maks bermanfaat untuk mengevaluasi konsep awal. Dalam Heuristic  Evaluation, sekelompok  kecil  evaluator memeriksa antarmuka pengguna dan menilai sejauh mana sistem  mematuhi  prinsip-prinsip  kegunaan  yang  diakui [11].
Penelitian ini bertujuan untuk menginvestigasi bagaimana  metode System  Usability  Scale dan Heuristic Evaluation dapat  diterapkan  dalam  evaluasi  sistem Informasi  Karir  dan Tracer  Study Universitas  Jambi.  Di samping  itu,  tujuan  penelitian  ini  juga  mengungkapkan hasil  evaluasi  sistem  informasi  karir  dan tracer  study Universitas  Jambi  dengan  memanfaatkan  metode  Skala Kebergunaan Sistem (System Usability Scale) dan Evaluasi Heuristik.

## II. M ETODE P ENELITIAN
Metodologi  penelitian  dalam  studi  ini  akan  mencakup topik-topik seperti populasi, sampel penelitian, rumus yang diterapkan, kerangka penelitian, metode penelitian,  kajian literatur, instrumen pengambilan data, metode analisis data, langkah  pengambilan  data,  serta  teknik  pemrosesan  data yang  diterapkan  dalam  Sistem  Karir  dan  Tracer  Study Universitas Jambi.

## A. Lokasi Penelitian
Studi ini dilakukan di Universitas Jambi dan berlokasi di Jl.  Jambi-Muara  Bulian  No.KM.  15,  Mendalo  Darat, kecamatan  Jambi  Luar  kota,  Kabupaten  Muaro  Jambi, Jambi.

## B. Populasi Penelitian
Populasi  dalam  penelitian  terdiri  oleh  para  alumni Universitas Jambi. Karena ukuran populasi yang besar dan keterbatasan  dana,  tenaga,  dan  waktu  peneliti,  ukuran populasi  tidak  diketahui  secara  akurat.  Dengan  demikian, peneliti  menggunakan  sampel  yang  berasal  dari  populasi tersebut sebagai representasi dalam riset ini.

## C. Sampel Penelitian
Pengambilan  sampel  dalam  riset  ini  memakai  metode non-probability  sampling dengan  teknik purposive sampling, karakteristik  sampel  yang  terlibat  dalam penelitian  ini  dipilih  berdasarkan  tujuan  tertentu,  bukan dengan cara acak [12]. Karena penelitian ini menggunakan dua  metode  evaluasi  yang  berbeda,  penentuan  jumlah sampel juga berbeda. Untuk Heuristic Evaluation, jumlah responden  yang  dibutuhkan  adalah  3-5  evaluator  sesuai dengan panduan Nielsen & Molich, 1990 [13]. Sedangkan untuk  metode  SUS,  karena  populasi  dalam  penelitian  ini tidak diketahui, penentuan jumlah sampel didasarkan pada pernyataan  Hair,  2013  bahwa  jumlah  sampel  minimum harus  5  kali  jumlah  indikator  pertanyaan  [14].  Dalam penelitian  ini  terdapat  10  indikator  pertanyaan,  sehingga jumlah sampel yang dibutuhkan adalah 50 responden.

## D. Desain Penelitian
Peneliti  membuat  berbagai  rangkaian  dan  tahapan dalam penyelesaian penelitian ini, yang terdiri dari struktur alur penelitian dan penjabarannya seperti yang terlihat pada Gambar 1:

## Gambar 1. Desain Alur Penelitian
1) Pra Penelitian
Di  tahap  ini,  peneliti  mengamati  dan  mengidentifikasi persoalan  yang  terdapat  pada  Sistem  Informasi  Karir  dan Tracer Study Universitas Jambi. Persoalan  tersebut adalah bagaimana cara mengevaluasi tingkat ketergunaan sistem, peneliti  juga  melakukan  analisis  literatur  yang  relevan dengan  metode System  Usability  Scale dan Heuristic Evaluation yang dipakai dalam riset ini.
2) Metode
Penelitian  ini  menerpakan metode  System  Usability  Scale (SUS) dan Heuristic Evaluation (HE) sebagai teknik yang dipakai  dalam  evaluasi  sistem  informasi  karir  dan tracer study Universitas Jambi.
3) Pengumpulan Data
Pengambilan  data  adalah  aspek  menjadi  faktor  utama dalam  penelitian  karena  mempengaruhi  kelancaran  dan keberhasilan  penelitian.  Pada  langkah  ini,  peneliti memperoleh data dengan memanfaatkan angket yang telah diberikan  melalui google  form yang  berisi  sejumlah pertanyaan untuk mengukur variabel yang akan diuji. Dalam  rangka  menetapkan  populasi  dan  sampel,  pada penelitian  ini  tidak  diketahui  populasi  yang  pasti.  Maka, peneliti  mengadopsi  pendekatan nonprobability  sampling dengan menggunakan teknik purposive sampling [12]. [12] 4) Analisis Data
Setelah  pengumpulan  data  kuesioner,  data  tersebut  akan diproses dan diolah sesuai dengan perancangan dan tujuan penelitian  untuk  membentuk  hasil  yang  lebih  baik.  pada penelitian  ini,  data  dianalisis  dengan  menggunakan Microsoft Excel 2016.
5) Kesimpulan dan saran
Hasil akhir dari suatu kegiatan berdasarkan data yang telah didapatkan  sesuai  dengan  pengamatan  yang  telah dilakukan  peneliti  dalam  mengevaluasi  sistem  karir  dan tracer study Universitas Jambi.

## III. H ASIL DAN P EMBAHASAN
Data dari partisipan System Usability Scale menyajikan data  yang  menunjukkan  bahwa  sebagian  besar  responden adalah perempuan dengan jumlah yang signifikan 37 orang (74%)  dari  total  sampel,  sedangkan  responden  laki-laki berjumlah 13 orang (26%) dari total sampel. Karakteristik fakultas  responden  dalam  penelitian  ini  didominasi  oleh FEB  dengan  11  responden  (22%),  FST  dengan  10 responden  (20%),  FKIP  dengan  9  responden  (18%),  FH dengan  8  responden  (16%),  FAPET  dengan  5  responden (10%), FAPERTA dengan 5 responden (10%), dan FKIK dengan 2 responden (4%). Dilihat dari angkatan, responden terbanyak  berasal  dari  angkatan  2018  dengan  jumlah  28 responden  (56%),  diikuti  oleh  angkatan  2017  dengan jumlah 10 responden (20%), dan angkatan 2015 dan 2016 masing-masing  dengan  jumlah  4  responden  (8%),  serta angkatan 2019 dan 2020 masing-masing dengan jumlah 3 responden (6%) dan 1 responden (2%).
Sementara itu, data dari partisipan Heuristic Evaluation didominasi oleh laki-laki dengan jumlah 3 responden (60%) dari  total  sampel,  sedangkan  responden  perempuan berjumlah  2  orang  (40%)  dari  total  sampel.  Karakteristik pekerjaan responden dalam penelitian ini didominasi oleh pegawai negeri dengan 3 responden (60%) dan karyawan swasta dengan 2 responden (40%).
A. Perhitungan Kuesioner System Usability Scale
Pada  studi  ini,  kuesioner System  Usability  Scale memakai  skala  likert  5  poin,  di  mana  responden diinstruksikan untuk memberikan penilaian dari 1 sampai 5 dengan  keterangan:  nilai  1  menggambarkan  sangat  tidak setuju,  nilai  2  menggambarkan  tidak  setuju,  nilai  3 menggambarkan ragu-ragu, nilai 4 menggambarkan setuju, dan  nilai  5  menggambarkan  sangat  setuju.  Hanya  alumni yang  pernah  mengunjungi  sistem  informasi  Karir  dan Tracer  Study  Universitas  Jambi  dan  merupakan  calon alumni  Universitas  Jambi  yang  diperbolehkan  mengisi kuesioner. Sebagai contoh, perhitungan dengan responden
1 adalah sebagai berikut: Pernyataan 1 = 4, Pernyataan 2 = 3,  Pernyataan  3  =  3,  Pernytaan  4  =  2,  Pernyataan  5  =  3, Pernyataan  6  =  3,  Pernyataan  7  =  3,  Pernyataan  8  =  2, Pernyataan  9  =  3,  dan  Pernyataan  10  =  4.  Skor  SUS dihitung  dengan  menggunakan  rumus  ((P1  –  1)  +  (5  – P2)+(P3 – 1) + (5 – P4) + (P5 – 1) + (5 – P6) + (P7 – 1) + (5 – P8) + (P9 – 1) + (5 – P10)), yang menghasilkan ((4 – 1) + (5 – 3) + (3 – 1) + (5 – 2) + (3 – 1) + (5 – 3) + (3 – 1) + (5 – 2) + (3 – 1) + (5 – 4)) = 22, selanjutnya hasil yang didapatkan dikalikan dengan 2.5, sehingga nilai SUS yang diperoleh adalah 55.
Tabel 1. Nilai SUS Sampel  (total dikali 2,5)
No Responden Hasil Di Kali 2,5 1 Sampel 1 55 2 Sampel 2 50 3 Sampel 3 62,5 4 Sampel 4 62,5 5 Sampel 5 62,5 6 Sampel 6 60 7 Sampel 7 52,5 8 Sampel 8 60 9 Sampel 9 50 10 Sampel 10 55 11 Sampel 11 45 12 Sampel 12 67,5 13 Sampel 13 75 14 Sampel 14 92,5 15 Sampel 15 100 16 Sampel 16 77,5 17 Sampel 17 45 18 Sampel 18 70 19 Sampel 19 67,5 20 Sampel 20 60 21 Sampel 21 65 22 Sampel 22 47,5 23 Sampel 23 95 24 Sampel 24 55 25 Sampel 25 95 26 Sampel 26 65 27 Sampel 27 57,5 28 Sampel 28 55 29 Sampel 29 87,5 30 Sampel 30 57,5 31 Sampel 31 62,5 32 Sampel 32 57,5 33 Sampel 33 77,5 34 Sampel 34 52,5 35 Sampel 35 62,5 36 Sampel 36 50 37 Sampel 37 70 38 Sampel 38 50 39 Sampel 39 55 40 Sampel 40 50 41 Sampel 41 80
42 Sampel 42 42,5 43 Sampel 43 77,5 44 Sampel 44 47,5 45 Sampel 45 70 46 Sampel 46 75 47 Sampel 47 47,5 48 Sampel 48 60 49 Sampel 49 50 50 Sampel 50 100 Rata-Rata 63,75
Berdasarkan tabel 1 diatas didapat rata – rata skor SUS sebesar  63,75  sehingga  dapat  disimpulkan  bahwa  sistem informasi Karir dan Tracer Study Universitas Jambi berada pada  klasifikasi  “Passive”,  pada  Rentang  “Marginal”, dengan Rating “OK”, serta Grade C.

## Gambar 2. Skor Penelitian dalam Skala SUS
Sumber : Jhon Brooke [15]
B. Perhitungan Kuesioner Heuristic Evaluation
Pada penelitian ini, setiap sampel mengisi sebanyak 15 pertanyaan untuk 10 variabel berdasarkan prinsip Heuristic . Adapun  hasil  evaluasi  yang  didapatkan  dari  evaluasi sistem informasi karir dan tracer study Universitas Jambi dengan  menggunakan Heuristic  Evaluation dapat  dii paparkan melalui tabel berikut iini:
1. Hasil uji variabel X1 visibility of system status
Tabel 2. Hasil X1 visibility of system status
No Evaluator Evaluator P1 1 E1 3 2 E2 2 3 E3 5 4 E4 5 5 E5 4 Jumlah 19 Total 19
Berdasarkan tabel 2, X1visibility of system status didapatkan  total  19  dari  skor  ideal  25  dan  dengan  nilai persentase 76% sehingga X1 termasuk kategori baik.
2. Hasil uji variabel X2 match between system and the real world
Tabel 3. Hasil X2 match between system and the real world
No
Evaluator
Evaluator P2 P3
1 E1 2 2 2 E2 2 3 3 E3 4 5 4 E4 4 4 5 E5 3 4 Jumlah 15 18 Total 33
Berdasarkan tabel 3 X2 match between system and the  real  world diperoleh  total  33  dari  skor  ideal  50  dan dengan  nilai  persentase  66%  sehingga  X2  termasuk kategori  cukup  yang  mana  sistem  sudah  menggunakan bahasa dan kata – kata yang familiar dengan pengguna.
3. Hasil uji variabel X3 user control and freedom user Tabel 4. Hasil Evaluasi X3 user control and
freedom user No Evaluator Evaluator P4 1 E1 2 2 E2 1 3 E3 5 4 E4 3 5 E5 4 Jumlah 15 Total 15
Berdasarkan tabel 4 X3 user control and freedom user didapatkan  total  15  dari  skor  ideal  25  dan  nilai persentase  60%  sehingga  X3  termasuk  kategori  cukup dimana sistem sudah berfungsi dengan semestinya.
4. Hasil uji variabel X4 consistency and standars
Tabel 5. Hasil Evaluasi X4 consistency and standars
No Evaluator Evaluator P5 1 E1 2 2 E2 3 3 E3 5 4 E4 4 5 E5 2 Jumlah 16 Total 16
Berdasarkan tabel 5, X4 consistency and standars didapatkan  total  16  dari  skor  ideal  25  dan  didapat  nilai persentase 64% maka X4 termasuk kategori cukup artinya sistem sudah cukup mudah digunakan oleh pengguna.
5. Hasil uji variabel X5 error prevention
Tabel 6. Hasil Evaluasi X5 error prevention
No Evaluator Evaluator P6 1 E1 2 2 E2 3 3 E3 5 4 E4 3 5 E5 4 Jumlah 17 Total 17
Berdasarkan  tabel  6,  X5 error  prevention didapatkan  total  17  dari  skor  ideal  35  dan  didapat  nilai persentase 68% maka X5 termasuk kategori baik.
6. Hasil uji variabel X6 Recognize rather than recall
Tabel 7. Hasil Evaluasi X6 recognize rather than recall
No Evaluator Evaluator P7 P8 1 E1 1 3 2 E2 2 4 3 E3 4 2 4 E4 4 4 5 E5 4 4 Jumlah 15 17 Total 32
Berdasarkan  tabel  7,  X6 Recognize  rather  than recall didapat total 32 dari skor ideal 50 dan didapat nilai persentase 64% maka X6 termasuk kategori cukup, sistem mudah digunakan dan fitur didalam sistem sudah berjalan dengan semestinya.
7. Hasil uji variabel X7 Flexibility and efficiency of use
Tabel 8. Hasil Evaluasi X7 Flexibility and efficiency of use
No Evaluator Evaluator P7 P8 1 E1 2 3 2 E2 1 1 3 E3 4 4 4 E4 4 4 5 E5 3 4 Jumlah 14 16 Total 30
Berdasarkan  tabel  8  X7 flexibility  and  efficiency of use didapat total 30 dari skor ideal 50 sehingga diperoleh nilai  persentase  60%  maka  X7  termasuk  kategori  cukup artinya  sistem  sudah  memberikan  kemudahan  dan kanyamanan  bagi  pengguna  baru  maupun  yang  sudah berpengalaman.
8. Hasil uji variabel X8 Aesthetic and minimalist design
Tabel  9.  Hasil  Evaluasi  X8 Aesthetic  and
minimalist design No Evaluator Evaluator P11 1 E1 1 2 E2 2 3 E3 4 4 E4 4 5 E5 4 Jumlah 15 Total 15
Berdasarkan tabel 9 X8 aesthetic and minimalist design didapat  total  15  dari  skor  ideal  25  sehingga diperoleh nilai persentase 60% maka X8 termasuk kategori cukup  artinya  sistem  sudah  Menyajikan  informasi  yang relevan dan tampilan yang sesuai dengan kebutuhan sistem situs web.
9. Hasil uji variabel X9 Help users recognize, diagnose,
and recover from error
Tabel  10.  Hasil  X9 Help  users  recognize,  diagnose,
and recover from error
No Evaluator Evaluator  P12  P13 1 E1 2 2 2 E2 2 1 3 E3 5 4 4 E4 3 3 5 E5 4 3 Jumlah 16 13 Total 29
Berdasarkan  tabel  10  X9 help  users  recognize, diagnose and recover from error didapat total 29 dari skor ideal 50 sehingga diperoleh nilai persentase 58% maka X9 termasuk kategori cukup.
10. Hasil uji variabel X10 Help and documentation
Tabel 11. Hasil Evaluasi X10 Help and documentation
No Evaluator Evaluator  P14  P15 1 E1 1 1 2 E2 2 2 3 E3 5 4 4 E4 4 4
5
E5 5 4 Jumlah 17 15 Total 32
Berdasarkan tabel 11 X10 help and documentation didapat total 32 dari skor ideal 50 sehingga diperoleh  nilai  persentase  64%  maka  X10  termasuk kategori cukup.
Berdasarkan  hasil  pada  semua  tabel  diatas  dari masing – masing variabel X1, X2, X3, X4, X5, X6, X7, X8, X9 dan X10 termasuk dalam kategori cukup dan dari hasil persentasenya ditampilkan dalam grafik sebagai berikut.
Gambar 3. Hasil nilai persenntase per variabel Pada  gambar  diatas  merupakan  grafik  dari  hasil nilai  persentase  dari  masing  –  masing variabel  10  prinsip heuristic. Setelah dilakukannya perhitungan setiap masing –  masing  variabel  dapat  rekapitulasi  indeks  skor  dalam tabel.
Tabel 12. Rekap hasil 10 prinsip evaluasi heuristik
No  Variabel Skor Total Skor ideal Persentase  Ket 1 X1 19 25 76% B 2 X2 33 50 66% C 3 X3 15 25 60% C 4 X4 16 25 64% C 5 X5 17 25 68% B 6 X6 32 50 64% C 7 X7 30 50 60% C 8 X8 15 25 60% C 9 X9 29 50 58% C 10  X10 32 50 64% C Total 238 375 63% C
Berdasarkan Tabel 12 maka dapat dilihat hasil per variabelnya ada 2 variabel yang termasuk kategori interval baik dan 8 variabel termasuk kategori interval cukup. Dari setiap  variabel  maka  mendapatkan  total  nilai keseluruhan adalah  sebanyak  238  dari  skor  idealnya  375  dan  skor persentase  63%  yang  didapat  dari 𝑠𝑘𝑜𝑟 𝑡𝑜𝑡𝑎𝑙 𝑠𝑘𝑜𝑟 𝑖𝑑𝑒𝑎𝑙 × 100%
sehingga  mendapatkan  hasil 238 375 × 100% = 63% dengan  demikian  persentase  63%  maka  hasil  evaluasi menggunakan Heuristic  Evaluation sistem informasi Karir dan Tracer Study Universitas jambi masuk dalam interval “Cukup”.
X1 X2 X3 X4 X5 X6 X7 X8 X9 X10
76% 66% 60% 64% 68% 64% 60% 60% 58% 64%

## Hasil Nilai Persentase Per Variabel
Gambar 4. Skor total akhir
Gambar 5. Nilai persentase akhir[12]
Berdasarkan  hasil  akhir  yang didapatkan  dari 10 prinsip  heuristik  mendapatkan  skor  total  238  dan persentase  63%  yang  mana  skor  total  masuk  ke  dalam kategori  baik  dan  persentase  masuk  ke  dalam  kategori cukup  artinya  sistem  sudah  layak  digunakan  dan  fitur didalam sistem sudah berjalan dengan semestinya.

## IV. K ESIMPULAN
Penelitian  ini  mengunakan  dua  metode  yaitu  System Usability  Scale  (SUS)  dan  Heuristic  Evaluation  untuk mengevaluasi  sistem  informasi  Karir  dan  Tracer  Study Universitas Jambi. Evaluasi dilakukan dengan menyebarkan kuesioner menggunakan skala likert kepada pengguna  biasa  untuk  metode  SUS  dan  kepada  para  ahli yang  sudah  pernah  mengunjungi  sistem  informasi  Karir dan  Tracer  Study  Universitas  Jambi  untuk  metode Heuristic Evaluation.
Berdasarkan  hasil  evaluasi  dengan  metode  SUS, penelitian  ini  mendapatkan  skor  SUS  sebesar  63,75  yang menunjukkan  hasil  percentile  rank  65%.  Nilai  tersebut berada di grade C dan termasuk kategori OK, yang artinya sistem  sudah  layak  digunakan.  Skor  SUS  63,75 menunjukkan  bahwa  sistem  ada  pada  kategori  marginal, yang berarti penggunaan sistem informasi Karir dan Tracer Study  Universitas  Jambi  sudah  dapat  diterima.  Net Promoter  Score  (NPS)  dari  Sampel  dalam  penelitian diketahui  bersifat  passive  artinya  pengguna  memberikan respon baik ketika merasa puas.
Sementara  itu,  hasil  evaluasi  menggunakan  metode Heuristic  Evaluation yang  melibatkan  para  ahli  sebagai evaluator, diperoleh nilai sebesar 63% yang menunjukkan bahwa sistem sudah layak digunakan dan fitur-fitur dalam sistem  sudah  berjalan  dengan  semestinya.  Maka,  dapat ditarik kesimpulan sistem informasi Karir dan Tracer Study Universitas  Jambi  sudah  cukup  baik  dan  dapat  diterima untuk digunakan.
D AFTAR P USTAKA
[1] E. Fausa, “Beberapa Aspek dalam Pengembangan Teknologi Informasi,” Unisia , vol. 15, no. 27, pp. 19–26, 1995, doi: 10.20885/unisia.vol15.iss27.art2.
[2] K. Aqbar, S. Nur, H. Wijaya, and S. Tinggi Ilmu Islam dan Bahasa Arab Makassar, “Evaluasi dan Pengembangan Capaian Kompetensi Lulusan  Melalui Tracer Study,” Adaara J. Manaj.
Pendidik. Islam , vol. 11, no. 2, pp. 90–105, 2021, [Online]. Available: https://www.jurnal.iain- bone.ac.id/index.php/adara/article/view/2133
[3]
D. Dikti, Buku Panduan Pusat Karir , II. Kementerian Pendidikan dan Kebudayaan Direktorat Jenderal Pendidikan Tinggi Direktorat Pembelajaran Dan Kemahasiswaan, 2012.
[4] E. Cahyo Nugroho, I. Nugroho, ) Stmik, and A. Surakarta, “Sistem Pusat Karir Dan Tracer Study Perguruan Tinggi,” Ijns.org Indones. J. Netw. Secur. , vol. 7, no. 1, pp. 2302–5700, 2018.
[5] H. A. Mumtahana and S. Riyanto, “Evaluasi Kebergunaan
Sistem Informasi Kepegawaian Universitas PGRI Madiun Dengan Pieces Framework Dan Usability Testing,” Pros.
Semin. Nas. Teknol. Inf. dan Komun. , vol. 1, no. 1, pp. 1–7, 2019, [Online]. Available: http://prosiding.unipma.ac.id/index.php/SENATIK/article/vie w/869/836 [6]
Habiburrahman, “Model-Model Evaluasi dalam Sistem Informasi Perpustakaan,” JIPI J. Ilmu Perpust. Inf. , vol. 1, no.
1, pp. 92–101, 2016.
[7] D. H. Gutama, “Evaluasi Usability Sistem Informasi Payment Gateway Cv Adikara Payment,” Indones. J. Bus. Intell. , vol. 3, no. 1, p. 1, 2020, doi: 10.21927/ijubi.v3i1.1178.
[8] N. Bevan, J. Carter, and S. Harker, “Iso 9241-11 revised: What have we learnt about usability since 1998?,” Lect. Notes
Comput. Sci. (including Subser. Lect. Notes Artif. Intell. Lect. Notes Bioinformatics) , vol. 9169, pp. 143–151, 2015, doi: 10.1007/978-3-319-20901-2_13.
[9] W. Handiwidjojo and L. Ernawati, “Pengukuran Tingkat Ketergunaan ( Usability ) Sistem Informasi Keuangan,” Juisi , vol. 02, no. 01, pp. 49–55, 2016.
[10] J. Brooke, “SUS : Sebuah Retrospektif,” pp. 29–40, 2020.
[11] J. Nielsen, “Enhancing the explanatory power of usability heuristics,” Conf. Hum. Factors Comput. Syst. - Proc. , pp. 152–158, 1994, doi: 10.1145/191666.191729.
[12] Sugiyono, Metode Penelitian Kuantitatif, Kualitatif, dan R&D , 26th ed. Bandung: CV.Alfabeta, 2016.
[13] J. Brejcha, “Heuristic Evaluation,” Cross-Cultural Human- Computer Interact. User Exp. Des. , no. April, pp. 163–166, 2015, doi: 10.1201/b18059-15.
[14] J. F. Hair, W. C. Black, B. J. Babin, and R. E. Anderson, Multivariate Data Analysis . Pearson Education Limited, 2013.
[Online]. Available:
https://books.google.co.id/books?id=VvXZnQEACAAJ
[15]
J. Brooke, “SUS: A ‘Quick and Dirty’ Usability Scale,” Usability Eval. Ind. , pp. 207–212, 2020, doi:
10.1201/9781498710411-35.