## JEPIN
(Jurnal Edukasi dan Penelitian Informatika)
ISSN(e): 2548-9364 / ISSN(p) : 2460-0741
Vol. 8 No. 2 Agustus 2022

## Aplikasi DIVAYANA Berbasis Ketimpangan Asuri- Daiwi Sampad Sebagai Alat Evaluasi Keefektifan Flipped Learning
Dewa Gede Hendra Divayana #1 , Ni Ketut Widiartini *2 , P. Wayan Arta Suyasa #3
# Program Studi Pendidikan Teknik Informatika, Universitas Pendidikan Ganesha Jl. Udayana No. 11 Singaraja, Bali, Indonesia
1 hendra.divayana@undiksha.ac.id
3 arta.suyasa@undiksha.ac.id
* Program Studi Magister Penelitian dan Evaluasi Pendidikan, Universitas Pendidikan Ganesha Jl. Udayana No. 11 Singaraja, Bali, Indonesia
2 ketut.widiartini@undiksha.ac.id
Abstrak—Keefektifan aplikasi evaluasi yang digunakan untuk menentukan  skor  ketimpangan  positif  dan  negatif  dalam pelaksanaan flipped learning sangat penting untuk diketahui. Skor  ketimpangan  positif  digunakan  sebagai  dasar  dalam menunjukkan aspek-aspek penunjang keberhasilan pelaksanaan  flipped  learning,  sedangkan  skor  ketimpangan negatif sebagai dasar dalam menunjukkan aspek-aspek yang perlu  dibenahi  agar  pelaksanaan  flipped  learning  berjalan lebih  optimal.  Penelitian  ini  bertujuan  untuk  mengetahui tingkat efektivitas aplikasi DIVAYANA berbasis ketimpangan Asuri-Daiwi  Sampad  yang  digunakan  untuk  mengevaluasi keefektifan  pelaksanaan  flipped  learning  pada  SMK  TI  di Provinsi Bali. Metode pengembangan yang digunakan untuk mewujudkan aplikasi evaluasi ini adalah metode Research & Development yang mengacu pada desain Borg & Gall. Subjek yang  terlibat  dalam  uji  efektivitas  penggunaan  aplikasi DIVAYANA  berbasis  ketimpangan  Asuri-Daiwi  Sampad adalah  sebanyak  50  orang  yang  terdiri  dari  guru  dan  siswa dari bebeberapa SMK TI di Bali. Alat yang digunakan dalam pengumpulan  data  tentang  hasil  uji  efektivitas  penggunaan aplikasi  DIVAYANA  berbasis  ketimpangan  Asuri-Daiwi Sampad  adalah  berupa  kuesioner.  Teknik  analisis  dalam penelitian ini adalah deskriptif kuantitatif dengan menginterpretasikan hasil uji efektivitas penggunaan aplikasi evaluasi berdasarkan standar efektivitas yang mengacu skala sebelas.  Hasil  penelitian  ini  menunjukkan  persentase efektivitas aplikasi DIVAYANA berbasis ketimpangan Asuri- Daiwi  Sampad  sebesar  90,88%  sehingga  termasuk  dalam kategori  sangat  baik.  Dampak  dari  hasil  penelitian  ini  di bidang pendidikan teknik informatika adalah menghadirkan suatu terobosan baru berupa aplikasi yang dapat digunakan untuk  mengevaluasi  secara  akurat  keefektifan  flipped learning dalam proses pembelajaran.
Kata  kunci — Aplikasi  DIVAYANA,  Ketimpangan,  Asuri Sampad, Daiwi Sampad, Flipped Learning.

## I. P ENDAHULUAN
Flipped  learning merupakan  salah  satu  model pembelajaran  yang  dapat  digunakan  pada  masa  pandemi covid-19 dan juga pasca covid-19 [1-5]. Flipped learning memungkinkan proses pembelajaran dilakukan dari rumah maupun  di  dalam  kelas  secara  langsung.  Secara  prinsip, flipped learning dapat memfasilitasi siswa untuk lebih aktif dalam  mempelajari  materi  pelajaran  yang  diberikan  oleh guru  [6-10].  Guru  terlebih  dulu  memberikan  materi pelajaran  berformat  digital  kepada  siswa  sebelum pembelajaran tatap muka secara langsung di kelas. Materi pelajaran  itu  dapat  dipelajari  sebelumnya  dengan  cermat dan  mendalam  oleh  siswa  dari  rumah  dan  siswa  dapat bertanya,  berdiskusi  dan  membahas  materi  yang  tidak dipahaminya dengan guru saat pembelajaran di kelas.
Kenyataannya,  tidak  semua  guru  dan  siswa  mampu melaksanakan flipped  learning secara  efektif.  Hal  ini terkendala oleh beberapa faktor umum, seperti: minimnya fasilitas dan sarana prasarana penunjang penyelenggaraan flipped  learning ,  serta  rendahnya  kemampuan  siswa  dan guru  dalam  mengoperasikan  perangkat  keras  atau  lunak yang digunakan dalam pelaksanaan flipped learning . Namun,  kendala-kendala  tersebut  tidaklah  bisa  secara pasti  digunakan  sebagai  dasar  untuk  mengambil  suatu keputusan  dalam  menghentikan  ataupun  melanjutkan pelaksanaan flipped  learning .  Oleh  karena  itu,  perlu dilakukan  evaluasi  secara  lebih  komprehensif  untuk menentukan  keefektifan  pelaksanaan flipped  learning . Secara  umum,  evaluasi  sangat  penting  dibutuhkan  dalam bidang  pendidikan  untuk  mengetahui  seberapa  efektif program  pendidikan,  kebijakan  pendidikan,  model pembelajaran, dan layanan pendidikan lainnya yang sedang dan  telah  selesai  dijalankan  [11-15].  Tujuan  utama  dari suatu evaluasi adalah memperoleh suatu rekomendasi yang
tepat  untuk  nantinya  diberikan  kepada  para  pemangku kepentingan  dalam  mengambil  keputusan  terhadap  suatu objek  yang  dievaluasi  [16-20].  Rekomendasi  yang  tepat dalam suatu evaluasi dapat tercapai jika alat evaluasi yang digunakan juga tepat.
Keefektifan flipped  learning sebagai  suatu  model pembelajaran juga perlu diukur menggunakan alat evaluasi yang  tepat.  Namun,  keterbatasan  yang  ditemukan  di lapangan adalah belum ada alat evaluasi yang benar-benar dapat digunakan secara tepat untuk mengukur ketimpangan positif  dan  negatif  yang  mempengaruhi  keefektifan pelaksanaan flipped learning .
Berdasarkan  hal  tersebut,  maka  perlu  dihadirkan  suatu alat  evaluasi  yang  mampu  untuk  menentukan  skor ketimpangan  positif  sebagai  dasar  yang  menunjukkan aspek-aspek  penunjang  keberhasilan  pelaksanaan flipped learning .  Disamping  itu,  alat  evaluasi  tersebut  juga diharapkan  mampu  untuk  menentukan  skor  ketimpangan negatif sebagai dasar yang menunjukkan aspek-aspek yang perlu  dibenahi  agar  pelaksanaan flipped  learning lebih efektif.
Salah  satu  bentuk  inovasi  yang  ditawarkan  untuk menghadirkan alat evaluasi yang mampu menentukan skor ketimpangan  positif  dan  negatif  tersebut  adalah  berupa aplikasi DIVAYANA berbasis  ketimpangan Asuri-Daiwi Sampad .  Suatu  inovasi  baru  dikatakan  berhasil  apabila tingkat keefektifannya sudah teruji. Oleh karena itu, tujuan penelitian ini adalah untuk mengetahui tingkat efektivitas aplikasi DIVAYANA berbasis  ketimpangan Asuri - Daiwi Sampad .  Berdasarkan  tujuan  tersebut,  maka  dapat dirumuskan  masalah  penelitian  ini.  Rumusan  masalah penelitian  ini  yaitu  bagaimanakah  tingkat  efektivitas aplikasi DIVAYANA berbasis  ketimpangan Asuri-Daiwi Sampad yang  digunakan  untuk  mengevaluasi  keefektifan pelaksanaan flipped learning ?
Penelitian  ini  hadir  karena  dilatarbelakangi  dari keterbatasan  yang  ditemukan  dari  penelitian-penelitian sebelumnya. Penelitian yang dilakukan oleh Hasanudin dkk [21] menunjukkan kegiatan evaluasi terhadap perkuliahan daring  pada  mata  kuliah  keterampilan  menulis.  Evaluasi tersebut  dilakukan  menggunakan  model CIPP ( Context- Input-Process-Product ).
Keterbatasan penelitian Hasanudin dkk adalah belum menunjukkan adanya aspek- aspek  yang  menjadi  penunjang  keberhasilan  perkuliahan daring  dan  aspek-aspek  penghambat  keberhasilan  yang patut  untuk  diperbaiki  atau  dihentikan.  Penelitian  yang dilakukan  oleh  Wakano dkk [22]  menunjukkan  hasil evaluasi  terhadap  sistem  pembelajaran  online  pada  masa pandemi Covid-19 menggunakan komponen evaluasi CIPP . Keterbatasan  penelitian  Wakano dkk adalah  belum  ada ketimpangan positif dan negatif yang ditunjukkan sebagai dasar  penentuan  keberhasil  pelaksanaan  pembelajaran online tersebut. Penelitian yang dilakukan oleh Syahrir dkk [23]  menunjukkan  evaluasi  terhadap  program  Pendidikan Jarak  Jauh  (PJJ).  Keterbatasan  penelitian  Syahrir dkk adalah  belum  menunjukkan  aspek-aspek  ketimpangan positif  dan  negatif  yang  mempengaruhi  keefektifan program  pendidikan  jarak  jauh  tersebut.  Penelitian  yang
dilakukan  oleh  Riyanda dkk [24]  menunjukkan  kegiatan evaluasi terhadap pengimplementasian sistem pembelajaran  daring  pada  FKIP  Universitas  Lampung. Keterbatasan  penelitian  Riyanda dkk adalah  belum menunjukkan adanya skor ketimpangan positif dan negatif yang  mempengaruhi  keberhasilan  pengimplementasian sistem  pembelajaran  daring  tersebut.  Penelitian  yang dilakukan  oleh  Fortuna dkk [25]  juga  menunjukkan  hasil evaluasi terhadap penerapan pembelajaran daring khususnya  pada  SMK  Negeri  7  Malang  dengan menggunakan  model  evaluasi CIPP .  Keterbatasan penelitian  Fortuna dkk tersebut  adalah  tidak  ada menunjukkan  aspek-aspek  evaluasi  yang  menunjang keberhasilan dan aspek-aspek yang menghambat keberhasilan  penerapan  pembelajaran  daring.  Penelitian yang  dilakukan  oleh  Kuswanto  [26]  menunjukkan  hasil evaluasi  pembelajaran  daring  di  SMK  PP  Negeri  Jambi menggunakan model CSE-UCLA ( Center for the Study of Evaluation-University  of  California  in  Los  Angeles ). Keterbatasan  penelitian  Kuswanto  tersebut  adalah  belum melakukan  kajian  terkait  penentuan  aspek-aspek  yang menunjang keberhasilan dan aspek-aspek yang menghambat  keberhasilan  pelaksanaan  pembelajaran daring di SMK PP Negeri Jambi tersebut. Penelitian yang dilakukan oleh Nurfadhilah dkk [27] menunjukkan evaluasi proses  pembelajaran  di  era  new  normal  menggunakan model evaluasi formative-summative. Keterbatasan penelitian  Nurfadhilah dkk adalah  belum  menunjukkan adanya  ketimpangan  positif  dan  negatif  yang  menunjang keberhasilan  pelaksanaan  pembelajaran  pada  era  new normal. Penelitian yang dilakukan oleh Magdalena dkk [28] menunjukkan  hasil  evaluasi    dalam  pembelajaran  tematik siswa kelas VI menggunakan model formative-summative. Keterbatasan penelitian Magdalena dkk juga sama dengan penelitian  Nurfadhilah  dkk  yang  belum  menunjukkan ketimpangan positif dan negatif yang menjadi dasar untuk menunjang keberhasilan pelaksanaan proses pembelajaran. Penelitian Rizqa dkk [29] menunjukkan tingkat efektivitas pelaksanaan  pembelajaran  daring  untuk  menunjang  mata pelajaran  Ekonomi  di  MAAn-Nur  Bakalrejo  Demak. Keterbatasan  penelitian  Rizqa dkk adalah  belum menggunakan  model  evaluasi  untuk  melakukan  uji keefektifan  pelaksanaan  pembelajaran  daring  tersebut. Penelitian yang dilakukan oleh Mahbub [30] menunjukkan kegitan  optimalisasi  terhadap  penggunaan Learning Management  System (LMS)  dalam  pembelajaran  virtual. Keterbatasan  penelitian  Mahbub  adalah  belum  dilakukan evaluasi  menggunakan  model  evaluasi  yang  tepat  untuk menentukan  tingkat  keoptimalan  penggunaan  LMS tersebut dalam pembelajaran virtual.
Mengacu  pada  rumusan  masalah  dan  beberapa keterbatasan  penelitian-penelitian  sebelumnya,  maka peneliti  tertarik  untuk  melaksanakan  penelitian  lebih mendalam  terkait  uji  efektivitas  aplikasi DIVAYANA berbasis ketimpangan Asuri-Daiwi Sampad yang digunakan  untuk  mengevaluasi  keefektifan  pelaksanaan flipped learning .

## II. M
ETODE P ENELITIAN
Pendekatan penelitian ini adalah penelitian pengembangan.  Desain  pengembangan  yang  digunakan adalah mengacu pada desain model Borg and Gall .  Model Borg and Gall memiliki 10 tahapan,  diantaranya [31-33]:
(1)  penelitian  dan  pengumpulan  data  lapangan,  (2) perencanaan  penelitian,  (3)  pengembangan  desain,  (4) uji coba  awal,  (5)  revisi  hasil  uji  coba  awal,  (6)  uji  coba lapangan,  (7)  revisi    hasil  uji coba  lapangan, (8)  uji  coba pemakaian,  (9) revisi  produk  akhir,  dan (10) desiminasi dan    implementasi    produk    akhir.  Sesuai  dengan  tujuan penelitian  ini,  maka  tahapan  yang  digunakan  dalam penelitian ini adalah uji coba lapangan untuk menentukan keefektifan  penggunaan  aplikasi DIVAYANA berbasis ketimpangan Asuri-Daiwi  Sampad untuk  mengevaluasi keefektifan pelaksanaan flipped learning .
Subjek yang dilibatkan dalam melakukan uji efektivitas penggunaan  aplikasi DIVAYANA berbasis  ketimpangan Asuri-Daiwi  Sampad untuk  mengevaluasi  keefektifan pelaksanaan flipped  learning adalah  sebanyak  50  orang, diantaranya 20 guru, dan 30 siswa dari beberapa SMK TI di  Bali.  Jumlah  pakar  yang  dilibatkan  dalam  pemberian bobot terhadap masing-masing standar keberhasilan flipped learning adalah  sebanyak  4  orang,  diantaranya  2  pakar bidang evaluasi pendidikan dan 2 pakar bidang pendidikan teknik informatika.
Objek yang menjadi sasaran dalam penelitian ini adalah DIVAYANA berbasis  ketimpangan Asuri-Daiwi  Sampad untuk  mengevaluasi  keefektifan  pelaksanaan flipped learning pada SMK TI di Bali. Instrumen yang digunakan untuk  mendapatkan  data  terkait  hasil  uji  efektivitas penggunaan  aplikasi DIVAYANA berbasis  ketimpangan Asuri-Daiwi Sampad adalah berupa kuesioner.
Lokasi pengisian kuesioner tersebut dilakukan  di SMK TI  yang  tersebar  di  6  Kabupaten  di  Bali  yaitu  Gianyar, Buleleng, Tabanan, Badung, Klungkung, dan Denpasar.
Simulasi  perhitungan  penentuan  ketimpangan  positif dan  negatif  paling  dominan  dalam  pelaksanaan flipped learning dilakukan  menggunakan  formula DIVAYANA . Formula DIVAYANA memiliki 3 persamaan.
Persamaan (1)  digunakan untuk menentukan perbaikan rerata bobot, persamaan (2) digunakan dalam menentukan nilai vektor-D sebagai nilai normalisasi, dan persamaan  (3) untuk menentukan nilai vektor-R sebagai nilai perangkingan.  Adapun  ketiga  persamaan  tersebut  dapat ditunjukkan sebagai berikut [34,35].
(1) (1)
Keterangan:
𝑥̅
=  Rerata  bobot  yang  diberikan  oleh  masing- masing  pengambil  keputusan  (pakar  dan evaluator) melalui diskusi bersama
W Yack =  Perbaikan rerata bobot
(2)
Dimana:  (W yack ) j = 1; and i=1,2,3,...,n.
Keterangan: D =   Vektor-D x =   Skor penilaian tiap kriteria m
=   total keseluruhan pengambil keputusan (pakar dan evaluator)
(3)
Keterangan: D =   Vektor-D
R
=   Vektor-R
Teknik  analisis  yang  digunakan  dalam  penelitian  ini adalah  deskriptif  kuantitatif  dengan  menafsirkan  hasil  uji efektivitas  penggunaan  aplikasi DIVAYANA berbasis ketimpangan Asuri-Daiwi  Sampad berdasarkan  standar efektivitas  yang  mengacu  skala  sebelas.  Adapun  formula yang  digunakan  untuk  menentukan  tingkat  efektivitas penggunaan  aplikasi DIVAYANA berbasis  ketimpangan Asuri-Daiwi Sampad dapat dilihat pada persamaan (4) [36- 42],  sedangkan  standar  efektivitas  yang  mengacu  skala sebelas dapat dilihat pada Tabel I [43].
Tingkat efektivitas = (f/N) × 100%
(4)
Keterangan: f   = total nilai perolehan N   = total nilai maksimum
TABEL I S TANDAR E FEKTIVITAS Y ANG M ENGACU S KALA S EBELAS Persentase Efektivitas (%) Kategori Tindak Lanjut 95-100 Istimewa Tidak Perlu Perbaikan 85-94 Sangat Baik Tidak Perlu Perbaikan 75-84 Baik Tidak Perlu Perbaikan 65-74 Lebih dari cukup Perlu Perbaikan 55-64 cukup Perlu Perbaikan 45-54 Hampir cukup Perlu Perbaikan 35-44 Kurang Perlu Perbaikan 25-34 Sangat Kurang Perlu Perbaikan 15-24 Buruk Perlu Perbaikan 5-14 Sangat Buruk Perlu Perbaikan 0-4 Amat Sangat Buruk  Perlu Perbaikan
 = = n j j j j Yack x x W 1 ) ( m x D n j w ij i j Ya ck  = = 1 ) (  = = n i i i i D D R 1
III. H

## ASIL DAN P EMBAHASAN

## A. Hasil
Sebelum menunjukkan hasil uji efektivitas penggunaan aplikasi DIVAYANA berbasis  ketimpangan Asuri-Daiwi Sampad ,  terlebih  dahulu  perlu  ditunjukkan  tampilan aplikasi  dan  simulasi  perhitungannya.  Adapun  tampilan aplikasi DIVAYANA berbasis  ketimpangan  ( discrepancy ) Asuri-Daiwi  Sampad selengkapnya  dapat  dilihat  pada Gambar 1-10.
Gambar. 1  Tampilan fitur login
Gambar  1  menunjukkan  form  yang  digunakan  sebagai fasilitas  untuk  masuk  ke  dalam  aplikasi DIVAYANA berbasis  ketimpangan Asuri-Daiwi  Sampad .  Form  ini memiliki 2 textbox untuk username dan password. Jika user lupa dengan username dan passwordnya, maka  user dapat menggunakan  fasilitas  “ forget password ”  untuk mencarinya kembali.
Gambar. 2  Tampilan form dashboard
Gambar  2  menunjukkan  form  yang  digunakan  sebagai pointer  ke  semua  menu  yang  tersedia  pada  aplikasi DIVAYANA berbasis  ketimpangan Asuri-Daiwi  Sampad . Adapun  menu-menu  yang  tersedia,  meliputi: features , master data , reports , setting , dan users . Pada menu features terdapat  sub  menu assesment untuk  memasukkan  data penilaian user.
Pada  menu master data  terdapat  sub  menu data ,  sub menu bobot ,  dan  sub  menu kesesuaian .  Sub  menu data berfungsi  untuk  memasukkan  penilaian  responden.  Sub menu bobot berfungsi  untuk  memasukkan  bobot  yang diberikan oleh pakar. Sub menu kesesuaian berfungsi untuk memverifikasi  kesesuaian  antara  alternatif  pemecahan kendala dengan standar keberhasilan.
Pada menu reports terdapat sub menu ketimpangan , sub menu ketimpangan dominan , sub menu R Vector , dan sub menu Decision .    Sub  menu ketimpangan berfungsi  untuk menentukan  nilai  ketimpangan  positif  dan  negatif.  Sub menu ketimpangan dominan berfungsi untuk menampilkan matrix  ketimpangan  positif  dan  negatif  paling  dominan. Sub  menu R  Vector berfungsi  untuk  menampilkan  nilai vektor-R  untuk  ketimpangan  positif  dan  nilai  vektor-R untuk ketimpangan negatif. Sub menu Decision berfungsi untuk menentukan keputusan dan memberikan rekomendasi  berdasarkan  perangkingan  ketimpangan positif dan negatif.
Pada  menu settings terdapat  beberapa  sub  menu, diantaranya:  sub  menu histories ,  sub  menu feature categories ,  sub  menu feature  masters ,  dan  sub  menu set rating .  Sub  menu histories berfungsi  untuk  menampilkan rekapitulasi  data  yang  telah  diproses  dalam  aplikasi berdasarkan  tanggal.  Sub  menu feature categories berfungsi  untuk  mengatur  aktivasi  semua  menu  yang  ada pada  aplikasi.  Sub  menu feature  masters berfungsi  untuk mengatur  aktivasi  semua  data  master  yang  ada  pada aplikasi.  sub  menu set  rating berfungsi  untuk  mengatur nilai rating kepentingan.
Pada  menu users terdapat  beberapa  sub  menu, diantaranya:  sub  menu  pengaturan users dan  sub  menu pembuatan group  users .  Sub  menu  pengaturan users berfungsi  untuk  mengatur  peran  user  dalam  aplikasi.  Sub menu  pembuatan group  users berfungsi  untuk  membuat pengelompokan tiap user dalam 1 kelompok transaksi data, sehingga  nantinya  memudahkan  dalam  pembuatan  data rekapitulasi.
Gambar 3. Tampilan form input respon
Gambar  3  menunjukkan  form  untuk  memasukkan data persepsi  yang  diberikan  oleh  responden  terhadap  aspek- aspek  evaluasi  yang  terkait  alternatif  pemecahan  kendala dalam pelaksanaan flipped learning pada SMK TI di Bali. Adapun aspek-aspek evaluasi yang dimaksud, diantaranya: 1)  sosialisasi  kebijakan  merdeka  belajar  kepada  warga sekolah;  2)  penyesuaian  kebijakan  dan  regulasi  sekolah dengan  kebijakan  pemerintah;  3)  penyiapan  perangkat lunak  dan  perangkat  keras  penunjang flipped  learning secara  maksimal;  4)  menyiapkan  kemampuan  pengelola agar  dapat  memelihara  platform flipped  learning secara optimal  dan  berkelanjutan;  5)  menyiapkan  kemampuan pengguna  agar  dapat  mengoperasikan flipped  learning secara  optimal;  6)  menyiapkan  konten  materi  yang  dapat
menarik  minat  siswa  untuk  belajar;  7)  mengumpulkan anggaran secara optimal sesuai kebutuhan; 8) mempersiapkan  akses  internet  yang  stabil.  Aspek-aspek evaluasi  tersebut  diperoleh  dari  beberapa  alternatif pemecahan  kendala  pelaksanaan flipped  learning pada SMK TI di Bali.
Gambar 4. Tampilan form data management
Gambar 4 menunjukkan form untuk memasukkan data- data dasar yang dibutuhkan dalam menentukan keefektifan pelaksanaan pelaksanaan flipped learning pada SMK TI di Bali.  Adapun  data-data  dasar  tersebut,  diantaranya:  1) indikator-indikator  penyebab  terjadinya  pelaksanaan flipped  learning pada  SMK  TI  di  Bali,  2)  kendala pelaksanaan  flipped  learning  pada  SMK  TI  di  Bali,  3) alternatif pemecahan kendala pelaksanaan flipped learning pada SMK TI di Bali, 4) standar keberhasilan pelaksanaan pelaksanaan flipped learning pada SMK TI di Bali, dan 5) persentasenya standar keefektifannya.

## Gambar 5. Tampilan form pembobotan
Gambar 5 menunjukkan form untuk memasukkan bobot para  pakar  ke  masing-masing  standar    keberhasilan pelaksanaan  pelaksanaan flipped  learning .  Rentang  skor bobot  adalah  1-5.  Bobot  1  untuk  kategori  buruk,  bobot  2 untuk kategori kurang, bobot 3 untuk kategori cukup, bobot 4  untuk kategori  baik,  dan bobot  5  untuk  kategori  sangat baik.

## Gambar 6. Tampilan form verifikasi kesesuaian
Gambar  6  menunjukkan  form  untuk  melakukan verifikasi  kesesuaian  antara  standar  keberhasilan  dengan alternatif pemecahan kendala pelaksanaan flipped learning pada  SMK  TI  di  Bali.  Jika  sudah  sesuai  standar keberhasilan,  maka  selanjutnya  pada  dilakukan  proses pehitungan skor ketimpangan terhadap alternatif-alternatif pemecahan kendala tersebut.

## Gambar 7. Tampilan form penyimpanan data ketimpangan
Gambar  7  menunjukkan  form  untuk  menentukan ketimpangan  positif  dan  ketimpangan  negatif  dari  setiap alternatif pemecahan kendala pelaksanaan flipped learning . Ketimpangan positif diperoleh jika skor persepsi responden lebih besar dibandingkan skor minimal standar efektivitas. Ketimpangan  negatif  diperoleh  jika  skor  persepsi responden  lebih  kecil  dibandingkan  skor  minimal  standar efektivitas.
Gambar 8. Tampilan form data awal untuk penentuan ketimpangan positif dan negatif paling dominan
Gambar  8  menunjukkan  form  untuk  menentukan  data awal  dalam  menghitung  ketimpangan  positif  dan ketimpangan  negatif  yang  paling  dominan  dari  setiap alternatif pemecahan kendala pelaksanaan flipped learning . Data  awal  untuk  ketimpangan  positif  paling  dominan diperoleh  dengan  melakukan  perhitungan  pengurangan skor  100  dengan  skor  persepsi  responden  jika  alternatif termasuk  dalam  ketimpangan  negatif.  Jika  alternatif termasuk dalam ketimpangan positif, maka data awal untuk ketimpangan  positif  paling  dominan  diperoleh  dengan melakukan  penambahan  skor  persepsi  responden  dengan skor ketimpangan positif.
Data  awal  untuk  ketimpangan  negatif  paling dominan diperoleh  dengan  melakukan  perhitungan  pengurangan skor  skor  persepsi  responden  dengan  skor  ketimpangan negatif jika alternatif termasuk dalam ketimpangan negatif. Jika alternatif termasuk  dalam ketimpangan positif, maka data  awal  untuk  ketimpangan  negatif  paling  dominan diperoleh  dengan  melakukan  penambahan  skor  persepsi responden dengan skor 100.
Gambar 9. Tampilan form penentuan Vektor-R
Gambar  9  menunjukkan form  untuk  menentukan  skor vektor-R untuk ketimpangan positif dan untuk ketimpangan negatif. Vektor-R untuk ketimpangan positif diperoleh  dari  hasil  normalisasi  skor-skor  ketimpangan positif,  sedangkan  Vektor-R  untuk  ketimpangan  negatif diperoleh  dari  hasil  normalisasi  skor-skor  ketimpangan negatif.

## Gambar 10. Tampilan form keputusan
Gambar  10  menunjukkan  form  untuk  menentukan keputusan.  Keputusan  diambil  berdasarkan  rekomendasi ketimpangan positif dan ketimpangan negatif. Rekomendasi  ketimpangan  negatif  diberikan  berdasarkan hasil  perangkingan  ketimpangan  negatif.  Rekomendasi ketimpangan positif diberikan berdasarkan hasil perangkingan ketimpangan positif.
Simulasi  perhitungan  untuk  mendapatkan  skor ketimpangan  positif  dan  negatif  paling  dominan  dapat dilakukan dengan menggunakan data awal pada Tabel II-V.

## TABEL II
D ATA KETIMPANGAN POSITIF DAN NEGATIF YANG TERJADI DALAM PELAKSANAAN F LIPPED L EARNING P ADA SMK TI DI P ROVINSI B ALI Alternatif Pemecahan Kendala Persentase Standar Keberhasilan (%) Persentase Persepsi Responden (%) Ketimpangan Positif Negatif Alternatif-1 88,00 88,50 0,50 0,00 Alternatif-2 86,00 90,50 4,50 0,00 Alternatif-3 88,00 90,00 2,00 0,00 Alternatif-4 87,00 88,50 1,50 0,00 Alternatif-5 87,00 90,50 3,50 0,00 Alternatif-6 86,00 85,50 0,00 0,50 Alternatif-7 84,00 82,50 0,00 1,50 Alternatif-8 88,00 90,50 2,50 0,00 Rata-rata 88.31
TABEL III
D ATA A WAL UNTUK S IMULASI P ERHITUNGAN P ENENTUAN S KOR K ETIMPANGAN P OSITIF P ALING D OMINAN Alternatif Standar Standar-1 Standar-2 Standar-3 Standar-4 Standar-5 Standar-6 Standar-7 Standar-8 Alternatif-1 88,50 89,00 89,00 89,00 89,00 89,00 89,00 89,00 Alternatif-2 95,00 90,50 95,00 95,00 95,00 95,00 95,00 95,00 Alternatif-3 92,00 92,00 90,00 92,00 92,00 92,00 92,00 92,00 Alternatif-4 90,00 90,00 90,00 88,50 90,00 90,00 90,00 90,00 Alternatif-5 94,00 94,00 94,00 94,00 90,50 94,00 94,00 94,00 Alternatif-6 14,50 14,50 14,50 14,50 14,50 85,50 14,50 14,50 Alternatif-7 17,50 17,50 17,50 17,50 17,50 17,50 82,50 17,50 Alternatif-8 93,00 93,00 93,00 93,00 93,00 93,00 93,00 90,50 TABEL IV D ATA A WAL UNTUK S IMULASI P ERHITUNGAN P ENENTUAN S KOR K ETIMPANGAN N EGATIF P ALING D OMINAN Alternatif Standar Standar-1 Standar-2 Standar-3 Standar-4 Standar-5 Standar-6 Standar-7 Standar-8 Alternatif-1 88,50 11,50 11,50 11,50 11,50 11,50 11,50 11,50 Alternatif-2 9,50 90,50 9,50 9,50 9,50 9,50 9,50 9,50 Alternatif-3 10,00 10,00 90,00 10,00 10,00 10,00 10,00 10,00 Alternatif-4 11,50 11,50 11,50 88,50 11,50 11,50 11,50 11,50 Alternatif-5 9,50 9,50 9,50 9,50 90,50 9,50 9,50 9,50 Alternatif-6 85,00 85,00 85,00 85,00 85,00 85,50 85,00 85,00 Alternatif-7 81,00 81,00 81,00 81,00 81,00 81,00 82,50 81,00 Alternatif-8 9,50 9,50 9,50 9,50 9,50 9,50 9,50 90,50 TABEL V
D ATA RERATA BOBOT YANG DIBERIKAN OLEH PARA PAKAR TERHADAP MASING - MASING STANDAR KEBERHASILAN FLIPPED LEARNING Standar Bobot dari Para Pakar Rerata Perbaikan Bobot Rerata (W Yack )
Pa k a r- 1 Pa k a r- 2 Pa k a r- 3 Pa k a r- 4 Standar-1 5 5 5 5 5,00 0,14 Standar-2 4 4 4 4 4,00 0,11 Standar-3 5 5 5 5 5,00 0,14 Standar-4 5 4 4 4 4,25 0,12 Standar-5 4 5 5 4 4,50 0,12 Standar-6 4 5 4 5 4,50 0,12 Standar-7 4 4 5 4 4,25 0,12 Standar-8 5 5 5 4 4,75 0,13  W Yack 1
Berdasarkan  data  awal  pada  Tabel  III,  data  perbaikan bobot rerata pada Tabel V, dan persamaan (2) dari formula DIVAYANA ,  maka  dapat  dilakukan  proses  perhitungan vektor-D  untuk  menentukan  normalisasi  skor-skor ketimpangan  positif  dalam  pelaksanaan flipped  learning pada SMK TI di provinsi Bali. Adapun proses perhitungan vektor-D untuk normalisasi skor-skor ketimpangan positif dapat dijelaskan sebagai berikut.
𝐷 1 = (88,50 0.14 )(89,00 0.11 )(89,00 0.14 )(89,00 0.12 )
(89,00 0.12 )(89,00 0.12 )(89,00 0.12 )(89,00 0.13 ) 4 = 22,23
𝐷 2 = (95,00 0.14 )(90,50 0.11 )(95,00 0.14 )(95,00 0.12 ) (95,00 0.12 )(95,00 0.12 )(95,00 0.12 )(95,00 0.13 ) 4 = 23,62
𝐷 3 = (92,00 0.14 )(92,00 0.11 )(90,00 0.14 )(92,00 0.12 ) (92,00 0.12 )(92,00 0.12 )(92,00 0.12 )(92,00 0.13 ) 4 = 22,93
𝐷 4 = (90,00 0.14 )(90,00 0.11 )(90,00 0.14 )(88,50 0.12 ) (90,00 0.12 )(90,00 0.12 )(90,00 0.12 )(90,00 0.13 ) 4 = 22,46
𝐷 5 = (94,00 0.14 )(94,00 0.11 )(94,00 0.14 )(94,00 0.12 ) (90,50 0.12 )(94,00 0.12 )(94,00 0.12 )(94,00 0.13 ) 4 = 23,39
𝐷 6 = (14,50 0.14 )(14,50 0.11 )(14,50 0.14 )(14,50 0.12 ) (14,50 0.12 )(85,50 0.12 )(14,50 0.12 )(14,50 0.13 ) 4 = 4,52
𝐷 7 = (17,50 0.14 )(17,50 0.11 )(17,50 0.14 )(17,50 0.12 ) (17,50 0.12 )(17,50 0.12 )(82,50 0.12 )(17,50 0.13 ) 4 = 5,25
𝐷 8 = (93,00 0.14 )(93,00 0.11 )(93,00 0.14 )(93,00 0.12 ) (93,00 0.12 )(93,00 0.12 )(93,00 0.12 )(90,50 0.13 ) 4 = 23,17
Berdasarkan  data  awal  pada  Tabel  IV,  data  perbaikan bobot rerata pada Tabel V, dan persamaan (2) dari formula DIVAYANA ,  maka  dapat  dilakukan  proses  perhitungan vektor-D  untuk  menentukan  normalisasi  skor-skor ketimpangan  negatif  dalam  pelaksanaan flipped  learning pada SMK TI di provinsi Bali. Adapun proses perhitungan vektor-D untuk normalisasi skor-skor ketimpangan negatif dapat dijelaskan sebagai berikut.
𝐷 1 =
(88,50 0.14 )(11,50 0.11 )(11,50 0.14 )(11,50 0.12 ) (11,50 0.12 )(11,50 0.12 )(11,50 0.12 )(11,50 0.13 ) 4 = 3,81
𝐷 2 = (9,50 0.14 )(90,50 0.11 )(9,50 0.14 )(9,50 0.12 ) (9,50 0.12 )(9,50 0.12 )(9,50 0.12 )(9,50 0.13 ) 4 = 3,05
𝐷 3 = (10,00 0.14 )(10,00 0.11 )(90,00 0.14 )(10,00 0.12 ) (10,00 0.12 )(10,00 0.12 )(10,00 0.12 )(10,00 0.13 ) 4 = 3,39
𝐷 4 = (11,50 0.14 )(11,50 0.11 )(11,50 0.14 )(88,50 0.12 )
(11,50 0.12 )(11,50 0.12 )(11,50 0.12 )(11,50 0.13 ) 4 = 3,65
𝐷 5 = (9,50 0.14 )(9,50 0.11 )(9,50 0.14 )(9,50 0.12 )
(90,50 0.12 )(9,50 0.12 )(9,50 0.12 )(9,50 0.13 ) 4 = 3,14
𝐷 6 = (85,00 0.14 )(85,00 0.11 )(85,00 0.14 )(85,00 0.12 )
(85,00 0.12 )(85,50 0.12 )(85,00 0.12 )(85,00 0.13 ) 4 = 21,27
𝐷 7 = (81,00 0.14 )(81,00 0.11 )(81,00 0.14 )(81,00 0.12 ) (81,00 0.12 )(81,50 0.12 )(82,50 0.12 )(81,00 0.13 ) 4 = 20,29
𝐷 8 = (9,50 0.14 )(9,50 0.11 )(9,50 0.14 )(9,50 0.12 )
(9,50 0.12 )(9,50 0.12 )(9,50 0.12 )(90,50 0.13 ) 4 = 3,19
Berdasarkan  hasil  vektor-D  untuk  normalisasi  skor- skor ketimpangan  positif  yang  diperoleh  sebelumnya  dan persamaan  (3),  maka  selanjutnya  dapat  dilakukan  proses perhitungan vektor-R untuk penentuan ketimpangan positif. Adapun  proses  perhitungan  vektor-R  untuk  ketimpangan positif tersebut adalah sebagai berikut.
R 1 = 22,23
22,23 +  23,62 +  22,93 +  22,46 + 23,39 +  4,52 +  5,25 +  23,17 = 0,151
𝑅 2 = 23,62 22,23 +  23,62 +  22,93 +  22,46 + 23,39 +  4,52 +  5,25 +  23,17 = 0,160 𝑅 3 = 22,93 22,23 +  23,62 +  22,93 +  22,46 + 23,39 +  4,52 +  5,25 +  23,17 = 0,155 𝑅 4 = 22,46 22,23 +  23,62 +  22,93 +  22,46 + 23,39 +  4,52 +  5,25 +  23,17 = 0,152 𝑅 5 = 23,39 22,23 +  23,62 +  22,93 +  22,46 + 23,39 +  4,52 +  5,25 +  23,17 = 0,159 𝑅 6 = 4,52 22,23 +  23,62 +  22,93 +  22,46 + 23,39 +  4,52 +  5,25 +  23,17 = 0,031 𝑅 7 =
5,25
22,23 +  23,62 +  22,93 +  22,46 + 23,39 +  4,52 +  5,25 +  23,17
= 0,036
𝑅 8 = 23,17 22,23 +  23,62 +  22,93 +  22,46 + 23,39 +  4,52 +  5,25 +  23,17 = 0,157
Berdasarkan  hasil  vektor-D  untuk  normalisasi  skor- skor ketimpangan negatif yang diperoleh sebelumnya dan persamaan  (3),  maka  selanjutnya  dapat  dilakukan  proses perhitungan  vektor-R untuk  penentuan  ketimpangan negatif.  Adapun  proses  perhitungan  vektor-R  untuk ketimpangan negatif tersebut adalah sebagai berikut.
𝑅 1 = 3,81 3,81 +  3,05 +  3,39 +  3,65 + 3,14 +  21,27 +  20,29 +  3,19 = 0,062 𝑅 2 = 3,05 3,81 +  3,05 +  3,39 +  3,65 + 3,14 +  21,27 +  20,29 +  3,19 = 0,049 𝑅 3 = 3,39 3,81 +  3,05 +  3,39 +  3,65 + 3,14 +  21,27 +  20,29 +  3,19 = 0,055 𝑅 4 =
3,65 3,81 +  3,05 +  3,39 +  3,65 + 3,14 +  21,27 +  20,29 +  3,19 = 0,059
𝑅 5 =
3,14 3,81 +  3,05 +  3,39 +  3,65 + 3,14 +  21,27 +  20,29 +  3,19 = 0,051 𝑅 6 =
21,27 3,81 +  3,05 +  3,39 +  3,65 + 3,14 +  21,27 +  20,29 +  3,19 = 0,344 𝑅 7 = 20,29 3,81 +  3,05 +  3,39 +  3,65 + 3,14 +  21,27 +  20,29 +  3,19 = 0,328 𝑅 8 = 3,19 3,81 +  3,05 +  3,39 +  3,65 + 3,14 +  21,27 +  20,29 +  3,19 = 0,052
Hasil  perangkingan  ketimpangan  positif  berdasarkan skor vektor-R menunjukkan bahwa alternatif-2 merupakan alternatif  yang  menjadi  ketimpangan  positif  paling dominan.  Hal  ini  dikarenakan  alternatif-2    memiliki  skor tertinggi  jika  dibandingkan  alternatif  lainnya.  Hasil perangkingan  ketimpangan  negatif  berdasarkan  skor vektor-R  menunjukkan  bahwa  alternatif-6  merupakan alternatif  yang  menjadi  ketimpangan  negatif  paling dominan.  Hal  ini  dikarenakan  alternatif-6  memiliki  skor tertinggi jika dibandingkan alternatif lainnya.
Setelah  ditunjukkan  tampilan  fisik  dari  aplikasi DIVAYANA berbasis  ketimpangan Asuri - Daiwi  Sampad dan  simulasi  perhitungannya,  maka  selanjutnya  dapat dilihat  hasil  uji  tingkat  efektivitas  aplikasi DIVAYANA berbasis  ketimpangan Asuri - Daiwi  Sampad .  Adapun tingkat efektivitas aplikasi tersebut yang digunakan untuk mengevaluasi  keefektifan  pelaksanaan flipped  learning , dapat dilihat pada Tabel VI.
TABEL VI H ASIL U JI T INGKAT E FEKTIVITAS A PLIKASI D IVAYANA B ERBASIS K ETIMPANGAN A SURI - D AIWI S AMPAD Y ANG D IGUNAKAN U NTUK M ENGEVALUASI K EEFEKTIFAN P ELAKSANAAN F LIPPED L EARNING PADA SMK TI DI B ALI
Responden Butir Ke- ∑ Persentase Efektivitas (%) 1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 Guru-1 4 4 5 5 4 4 5 5 4 5 5 4 4 5 5 68 90,67 Guru-2 5 4 5 4 4 5 5 5 4 5 4 4 5 5 4 68 90,67 Guru-3 5 4 5 4 4 5 5 5 4 5 4 4 5 5 5 69 92,00 Guru-4 4 5 5 4 5 5 4 5 5 5 4 5 5 4 5 70 93,33 Guru-5 5 5 5 4 5 5 4 5 4 5 5 4 4 5 5 70 93,33 Guru-6 5 4 5 5 4 4 5 5 5 4 4 5 4 4 4 67 89,33 Guru-7 5 5 4 4 5 4 4 4 5 5 4 5 5 4 5 68 90,67 Guru-8 4 5 5 4 5 5 4 5 4 5 5 4 4 5 5 69 92,00 Guru-9 5 4 5 5 4 4 5 5 4 5 4 4 5 5 5 69 92,00 Guru-10 5 4 5 4 4 5 5 5 4 5 4 4 5 5 4 68 90,67 Guru-11 5 4 5 4 4 5 5 4 5 5 4 5 5 4 5 69 92,00 Guru-12 4 5 5 4 5 5 4 5 4 5 4 4 5 5 5 69 92,00 Guru-13 4 5 4 5 5 4 4 4 5 5 4 5 5 4 5 68 90,67 Guru-14 4 4 4 4 4 5 4 5 5 5 4 5 5 4 4 66 88,00 Guru-15 5 5 5 4 5 5 4 5 4 5 5 4 4 5 5 70 93,33 Guru-16 5 4 5 5 4 4 5 5 5 4 4 5 4 4 5 68 90,67 Guru-17 5 5 4 4 5 4 4 4 5 5 4 5 5 4 5 68 90,67 Guru-18 4 5 5 4 5 5 4 5 4 5 5 4 4 5 4 68 90,67 Guru-19 5 4 5 5 4 4 5 5 4 5 4 4 5 5 5 69 92,00 Guru-20 5 4 5 4 4 5 5 5 4 5 4 4 5 5 5 69 92,00 Siswa-1 5 4 5 4 4 5 5 4 5 5 4 5 5 4 5 69 92,00 Siswa-2 4 5 5 4 5 5 4 4 4 5 5 4 4 5 4 67 89,33 Siswa-3 5 4 4 5 4 4 4 5 4 5 4 4 5 5 5 67 89,33 Siswa-4 5 4 4 4 4 5 4 5 4 5 4 4 5 5 5 67 89,33 Siswa-5 4 5 4 5 4 4 4 4 5 5 4 5 5 4 5 67 89,33 Siswa-6 4 4 4 4 5 5 4 4 4 5 5 4 4 5 4 65 86,67 Siswa-7 5 4 5 5 5 4 4
5 4 5 4 4 5 5 5 69 92,00 Siswa-8 5 5 5 5 4 5 5 4 4 5 4 4 5 5 5 70 93,33 Siswa-9 4 5 4 5 5 4 4 5 5 5 4 5 5 4 5 69 92,00 Siswa-10 4 5 5 4 4 5 4 4 4 5 5 4 4 5 4 66 88,00 Siswa-11 5 4 5 5 4 5 5 4 4 5 5 5 5 4 5 70 93,33 Siswa-12 5 5 4 5 5 4 4 5
4 5 5 4 5 5 4 69 92,00 Siswa-13 4 5 4 5 4 4 5 5 5 5 5 5 4 4 5 69 92,00 Siswa-14 4 5 4 5 4 4 5 5 4 5 4 5 5 4 5 68 90,67 Siswa-15 5 4 5 5 4 5 5 4 4 5 5 4 5 5 4 69 92,00 Siswa-16 5 4 4 5 5 4 5
5 4 5 5 4 5 4 4 68 90,67 Siswa-17 4 4 4 4 5 5 4
4 5 5 5 4 5 4 4 66 88,00 Siswa-18 4 4 5 4 5 4 4
5 4 4 5 5 5 5 4 67 89,33 Siswa-19 5 4 5 4 5 4 4 4 4 5 5 4 5 5 5 68 90,67 Siswa-20 5 4 4 5 5 4 5 5 5 4 4 5 4 5 5 69 92,00 Siswa-21 4 4 4 4 5 5 4 5 4 4 5 5 5 4 5 67 89,33 Siswa-22 4 4 5 4 5 4 4 5 4 4 5 5 5 5 4 67 89,33 Siswa-23 5 4 5 4 5 4 4 5 4 5 4 4 5 5 5 68 90,67 Siswa-24 5 4 5 5 4 5 4 5 4 4 5 5 5 5 5 70 93,33 Siswa-25 5 5 4 4 5 5 4 4 4 5 4 4 5 5 5 68 90,67 Siswa-26 5 4 4 5 4 5 5 5 5 4 4 5 5 4 5 69 92,00 Siswa-27 5 4 4 5 4 5 4
5 4 5 5 4 4 5 4 67 89,33 Siswa-28 5 5 5 4 5 4 4 5 4 5 4 4 5 5 5 69 92,00 Siswa-29 4 5 5 4 4 5 4 4
5 5 4 4 5 5 5 68 90,67 Siswa-30 4 5 4 4 5 5 4 4 4 5 5 4 4 5 4 66 88,00 Rerata Efektivitas (%) 90,88
Berdasarkan hasil pada Tabel  VI, terlihat bahwa rerata keefektifan  aplikasi DIVAYANA berbasis  ketimpangan Asuri-Daiwi  Sampad sebesar  90,88%.  Jika  hasil  tersebut
diinterpretasikan  dengan  acuan  skala  sebelas  yang ditunjukkan  sebelumnya  pada  Tabel  I,  maka  aplikasi
DIVAYANA berbasis ketimpangan Asuri-Daiwi Sampad ini tergolong dalam kategori sangat baik.
Kendatipun tergolong sangat baik, namun ada beberapa saran  dari  para  responden  yang  dapat  dijadikan pertimbangan  untuk  perbaikan  atau  penyempurnaan terhadap aplikasi DIVAYANA berbasis ketimpangan Asuri- Daiwi  Sampad .  Beberapa  saran  yang  diberikan  oleh  para responden dapat dilihat pada Tabel VII.
TABEL IVII SARAN R ESPONDEN TERHADAP A PLIKASI D IVAYANA B ERBASIS K ETIMPANGAN A SURI -DAIWI S AMPAD No. Responden Saran 1 Guru-4 Perbaiki kesalahan kata “reomendasi” pada form keputusan 2 Guru-8 Perbaiki kesalahan penulisan pada form keputusan 3 Guru-12 Perbaiki penulisan kata “reomendasi” menjadi “rekomendasi” pada form keputusan 4 Guru-18 Tampilkan juga data awal untuk penentuan ketimpangan negatif pada form data awal untuk penentuan ketimpangan positif dan negatif paling dominan 5 Guru-20 Form yang menampilkan data awal untuk penentuan ketimpangan negatif belum muncul 6 Siswa-19 Ada kesalahan ketik judul diatas texbox pemberian rekomendasi
pada form keputusan 7 Siswa-21
Kata reomendasi ganti dengan rekomendasi. Silahkan cek pada form keputusan 8 Siswa-25 Tidak ada ditampilkan data awal untuk menentukan ketimpangan negatif 9 Siswa-27 Pada form keputusan, terdapat satu
kata salah ketik yaitu reomendasi.
Sebaiknya ditulis dengan kata rekomendasi 10 Siswa-28 Kata reomendasi pada form keputusan masih salah. Tolong diperbaiki.
Berdasarkan  hasil  rerata  persentase  tingkat  keefektifan pada Tabel VI tersebut, maka tidak perlu melakukan revisi berat  terhadap  aplikasi DIVAYANA berbasis  ketimpangan Asuri-Daiwi  Sampad .  Namun,  saran  yang  diberikan  oleh para responden yang ditunjukkan pada Tabel VII juga perlu dijadikan pertimbangan untuk melakukan penyempurnaan terhadap aplikasi. Jika aplikasi sudah disempurnakan, tentu nantinya aplikasi DIVAYANA berbasis ketimpangan Asuri- Daiwi  Sampad tersebut  dapat  berjalan  lebih  optimal, sehingga  aplikasi  mampu  memfasilitasi  ketersediaan
rekomendasi  yang  baik  dan  tepat  untuk  mempertahankan keefektifan  pengimplementasian flipped  learning pada SMK TI di provinsi Bali.
Berdasarkan saran yang diberikan oleh Guru-4, Guru-8, Guru-12,  Siswa-19,  Siswa-21,  Siswa-27  dan  Siswa-28, maka  dilakukan  perbaikan  pada  form  keputusan.  Adapun tampilan form keputusan setelah direvisi dapat dilihat pada Gambar 11.

## Gambar 11. Tampilan form keputusan (setelah revisi)
Berdasarkan saran yang diberikan oleh Guru-18, Guru- 20 dan Siswa-25, maka dilakukan perbaikan pada form data awal  untuk  penentuan  ketimpangan  positif  dan  negatif paling  dominan.  Adapun  tampilan  form  data  awal  untuk penentuan ketimpangan positif dan negatif paling dominan setelah direvisi dapat dilihat pada Gambar 12.
Gambar  12.  Tampilan  form  data  awal  untuk  penentuan  ketimpangan positif dan negatif paling dominan (setelah revisi)

## B. Pembahasan
Persentase  persepsi  responden  yang  ditunjukkan  pada Tabel  II  diperoleh  dari  skor  rating  kepentingan  yang diberikan  oleh  para  responden  terhadap  setiap  alternatif pemecahan  kendala  dalam  pelaksanaan flipped  learning pada  SMK  TI  di  Bali.  Persentase  Standar  Keberhasilan yang  ditunjukkan  pada  Tabel  II  diperoleh  dari  skor kesepakatan  bersama  dari  para  pakar  terhadap  setiap alternatif  pemecahan  kendala  dalam  pelaksanaan flipped learning pada  SMK  TI  di  Bali.  Ketimpangan  positif diperoleh dari hasil pengurangan antara persentase persepsi responden  dengan  persentase  standar  keberhasilan  yang menghasilkan skor positif. Ketimpangan negatif diperoleh dari  hasil  pengurangan  antara  persentase  persepsi responden  dengan  persentase  standar  keberhasilan  yang menghasilkan skor negatif.
Pemaknaan terhadap skor ketimpangan positif mengacu pada  konsep Daiwi  Sampad ,  sedangkan  pemaknaan terhadap  skor ketimpangan  negatif  mengacu  pada  konsep Asuri  Sampad . Daiwi  Sampad merupakan  suatu  filosofi agama  Hindu  yang  menunjukkan  perbuatan  baik  umat manusia,  sedangkan Asuri  Sampad merupakan  perbuatan buruk  yang  cenderung  dilakukan  umat  manusia  [44,45]. Daiwi  Sampad adalah  perbuatan  baik  dari  dalam  diri manusia,  sedangkan Asuri  Sampad adalah  perbuatan- perbuatan buruk dari dalam diri manusia [46,47].
Ketimpangan positif digunakan sebagai dasar mempertahankan    aspek-aspek    penunjang    keberhasilan flipped learning , sedangkan ketimpangan negatif digunakan  sebagai  dasar  melakukan  perbaikan  terhadap flipped learning .
Data yang diblok warna abu-abu dan hitam pada Tabel III  bersumber  dari  persentase  persepsi  responden  yang ditunjukkan  sebelumnya  pada  Tabel  II.    Data  yang  tidak diblock  pada  baris  alternatif  A1  (89,00)  pada  Tabel  III diperoleh dengan perhitungan berikut: 88,50 + 0,50. Skor 0,50  tersebut  bersumber  dari  skor  ketimpangan  positif untuk  alternatif  A1  yang  ditunjukkan  sebelumnya  pada Tabel II. Data yang tidak diblock pada baris alternatif A2 (95,00)  pada  Tabel  III  diperoleh  dengan  perhitungan berikut:  90,50  +  4,50.  Skor  4,50  tersebut  bersumber  dari skor  ketimpangan  positif  untuk  alternatif  A2  yang ditunjukkan  sebelumnya  pada  Tabel  II.  Data  yang  tidak diblock  pada  baris  alternatif  A3  (92,00)  pada  Tabel  III diperoleh dengan perhitungan berikut: 90,00 + 2,00. Skor 2,00  tersebut  bersumber  dari  skor  ketimpangan  positif untuk  alternatif  A3  yang  ditunjukkan  sebelumnya  pada Tabel II. Data yang tidak diblock pada baris alternatif A4 (90,00)  pada  Tabel  III  diperoleh  dengan  perhitungan berikut:  88,50  +  1,50.  Skor  1,50  tersebut  bersumber  dari skor  ketimpangan  positif  untuk  alternatif  A4  yang ditunjukkan  sebelumnya  pada  Tabel  II.  Data  yang  tidak diblock  pada  baris  alternatif  A5  (94,00)  pada  Tabel  III diperoleh dengan perhitungan berikut: 90,50 + 3,50. Skor 3,50  tersebut  bersumber  dari  skor  ketimpangan  positif untuk  alternatif  A5  yang  ditunjukkan  sebelumnya  pada Tabel II. Data yang tidak diblock pada baris alternatif A6 (14,50)  pada  Tabel  III  diperoleh  dengan  perhitungan
berikut:  100  -  85,50.  Data  yang  tidak  diblock  pada  baris alternatif  A7  (17,50)  pada  Tabel  III  diperoleh  dengan perhitungan berikut: 100 - 82,50. Data yang tidak diblock pada  baris  alternatif  A8  (93,00)  pada  Tabel  III  diperoleh dengan  perhitungan  berikut:  90,50  +  2,50.  Skor  2,50 tersebut  bersumber  dari  skor  ketimpangan  positif  untuk alternatif A8 yang ditunjukkan sebelumnya pada Tabel II.
Data yang diblok warna hitam dan abu-abu pada Tabel IV  bersumber  dari  persentase  persepsi  responden  yang ditunjukkan  sebelumnya  pada  Tabel  II.  Data  yang  tidak diblock  pada  baris  alternatif  A1  (11,50)  pada  Tabel  IV diperoleh  dengan  perhitungan  berikut:  100-88,50.  Data yang  tidak  diblock  pada  baris  alternatif  A2  (9,50)  pada Tabel IV diperoleh dengan perhitungan berikut: 100-90,50. Data  yang  tidak  diblock  pada  baris  alternatif  A3  (10,00) pada Tabel IV diperoleh dengan perhitungan berikut: 100- 90,00.  Data  yang  tidak  diblock  pada  baris  alternatif  A4 (11,50)  pada  Tabel  IV  diperoleh  dengan  perhitungan berikut:  100-88,50.  Data  yang  tidak  diblock  pada  baris alternatif  A5  (9,50)  pada  Tabel  IV  diperoleh  dengan perhitungan  berikut:  100-90,50.  Data  yang  tidak  diblock pada  baris  alternatif  A6  (85,00)  pada  Tabel  IV  diperoleh dengan perhitungan berikut: 88,50-0,50. Skor 0,50 tersebut bersumber  dari  skor  ketimpangan  negatif  untuk  alternatif A6 yang ditunjukkan sebelumnya pada Tabel II. Data yang tidak  diblock  pada  baris  alternatif  A7  (81,00) pada  Tabel IV diperoleh dengan perhitungan berikut: 82,50-1,50. Skor 1,50  tersebut  bersumber  dari  skor  ketimpangan  negatif untuk  alternatif  A7  yang  ditunjukkan  sebelumnya  pada Tabel II. Data yang tidak diblock pada baris alternatif A8 (9,50) pada Tabel IV diperoleh dengan perhitungan berikut: 100-90,50.
Perbaikan bobot rerata yang ditunjukkan pada Tabel V untuk  masing-masing  standar  diperoleh  dengan  cara membagi  rerata  bobot  standar  dengan  total  rerata  bobot. Skor  keseluruhan  perbaikan  bobot  rerata  untuk  masing- masing  standar  jika  dijumlahkan  haruslah  bernilai  1 (  W Yack = 1).
Hasil  penelitian  ini  sudah  berhasil  menjawab  beberapa keterbatasan  penelitian  sebelumnya  yang  dilakukan  oleh Nurfadhilah dkk [27]  dan  Magdalena dkk [28]  dengan menunjukkan adanya skor ketimpangan positif dan negatif yang  mempengaruhi  keberhasilan  pengimplementasian flipped  learning di  Bali.  Hasil  penelitian  ini  pada prinsipnya juga memiliki persamaan dengan penelitian Ali &  Sukardi  [48]  yang  juga  mengevaluasi  pelaksanaan pembelajaran daring di sekolah menengah kejuruan. Hasil penelitian  ini  juga  memiliki persamaan  dengan penelitian Bariroh  &  Setiawan  [49]  dalam  kaitannya  dengan  objek yang dievaluasi yaitu flipped learning . Namun, penelitian Bariroh  &  Setiawan  lebih  menonjolkan  pendeskripsian pembelajaran flipped learning dan tidak menjelaskan detail dari  proses  evaluasi  terhadap flipped  learning tersebut. Hasil penelitian Mustafa [50] menguatkan posisi penelitian ini  dengan  menunjukkan  penggunaan  konsep  model evaluasi discrepancy dalam menentukan ketimpangan yang terjadi  antara  hasil  evaluasi  dengan  standar  evaluasi. Konsep  ketimpangan  inilah  yang  menjadi  dasar  dalam
penelitian ini dalam menentukan ketimpangan  positif dan negatif dalam pelaksanaan pembelajaran flipped learning . Kebaruan penelitian ini adalah adanya aplikasi evaluasi terhadap pelaksanaan flipped learning yang dibuat dengan berlandaskan  konsep  kearifan  lokal  Bali  yang  dipadukan dengan  konsep  ketimpangan  ( discrepancy )  dan  formula model  evaluasi DIVAYANA .  Hal  ini  tentunya  akan memudahkan dalam penentuan aspek dominan yang perlu dipertahankan berdasarkan ketimpangan positif dan aspek dominan yang perlu disempurnakan berdasarkan ketimpangan negatif.
Kendala  penelitian  ini  adalah  aplikasi  evaluasi  belum dibuat  dalam  versi smartphone yang  dapat  diinstal  dan diatur sendiri oleh pengunanya. Oleh karena itu, pengguna harus  meminta  bantuan  terlebih  dahulu  ke  pengembang aplikasi  untuk  melakukan  pengaturan  terhadap  aplikasi evaluasi tersebut sebelum digunakan.

## IV. K ESIMPULAN
Secara  umum,  tingkat  efektivitas  aplikasi DIVAYANA berbasis  ketimpangan Asuri-Daiwi  Sampad sudah tergolong  dalam  kategori  sangat  baik.  Hal  ini  didasarkan pada  hasil  uji  tingkat  efektivitas  aplikasi  yaitu  sebesar 90,88%.  Konsep discrepancy , Asuri Sampad dan Daiwi Sampad sudah  diintegrasikan  dengan  baik  dalam penentuan  skor  ketimpangan  positif  dan  negatif  dalam pelaksanaan flipped  learning .  Formula DIVAYANA sudah disimulasikan dengan baik dalam penentuan ketimpangan positif dan negatif yang paling dominan, sehingga nantinya memudahkan para pengambil keputusan dalam mengambil keputusan  yang  tepat.  Pekerjaan  kedepan  yang  dapat dilakukan  untuk  mengatasi  kendala  penelitian  ini  adalah membuat  rancangan aplikasi DIVAYANA berbasis ketimpangan Asuri-Daiwi Sampad dalam versi smartphone , sehingga  memudahkan  penggunanya  dalam  menginstal, mengatur  dan  mengakses  aplikasi  tersebut  kapanpun  dan dimanapun penggunanya berada.

## U CAPAN T ERIMA K ASIH
Penulis  mengucapkan  terima  kasih  kepada  Rektor  dan Ketua  Lembaga  Penelitian  dan  Pengabdian  Kepada Masyarakat,  Universitas  Pendidikan  Ganesha  yang  telah memberikan kesempatan, izin serta pendanaan penelitian, sehingga penelitian dapat terselesaikan dan hasilnya dapat terpublikasi tepat pada waktunya. Adapun hibah penelitian yang dimaksud tersebut tertuang dalam Kontrak Penelitian Nomor: 840/UN48.16/LT/2022.
R EFERENSI
[1] Y.  A.  Sativa,  dan  A.  B.  Kusuma,  “Flipped  Classroom  sebagai Pendekatan  Pembelajaran  Matematika  di  Era  Pandemi,” SAINTIFIK: Jurnal Matematika, Sains, dan Pembelajarannya , Vol. 7, No. 2, 126–132, 2021.
[2] I.  Fajri,  K.  Suryadi,  dan  L.  Anggraeni,  “Pembelajaran  Kelas Terbalik  Selama  Pandemi  Covid-19:  Sebuah  Tinjauan  Sistematis Review Dari Bukti Empiris,” Jurnal Pendidikan Kewarganegaraan Undiksha , Vol. 9, No. 3, 870–880, 2021.
[3] R.  Ramadhani,  E.  Syahputra,  dan  E.  Simamora,  “Ethno-Flipped Classroom  Model:  Sebuah  Rekomendasi  Model  Pembelajaran
Matematika di  Masa  New  Normal,” AXIOM  : Jurnal  Pendidikan dan Matematika , Vol. 10, No. 2, 221–240, 2021.
[4] B.  I.  Permatasari,  dan  M.  T.  F.  A.  Muda,  “Penerapan  Flipped Classroom Sebagai Solusi Pembelajaran di Masa Pandemi Covid- 19  di  SMP  Negeri  22  Balikpapan,” Kompetensi  Universitas Balikpapan , Vol. 14, No. 2, 113–116, 2021.
[5] E.  U.  Hanik,  dan  A.  D.  Ramadhani,  “Penerapan  Strategi Pembelajaran  Flipped  Classroom  sebagai  Implementasi  dari Blended  Learning  pada  Masa  Pandemi  Covid-19  di  MI  NU Miftahul  Falah  Undaan  Tengah,” el  Bidayah:  Journal  of  Islamic Elementary Education , Vol. 3, No. 2, 115–130, 2021.
[6] Y. Sudiasih, Trisnaningsih, dan R. M. Sinaga, “Flipped Classroom: Alternatif Belajar Sosiologi Pada Masa Pandemi Covid-19,” Civics Education And Social Sciense Journal (CESSJ) , Vol. 3, No. 1, 26– 39, 2021.
[7] M.  Huda,  R.  C.  Dhewy,  dan  E.  N.  S.  Agustina,  “Implementasi Blended  Learning  Model  Flipped  Classroom:  Peran  Teknologi Dalam  Pembelajaran  Matematika  di  Tengah  Pandemi,” JEDMA: Jurnal Edukasi Matematika , Vol. 2, No. 1, 1–8, 2021.
[8] A. H. Triaji, A. Y. Fitrianna, dan L. S. Zanthy, “Penerapan Model Flipped Learning Terhadap Peningkatan Hasil Belajar Siswa Pada Materi  Pertidaksamaan  Irasional,” JPMI:  Jurnal  Pembelajaran Matematika Inovatif , Vol. 5, No. 3, 813–820, 2022.
[9] R.  Riyanti,  dan  D.  Setyawan,  “Penerapan  Model  Pembelajaran Flipped  Classroom  Dengan  Media  Pembelajaran  Vidio  Interaktif Untuk  Meningkatkan  Pemahaman  Konsep  Biologi  Mahasiswa,” QUANTUM: Jurnal Inovasi Pendidikan Sains , Vol. 12, No. 2, 316– 326, 2021.
[10] S. M. Simamora, dan S. R. Siregar, “Pengaruh Model Pembelajaran Flipped Classroom Terhadap Kemampuan Berpikir Kreatif Siswa Kelas V SDN 060821 Medan,” Bina Gogik , Vol. 8, No. 2, 73–80, 2021.
[11] D.  Thurab-Nkhosi,  “The  Evaluation  of  a  Blended  Faculty Development Course Using the CIPP Framework,” International Journal  of  Education  and  Development  using  Information  and Communication Technology , Vol. 15, No. 1, 245–254, 2019.
[12] J.  S.  Ngala,  G.  M.  Fongod,  T.  J.  Orock,  B.  M.  Ayuk,  and  E.  A. Njenwi,  “Evaluating  Distance  Education  Programme  Using Stufflebeam Cipp Model: University of Buea Cameroon,” Journal of Engineering Research and Application , Vol. 9, No. 10-I, 1–15, 2019.
[13] M. Said, R. Madhakomala, and F. Idris, “Discrepancy Evaluation Model for Human  Resources Health Placement Evaluation at the Puskesmas,” Journal of Environmental Treatment Techniques , Vol. 7, No. 4, 588–594, 2019.
[14] R.  Clark,  A.  Kaw,  Y.  Lou,  A.  Scott,  and  M.  Besterfield-Sacre, “Evaluating  Blended  and  Flipped  Instruction  in  Numerical Methods at Multiple Engineering Schools,” International Journal for the Scholarship of Teaching and Learning , Vol. 12, No. 11, 1– 16, 2018.
[15] M.  Fazal,  B.  Panzano,  and  K.  Luk,  “Evaluating  the  Impact  of Blended  Learning:  A  Mixed-Methods  Study  with  Difference-in- Difference Analysis,” TechTrends: Linking Research and Practice to Improve Learning , Vol. 64, No. 1, pp. 70–78, 2020.
[16] A. Hamid, T. M. Siregar, J. Purba, and B. A. Mukmin, “Evaluation of  Implementation  of  Blended  Learning  Implementation  in Universitas  Negeri  Medan,” Britain  International  of  Linguistics, Arts and Education Journal , Vol. 1, No. 2, 224–231, 2019.
[17] Herawati,  E.  S.  Budi,  Suryadi,  and  B.  Sujanto,  “Evaluating  the Implementation  of  Policy  on  Education  Board,” International Journal  for  Educational  and  Vocational  Studies ,  Vol.  1,  No.  3, 236–243, 2019.
[18] P.  I.  Wiyasa,  I.  K.  D.  Laksana,  and  N.  L.  K.  M.  Indrawati, “Evaluating  Quality  of  Teacher-Developed  English  Test  in Vocational  High  School:  Content  Validity  and  Item  Analysis,” Education Quarterly Reviews , Vol. 2, No. 2, 344–356, 2019.
[19] R.  Gandomkar,  “Comparing  Kirkpatrick’s  Original  and  New Model  with  CIPP  Evaluation  Model,” Journal  of  Advances  in Medical Education & Professionalism , Vol. 6, No. 2, 94–95, 2018.
[20] N.  Sudarwati,  and  Rukminingsih,  “Evaluating  E-learning  as  a Learning  Media:  a  Case  of  Entrepreneurship  E-learning  using Schoology  as  Media,” International  Journal  of  Emerging Technologies in Learning , Vol. 13, No. 9, 269–279, 2018.
[21] C.  Hasanudin,  Wagiran,  dan  Subyantoro,  “Evaluasi  Perkuliahan Daring  Keterampilan  Menulis  Selama  Masa  Pandemi  Covid-19 Dengan Model Evaluasi CIPP,” JPE (Jurnal Pendidikan Edutama) , Vol. 8, No. 2, 27–38, 2021.
[22] A. Wakano, E. W. Prihono, N. Hasanah, dan F. Lapele, “Evaluasi Sistem  Pembelajaran  Online  Dimasa  Pandemi  Covid-19,” EKSPOSE: Jurnal Penelitian Hukum dan Pendidikan , Vol. 20, No. 1, 1195–1205, 2021.
[23] Syahrir,  Y.  Supriyati,  dan  A.  Fauzi,  “Evaluasi  Dampak  Program Pendidikan  Jarak  Jauh  (PJJ)  melalui  model  CIPP  pada  Kinerja Dosen Aspek Pembelajaran pada Masa Pendemi Covid 19,” Jurnal Ilmiah Mandala Education , Vol. 7, No. 1, 144–150, 2021.
[24] A.  R.  Riyanda,  K.  Herlina,  dan  B.  A.  Wicaksono,  “Evaluasi Implementasi Sistem Pembelajaran Daring Fakultas Keguruan dan Ilmu  Pendidikan  Universitas  Lampung,” Jurnal  IKRA-ITH Humaniora , Vol. 4, No. 1, 66–71, 2020.
[25] S.  D.  Fortuna,  S.  H.  Wijoyo,  dan  A.  D.  Herlambang,  “Evaluasi Penerapan Pembelajaran Daring pada SMK Negeri  7 Malangdengan  Model  Evaluasi  CIPP  (Context,  Input,  Process, Product),” Jurnal  Pengembangan  Teknologi  Informasi  dan  Ilmu Komputer , Vol. 5, No. 9, 4015–4025, 2021.
[26] J. Kuswanto, “Penilaian Pembelajaran Daring di SMK PP Negeri Jambi Dengan Model Evaluasi CSE-UCLA,” Edu Research , Vol. 1, No. 4, 16-24, 2020.
[27] N.  Nurfadhilah,  A.  A.  Siregar,  V.  M.  Rabi’ah,  dan  B.  Nudin, “Model  Evaluasi  Pembelajaran  Pada  Masa  New  Normal:  Studi Kasus  di  SDN  04  Kalisari  Kabupaten  Grobogan,” Jurnal  eL- Tarbawi , Vol. 14, No. 2, 155–180, 2021.
[28] I. Magdalena, D. Oktavia, dan P. Nurjamilah, “Analisis Evaluasi Sumatif  Dalam  Pembelajaran  Tematik  Siswa  Kelas  VI  SDN Batujaya  di  Era  Pandemi  Covid-19,” ARZUSIN  :  Jurnal Manajemen dan Pendidikan Dasar , Vol. 1, No. 1, 137–150, 2021.
[29] M.  Rizqa,  L.  Marliyah,  dan  S.  Setyaningsih,  “Efektivitas Pembelajaran Daring pada Mata Pelajaran Ekonomi di MAAn-Nur Bakalrejo  Demak,” Journal  of  Economic  Education  and Entrepreneurship , Vol. 2, No. 2, 54–61, 2021.
[30] M. A. Mahbub, “Optimalisasi Penggunaan Learning Management System  (LMS)  Dalam  Pembelajaran  Virtual  Untuk  Guru  di Lingkungan  Lembaga  Pendidikan  Ma’arif  NU  Jember,”
Transformasi:  Jurnal  Pengabdian  Masyarakat ,  Vol.  17,  No.  1, 107–116, 2021.
[31] S. T. Martaningsih, Soenarto, and E. Istiyono, “Evaluation Model of  Career  Counseling  Program  in  Vocational  High  School,” International  Journal  of  Evaluation  and  Research  in  Education , Vol. 8, No. 2, 318–329, 2019.
[32] B.  Wibawa,  and  Paidi,  “The  Development  of  Blended  Learning Based on Handphone for Computer System Subject on XI Grade of SMKN  1  Bengkulu  City,” Humanities  and  Social  Sciences Reviews , Vol. 7, No. 3, 497–502, 2019.
[33] P.  Hendikawati,  M.  Z.  Zahid,  and  R.  Arifudin,  “Android-Based Computer  Assisted  Instruction  Development  as  a  Learning Resource  for  Supporting  Self-Regulated  Learning,” International Journal of Instruction , Vol. 12, No. 3, 389–404, 2019.
[34] D.  G.  H.  Divayana,  “Utilization  of  DIVAYANA  Formula  in Evaluating of Suitable Platforms for Online Learning in the Social Distancing,” International  Journal  of  Interactive  Mobile Technologies , Vol. 14, No. 20, 50–75, 2020.
[35] D.  G.  H.  Divayana,  P.  W.  A.  Suyasa,  and  N.  K.  Widiartini,  “An Innovative  Model  as  Evaluation  Model  for  Information
Technology-Based Learning at ICT Vocational Schools,” Heliyon , Vol. 7, No. 2, 1–13, 2021.
[36] M. R. R. Razak, M. Dahong, J. Ahmad, H. Dema, and A. Mustanir, “The  Effect  of  Siri’s  Marriage  on  Government  Administration,” International  Journal  of  Sciences:  Basic  and  Applied  Research , Vol. 42, No. 3, 171–184, 2018.
[37] S.  A.  Sari, and  Y.  S.  Rezeki,  “The  Development  of  an  Ingenious Circuit  Based  on  Chemo-Edutainment  Learning. International Journal  of  Educational  Research  Review ,  Vol.  4,  No.  1,  15–25, 2019.
[38] T.  Suryati,  Suryana,  and  Kusnendi,  “The  Effect  of  E-learning Based  on  Schoology  and  Student  Interest  to  Metacognitive Thinking  Skill  of  Vocational  High  School  Students  in  Archival Subject,” International  Journal  of  Research  &  Review ,
Vol. 6,  No. 12,  397–404, 2019.
[39] H.  Husaefah,  and  Mardhiah,  “Application  of  e-learning  quipper school,” International  Journal  of  Social  Science  and  Humanities Research , Vol. 5, No. 3, 522–526, 2017.
[40] M.  Dalimunte,  and  M.  Salmiah,  “Students’  ability  at  changing direct  into  indirect  speech  and  indirect  into  direct  speech,” Budapest International Research and Critics Institute-Journal , Vol. 2, No. 2, 178–185, 2019.
[41] Sutirna,  “Subject  Teachers’  Perceptions  of  Academic  Mentoring and  Counseling  Services,” COUNS-EDU: The  International Journal of Counseling and Education , Vol. 4, No. 4, 129–133, 2019.
[42] S.  Sujariati,  “Improving  the  Students’  Listening  Comprehension Through  Aural-Oral  Language  Approach,” Linguistic,  English Education and Art (LEEA) Journal , Vol. 3, No. 2, 486–505, 2020. [43] A.  A.  G.  Agung,  I.  G.  P.  Sudiarta, and  D.  G.  H.  Divayana,  “The Quality  Evaluation  of  School  Management  Model  Based  on Balinese  Local  Wisdom  using  Weighted  Product  Calculation,” Journal of Theoretical and Applied Information Technology , Vol. 96, No. 19, 6570–6579, 2018.
[44] N.  Suparta,  I.  N.  Suarka,  D.  K.  Tantra,  and  I.G.N.G.  Bidura, “Wewalungan  Ritual  of  Hindu’s  Tawur  Tabuh  Gentuhat BesakihTemple,  Bali,  Indonesia,” International  Journal  of Multidisciplinary  Approach  and  Studies ,  Vol.  6,  No.  4,  80–91, 2019.
[45] Sulistyawati, “Balinese ‘Umah’ Architecture as Implementation of Hindu Religion in Bali,” International Journal of Multidisciplinary Educational Research , Vol. 6, No. 11–4, 72–92, 2017.
[46] I. B. Putrayasa, “Literature as Media Education Nation Character Values,” International  Journal  of  Linguistics,  Literature  and Culture , Vol. 3, No. 3, 1–9, 2017.
[47] Suwardani,  W.  Paramartha,  and  N.  M.  Indiani,  “Formatting  of Religious Attitude of Hindu Bali Youth  in the Context of Religion Conversion  Ethnopedagogy  Study  in  Taro  Tegalalang  Village, Gianyar),”  Vidyottama  Sanatana:  International  Journal  of  Hindu Science and Religious Studies, Vol. 3, No. 2, 240–249, 2019.
[48] M.  K.  Ali,  dan  Sukardi,  “Pengembangan  Model  Evaluasi Pembelajaran  Daring  di  Sekolah  Menengah  Kejuruan,”  JRTI (Jurnal Riset Tindakan Indonesia), Vol. 6, No. 2, 161–166, 2021.
[49] V. Bariroh, dan A. C. Setiawan, “Evaluasi Hasil Belajar Penerapan Flipped Learning Untuk Meningkatkan Pemahaman Peserta Didik Dalam  Pembelajaran,” Jurnal  Inspirasi  Manajemen  Pendidikan ,
Vol. 9, No. 5, 1245–1256, 2021.
[50] P.  S.  Mustafa,  “Model  Discrepancy  Sebagai  Evaluasi  Program Pendidikan,” PALAPA:  Jurnal  Studi  Keislaman  dan  Ilmu Pendidikan , Vol. 9, No. 1, 182–198, 2021.