## VISUAL EFFECT PIPELINE CONTENT AWARE FILL DAN TRACKING DALAM PROSES CLEAN-UP ANIMASI STOP MOTION
Afifah Nur Aini 1 , Ibnu Hadi Purwanto 2* Putu Kalpika Jayanti 3
1,2,3 Teknologi Informasi, Universitas Amikom Yogyakarta email : ibnu@amikom.ac.id 2*
Abstrak: Film animasi stop-motion berjudul "Sukro Si Pengendali Aksara" terpilih sebagai salah satu dari 10 proposal dalam kategori film pendek dokumenter dan fiksi pada “Open Call Layar Anak Indonesiana”. Film ini merupakan hasil kolaborasi antara The Dancing Whale dan Kampoong Monster. Cerita mengikuti perjalanan seorang anak laki-laki gemuk bernama Sukro, yang  memiliki  kemampuan  untuk  mengendalikan  nama  dan  aksara  dalam  gerakan  tari.  Sukro  memulai  perjalanan  untuk mencari dan menyelamatkan kakaknya, Uman, yang telah menghilang. Tujuan dari penelitian ini untuk meneliti lebih dalam serta mengimplementasikan penggunaan tracking dan content-aware fill pada animasi “Sukro Si Pengendali Aksara”. Manfaat dari  penelitian  ini  dapat  dijadikan  landasan  teori  atau  referensi  untuk  penelitian  lain  yang  serupa.  Metode  yang  diterapkan dalam  penelitian  ini  adalah  akuisisi  data  yang  dilakukan  melalui  wawancara  dan sumber  referensi,  analisis  yang  mencakup aspek kebutuhan fungsional dan non-fungsional. Rancangan meliputi tahap pra-produksi, produksi, dan pasca-produksi, serta pengujian yang dilakukan melalui metode uji alpha dan penyebaran kuesioner.
Kata Kunci : Animasi, VFX, Stop-motion, Content-Aware, Tracking
Abstract: The stop-motion animated film titled "Sukro si Pengendali Aksara" was selected as one of the 10 proposals in the documentary  and  fiction  short  film  category  for  the  “Open  Call  Layar  Anak  Indonesiana”.  This  film  is  the  result  of  a collaboration between The Dancing Whale and Kampoong Monster. The story follows the journey of a chubby little boy named Sukro, who has the ability to control words and characters through dance movements. Sukro embarks on a journey to search for and rescue his brother, Uman, who has gone missing. The purpose of this research is to delve deeper and implement the use of tracking and content-aware fill in the animation "Sukro si Pengendali Aksara". The benefits of this research can serve as a theoretical foundation or reference for similar studies. The method employed in this research involves data acquisition through interviews and reference sources, analysis encompassing both functional and nonfunctional requirements. The design includes pre-production, production, and postproduction phases, as well as testing conducted through alpha testing methods and questionnaires.
Keywords : Animation, VFX, Stop-motion, Content-aware, Tracking

## PENDAHULUAN
Kampoong  Monster dan The Dancing  Whale merupakan  studio  animasi  di  Indonesia  dan berkolaborasi  membuat  sebuah  film  pendek  stop- motion  berjudul  “Sukro  si  Pengendali  Aksara”. Proyek  Film  ini  terpilih sebagai  salah  satu  Proposal terbaik dalam “ Open Call Layar Anak Indonesiana” yang  diadakan  oleh  Balai  Media  Kebudayaan. Menurut  Petra  Patria  D.  Paramita,  selaku  direktur, film  animasi  ini  mengisahkan  tentang  seorang  anak yang  memiliki  kekuatan  untuk  mengubah  susunan aksara  menajdi  benda  sesuai  dengan  namanya,  dan digunakan untuk memulihkan keadaan hewan-hewan yang  namanya  telah  dicuri.  Film  animasi  ini  juga menggabungkan warisan budaya jawa dengan teknik stop motion dan visual effects.
Dalam aspek produksi pada animasi ini perlu adanya  kreativitas  dan  fleksibilitas  yang  lebih  besar dalam menciptakan pengalaman visual bagi penonton,  sehingga  pada  Pasca  Produksi  akan melibatkan  beberapa  tahap  termasuk  dengan  VFX cleanup,  dimana  tahap  ini  dapat  mengjapus  elemen dalam  frame  animasi  agar  sesuai  dengan  kebutuhan cerita.  Semua  tahapan  ini  bertujuan  untuk  menjaga kekayaan  budaya  Jawa  dalam  menciptakan  karya yangt menghibur dan mendidik.
Pada  tahapan  VFX cleanup akan  ada  dua teknik utama yang akan digunakan yaitu 3D Camera Tracker  untuk  menganalisis  gerakan  dalam  adegan dan content-aware  fill untuk  mengjilangkan  objek yang  tidak  diinginkan.  [1]  Kombinasi  kedua  teknik ini  akan  membantu  dalam  meningkatkan  kualitas animasi  dan  efektif  tanpa  menganggu  tampilan keseluruhan. [2]

## TINJAUAN PUSTAKA
Penelitian  Agus  Purwanto  tentan  penerapan teknik motion tracking pada pembuatan video music “Salah  Mencintai”  karya Lifely band  melibatkan analisis  PIECES  dalam  mengevaluasi  proyek, penerapak  motion  tracking  untuk  meningkatkan visualisasi  dan  rekomendasi  untuk  menghindari kesalahan  yang  mungkin  terjadi  selama  proses pembuatan video musik. [3]
Dalam  penelitian The  Evolution  of  Stom- motion  Animation  Technique  Through  120  Years  of Technological  Innovations oleh  Vincenzo  Maselli memberikan  pemahaman  yang  mendalam  tentang kompleksitas  sejarah  dan  perkembangan  teknologi serta pengaruhnya terhadap estetika dan ekspresi seni di bidang animasi. [4]
Jurnal  penggunaan  teknik  motion  tracking untuk media promosi di kedai ayam Hepi   oleh Ade
Priyatna mengulas penerapan teknik motion tracking pada  media  promosi.  Hasil  penelitian  menunjukkan bahwa  penggunaan  teknik  motion  tracking,  motion graphic dan liveshoot dapat membangun media yang lebih efektif.  [5]
Hasil  penelitian  Mei  P.  Kurniawan  tentang bagaimana membuat iklan televisi Hotel Mawar Asri Yogyakarta dengan teknik motion tracking menunjukkan bahwa pembuatan iklan ini melibatkan tiga  tahap  utama  yaitu  pra-produksi,  produksi,  dan pasca-produksi dan merekemondasikan untuk menayangkan di platform media sosial atau YouTube agar lebih dikenal secara global. [6]

## Implementasi
Implementasi adalah tahap pelaksanaan dari perencanaan  yang  bertujuan  untuk  mencapai  tujuan yang  telah  direncanakan.  [7]  Implementasi  menurut kamus Werriam-Webster adalah tindakan atay contoh dari  menerapkan  sesuatu  atau  proses  membuat sesuatu menjadi aktif atau efektif [8]

## Tracking
Motion  Tracking adalah  teknik  untuk  melacak pergerakan  suatu  objek  dengan  mencocokan  data gambar  dari  area  yang  dipilih  dalam  satu  frame  ke data frame-frame berikutnya. Motion Tracking dapat digunakan  agar  gerakan  stabil  dan  juga  dapat memungkinkan  untuk  menghubungkan  properti dengan  data  pelcakan  menggunakan  ekspresi  dalam produksi video dan animasi. [9] Setiap titik pelacakan terdapat  informasi  seperti  wilayah  fitur,  pencarian dan  titik  penempelan  yang  kemudian  ditampilkan dalam panel  layar dalam After  Effects atau software lainnya.  [10]  Fitur  dalam After  Effects ini memungkinkan  untuk  kita  menempatkan  berbagai elemen  baru  dalam  sebuah  adegan  dan  membuat mereka berperilaku seolah-olh sudah ada sejak awal dan  kamera  hanya  ada  di  sekitar  mereka.  Ini merupakan  kunci  yang  memungkinkan  untuk menggabungkan dunia fantasi & kenyataan. [11]

## Content-aware Fill
Content-Aware  Fill pada After  Effects adalah  sebuah  alat  yang  memungkinkan  pengguna untuk  menghaspus  objek yang tidak  diinginkan dari video  dengan  lebih  mudah,  terutama  ketika  objek tersebut  berpindah  antar frame .  [10]  Jika  ada  hasil yang  tidak  sesuai,  dapat  mengisikan  secara  manual yaitu  dengan  bantuan  alat Clone  Stamp sehingga dapat  membuat  lapisan  pengisian  sesuai  dengan kebutuhan. [12]

## VFX Cleanup
VFX Cleanup memungkinkan penghapusan, penyesuaian,  atau  perbaikan  elemen  dalam  sebuah adegan  secara  mulus  dan  juga  dapat  memperbaiki masalah  yang  tidak  terduga  hingga  menciptakan produk  akhir  yang  rapi  dan  profesional.  [13]  VFX Cleanup  ini  adalah  tahap  dimana  elemen-elemen
yang  tidak  diinginkan  seperti  rigging  atau  lainnya dapat  dihapuskan,  kemudian  dapat  diganti  dengan clean plate dalam tahap kompositing nantinya. [14]
Stop-Motion
Stopmotion adalah  cara  yang  sederhana namun efektif dengan detail trik kamera menggabungkan  untuk  menciptakan  gambar  gerak yang memukau. [15] Stopmotion juga disebut animasi frame by frame dimana objek fisik dipindahkan dalam setiap  framenya.  [16]  Animasi  semacam  ini memerlukan  waktu  yang  cukyup  lama  karena diperkirakan 12 frame setara dengan satu detik video. Jenis  animasi  ini  meliputi  manipulasi  objek,  tanah liat, manusia, potongan boneka dan lainnya. [13]

## Multimedia dan Animasi
Elemen  multimedia  adalah  penggunaan  komputer yang  dapat  mengintegrasikan  media  lainnya  seperti teks,  grafik,  audio,  video  &  animasi.  Sedangkan elemen dari animasi adalah concept art , cerita, model sheets,  animasi,  cel, layout yang  dapat  menciptakan visual dan suasana. [17]

## METODE
Metode  penelitian  yang  penulis  gunakan  dalam penelitian ini adalah menggunakan teknik pengumpulan  data  dan  juga  analisis  kebutuhan fungsional  dan  nonfungsional  yang  kemudian  akan diujikan serta dievaluasi dengan alur sebagai berikut: Alur Penelitian Alur Penelitian animasi ini sebagai berikut:

## Gambar 1. Alur Penelitian Animasi

## Pengumpulan Data
1. Wawancara Untuk memperoleh informasi yang diperlukan dalam pembuatan  efek  visual,  maka  dilakukan  wawancara bersama Sutradara dari animasi “Sukro si Pengendali Aksara, yaitu Petra Patria D. Paramita.
2. Referensi
Animasi  stop-motion  menggunakan  elemen  digital seperti  pada  film  Madame  Tutli-Putli  oleh  Chris Lavis, dimana melibatkan penggantian mata boneka dengan  rekaman  video  mata  manusia  kemudian dimanipulasi digital.

## Gambar 2. Langkah Penanda Pelacakan Mata

## Analisis Kebutuhan
Analisis  kebutuhan  fungsional  atau  nonfungsional pada VFX cleanup mencakup identifikasi kebutuhan untuk pembuatan konten animasi.
Kebutuhan Nonfungsional 1. Kebutuhan Perangkat Keras Perangkat  keras  merupakan  perangkat  keras  yang diperlukan  untuk  menjalankan  proses  pengolahan, penyimpanan dan penyajian data dalam animasi.
Tabel 1. Kebutuhan Perangkat Keras No Hardware yang digunakan 1 Macbook Pro 2018 2 Intel Core i7 6-core 2,6 GHz 3 Storage SSD 512GB 4 RAM 16GB DDR4 5 VGA Radeon Pro 560X 4GB 6 T5 Samsung Portable SSD 2. Kebutuhan Perangkat Lunak ( Software ) Software yang  digunakan  untuk  pembuatan  VFX Cleanup pada film animasi. Tabel 2. Kebutuhan Perangkat Lunak No Software yang digunakan 1 MacOs Ventura 13.5.2 2 Adobe Photoshop (Beta) 3 Adobe After Effects 2023 3. Kebutuhan Brainware
Berdasarkan  dokumen,  tim  tersebut  terdiri  dari direktur,  produser,  line  producer,  penulis  naskah, animator, pengisi suara karakter, armaturist, desainer karakter,  desainer  kostum,  pembuat storyboard, rotoscoping artist, art department, graphic designer, lighting and  camera  crew ,  komposer  musik,  editor online dan offline serta visual effect artist .

## Rancangan Aspek Produksi
1. Aspek Kreatif Kemampuan untuk merancang dan mengembangkan solusi kreatif dalam menghadapi berbagai tantangan dan  masalah  yang  mungkin  muncul  selama  proses VFX Cleanup.
2. Aspek Teknis
a. Pembagian Tugas
b. Teknik Cleanup
c. Teknik Adding d. Penciptaan Clean Plate

## Pra Produksi
1. Ide
Sutradara  animasi,  Petra  Patria  menjelaskan  tentang anak  yang  bisa  merubah  aksara,  menggunakan kekuatan  untuk  mengembalikan  nama  yang  ducuri dengan  budaya  yang  mengandung  harapan,  doa  dan identitas  dan  menekankan  pentingnya  memahami aksara Jawa sebagai kekayaan budaya.
2. Tema
Tema  pada  film  ini  adalah  budaya  dan  bahasa  yang dipadukan dengan unsur fiksi.
3. Logline
Sukro,  seorang  yang  punya  kemampuan  nama  serta aksara  carakan.  Ia  melakukan  perjalanan  untuk mencari dan menyelamatkan Uman, sang kakak yang telah lama menghilang.
4. Sinopsis
Sukro  dan  Uman,  kembar  dengan  kekuatan  aksara, bermain adu aksara. Sukro mencari Uman yang pergi, tersesat di hutan, dan bertemu Gajah kehilangan nama oleh  "Pencuri  Nama."  Sukro  membantu  Gajah  dan dibawa  ke  Mbah  Ringin  untuk  mengembalikan kekuatannya  dengan  syarat  menghentikan  Pencuri Nama.  Sukro  menemukan  Pencuri  Nama  di  puncak gunung  dan  menyadari  itu  adalah  kakaknya, Sumantri,  yang  kehilangan  namanya.  Dengan bantuan  ajian  Mbah  Ringin,  Sukro  mengembalikan Sumantri ke wujud asli, dan keduanya berpelukan. 5. Naskah Berdasarkan hasil wawancara dengan Petra Patria D. Paramita,  direktur  animasi  "Sukro  si  Pengendali Aksara,"  serta  dokumen  dari  The  Dancing  Whale Studio,  naskah  animasi  stop-motion  "Sukro  si Pengendali  Aksara"vditulis  oleh  Zulfa  Adiputri  dan Petra Paramita.
6. Storyboard
Bagian  ini  merupakan  tahap  di  mana  adegan  yang terdapat  dalam  alur  cerita  direpresentasikan  dalam bentuk gambar. Tahap ini mencakup beberapa adegan utama  yang  diberikan  deskripsi.  Dari  pengumpulan data,  storyboard  karya  Aisyah  Yasmirafitri  Priandi dan  Alda  Bunga  Tiara  Ibenas  berikut  menampilkan keseluruhan scene.
Gambar 3. Storyboard “Sukro si Pengendali Aksara”

## HASIL DAN PEMBAHASAN

## Produksi
Proses produksi animasi stop-motion “Sukro si  Pengendali  Aksara  ini  melibatkan  beberapa tahapan seperti brief produksi, pembuatan puppet dan set, dan pengambilan gambar atau take liveshoot. 1. Briefing Produksi Pertemuan produksi adalah awal dari seluruh proses produksi  dimana  tim  akan  membahas  bagaimana manajemen  produksi  ini  dilakukan  seperti  naskah, konsep  visual,  budgeting,  scheduling,  hingga menghasilkan  panduan  yang  mengarah  pada  proyek secara holistik.
2. Pembuatan Puppet
Tahap  ini  adalah  pembuatan  boneka  dimana melibatkan  proses  merancang,  memodelkan  dan membuat  karakter  boneka  sesuai  dengan  karakter yang ada pada naskah cerita.

## Gambar 4. Character Sukro

## 3. Pembuatan Set
Pembuatan  set  adalah  proses  menciptakan  latar belakang  atau environment dan  lingkungan  atau ambience dimana adegan animasi akan berlangsung.
Gambar 5. Environment Animasi Sukro

## 4. Shooting
Tahap  produksi  paling  akhir  inilah  yang  akan menempatkan  karakter  boneka  di  atas  set  dan serangkaian gambar diambil dengan perubahan posisi kecil antara gambar-gambar yang sudah ada.

## Gambar 6. Liveshoot Animasi Sukro
Pasca Produksi 1. Pengumpulan Data Dalam tahap pengumpulan daya, direktur memberikan akses kepada penulis ke Google Family, tempat penulis dapat mengakses semua file dari pra- produksi hingga pasca produksi. 2. Editing Visual Effects Cleanup
Proses editing Visual Effects (VFX) Cleanup dimulai dengan langkah sebagai beriikut: a. Unduh File b. Memeriksa catatan
c. Membuat project baru pada After Effects
d. Membuat Komposisi e. Visual Effects Cleanup
f.  Photoshop Beta
g. Perbaikan Hasil Akhir
h. Content-aware fill After Effects
i. Menambahkan reference frame j. Download aseet bibir / mulut
k. Membuat komposisi mulut
l. Pengaturan layer mulut m. Time Remapping
n. Tracking o. Mengatur 3D object p. Blend warna
3. Menggunggah File & Memperbarui Progress
Setelah menyelesaikan proses editing VFX Cleanup , penulis  melakukan export ke  format  MOV  444 Prores.  Kemudian  file  diunggah  folder  yang  telah disediakan pada Google Drive.
Gambar 7. Folder Google Drive untuk VFX Cleanup

## 4. Hasil VFX Cleanup
Dalam  paca-produksi  ini,  berbagai  gteknik  VFX Cleanup  diterapkan  pada  setiap  shot  yang  gtelah ditentukan.  Semua  langkah  ini  dilakukan  dengan tujuan untuk menciptakan efek visual yang mulus dan memenuhi  standar  kualitas  yang  diharapkan  dalam animasi “Sukro si Pengendali Aksara”.
Gambar 8. Before-after clean up shadow visual effects

## 5. Testing
Berdasarkan hasil tersebut kemudian diujikan ke para ahli dengan rumus:
Indeks % = Total Skor / Y x 100 Hasil  testing  pada  pengujian  tim  sebanyak  96,8% dengan tergolong “Sangat Baik”, sedangkan diujikan kepada  para  ahli  dengan  hasil  91,3%  dan  tergolong “Sangat Baik”.

## KESIMPULAN DAN SARAN
1. Kesimpulan
Pembuatan  VFX  Cleanup  dalam  animasi stop-motion  Sukro  si  Pengendali  Aksara  ini melibatkan  tahapan  seperti  wawancara,  naskah, storyboard,  analisis  produksi,  shooting,  VFX cleanup,  composting,  dan  evaluasi.  Teknik  tracking dan  content-aware  fill  diterapkan  sesuai  kebutuhan setiap  shot,  termasuk  cleanup,  adding,  create  clean plate,  dan  set  extensions.  Hasil  oleh  tim  pasca- produksi dan ahli multimedia menunjukkan dan ahli multimedia menunjukkan kualifikasi ahli multimedia dengan skor keseluruhan mencapai 96,8%. 2. Saran
Dalam  pembuatan  VFC  cleanup  animasi stop-motion  “Sukro  si  Pengendali  Aksara”  perlu memperhatikan kelemahan seperti variasi pergerakan
kamera, kompleksitas tracking, hambatan penggunaan  rigs,  ketelitian  masking,  akurasi  titik tracking, dan peningkatan pewarnaan untuk meningkatkan kualitas visual.

## DAFTAR PUSTAKA
[1] Adobe,  "Create  visual  effects,"  2023.  [Online]. Available:  https://helpx.adobe.com/after-effects/how- to/create-video-visualeffects.html. [Accessed 04 September 2023]. [2] Adobe,  "Remove  objects  from  your  videos  with  the Content-Aware  Fillpanel,"  Adobe,  05  Januari  2023. [Online]. Available:https://helpx.adobe.com/after-
effects/using/content-aware-fill.html.[Accessed 04 September 2023].
[3] I. H. P. d. A. Purwanto2, "Penerapan Teknik Motion Tracking  Pada  Pembuatan  Video  Music  "Salah Mencintai" Lifely Band," Jurnal Ilmiah DASI, vol. 14, pp. 24-31, 2013.
[4] V. Maselli, "The Evolution of Stop-motion Animation Technique  Through  120  Years  of  Technological Innovations,"  International  Journal  of  Literature  and Arts, vol. 6(3), pp. 54-62, 2018.
[5] A.  Priyatna,  "Penggunaan  Teknik  Motion  Tracking Untuk  Media  Promosi  di  Kedai  Ayam  Hepi,"  Jurnal Abdimas BSI, vol. 1, pp. 281-289, 2018.
[6] M.  P.  Kurniawan,  "Pembuatan  Iklan  Televisi  Hotel Mawar  Asri  Yogyakarta  dengan  Teknik  Motion Tracking,"  Jurnal  Ilmiah  DASI,  vol.  15,  pp.  16- 31,2014.
[7] D.  P.  Nasional,  Kamus  Bahasa  Indonesia,  Jakarta:
Pusat Bahasa, 2008.
[8] M.  Webster,  "implementation,"  Merriam  Webster, [Online]. Available: https://www.merriam- webster.com/dictionary/implementation. [Accessed
12September 2023].
[9] A.  C.  Team,  Adobe  After  Effect  CC  Classroom  in  a Book, Pearson Education, 2012.
[10] B. Gyncild, Adobe After Effects Classroom in a Book (2020 release), Pearson Education, 2019.
[11] E. Trainor-fogleman, "The 6 types of motion tracking in After Effects – 2022 Guide," Evercast, 29 Desember 2021. [Online].
Available: https://www.evercast.us/blog/tracking-in-after- effects. [Accessed 11 September 2023]
[12] B. Goldsmith, Adobe After Effect, Rocky Nook, 2022.
[13] E.  Dinur,  The  Filmmaker's  Guide  to  Visual  Effects, New York: Taylor & Francis, 2017.
[14] S.  Z.  Jeffrey  A.  Okun,  Visual  Effects  Society Handbook,  Workflow  and  Techniques,  Burlington, Massachusetts: Taylor & Francis, 2012.
[15] Adobe, "Stop-motion animation explained: definition, types and techniques.," Adobe, 06 Mei 2022. [Online]. Available:https://www.adobe.com/creativecloud/ani mation/discover/stop-motionanimation.html.
[Accessed 11 September 2023].
[16] D. Frame, "Introduction To Stop-motion Animation," Dragon  Frame,  07  Juni  2012.  [Online].  Available: https://www.dragonframe.com/introduction- stopmotion-animation/.  [Accessed  11  September 2023].
[17] D. D. A. G. Atul P. Godse, Multimedia and Animation, India: Technical Publications, 2020