2 MEDIA AR, 2 PLATFORM AI!
Bagaimana jika murid bisa belajar dengan mencubit, memilih, dan menggeser objek virtual menggunakan gerakan tangan di depan kamera?
Inilah yang saya eksplorasi melalui pemanfaatan AI untuk mengembangkan media pembelajaran interaktif berbasis hand tracking dan motion gesture. Setelah membagikan video hasil percobaan, beberapa rekan guru meminta prompt yang saya gunakan. Sesuai janji, saya berbagi dua percobaan dengan materi dan platform berbeda, beserta template prompt yang dapat di-ATM (Amati, Tiru, Modifikasi).
Uji Coba 2: Nusantara AR Gesture Learning — Gemini Canvas, IPAS Kelas V.
1. Apa Itu AR Motion Gesture?
Istilah ini saya gunakan untuk media interaktif yang memanfaatkan kamera dan pengenalan gerakan tangan. Pengguna dapat melakukan pinch (mencubit) untuk memilih objek, drag (menggeser), dan release (melepaskan) objek pada area target. Secara teknis, sistem memakai hand tracking untuk memperkirakan posisi tangan.
Catatan: Contoh ini adalah interaksi objek virtual berbasis kamera; tidak selalu sama dengan augmented reality yang menempatkan objek 3D secara presisi pada lingkungan nyata.
2. Uji Coba 1 — Misi Pencernaan AR dengan Google AI Studio
Materi: Sistem Pencernaan Manusia
Platform: Google AI Studio
Eksperimen pertama saya lakukan dengan mengembangkan Misi Pencernaan AR untuk membantu murid mengenali organ pencernaan, memahami fungsinya, serta mengurutkan jalannya makanan. Pada aplikasi terdapat kamera pendeteksi tangan, siluet tubuh, dan daftar organ. Pengguna mencubit objek organ, kemudian menggesernya ke posisi yang tepat.
- Deteksi tangan melalui kamera.
- Gerakan pinch untuk memilih objek.
- Tantangan menyusun organ pencernaan.
- Informasi fungsi organ, kemajuan, dan umpan balik.
Dari percobaan ini, saya belajar bahwa tampilan yang menarik belum tentu berarti seluruh fungsi sudah berjalan. Kamera, deteksi tangan, dan respons objek perlu diuji secara bertahap.
3. Uji Coba 2 — Nusantara AR Gesture Learning dengan Gemini Canvas
Materi: Keragaman Rumah Adat Nusantara
Platform: Gemini Canvas
Setelah percobaan pertama, saya mengembangkan Nusantara AR Gesture Learning menggunakan Gemini Canvas. Pengguna memilih kartu rumah adat melalui gerakan mencubit, lalu menyeretnya menuju zona target berdasarkan provinsi yang ditanyakan.
- Panel kontrol kamera dan sensor gerakan.
- Kartu pilihan rumah adat beserta pengecoh.
- Gerakan pinch dan drag.
- Zona target, level, skor, dan instruksi tantangan.
Kedua media memiliki pendekatan interaksi serupa, tetapi materi, prompt, platform, dan rancangan aktivitasnya berbeda. Jadi, bukan satu prompt identik yang langsung menghasilkan dua aplikasi.
4. Perbandingan Dua Percobaan
| Aspek | Uji Coba 1 | Uji Coba 2 |
|---|---|---|
| Platform | Google AI Studio | Gemini Canvas |
| Media | Misi Pencernaan AR | Nusantara AR Gesture Learning |
| Mapel | IPA | IPAS |
| Kelas | VIII SMP | V SD |
| Aktivitas | Menyusun organ pencernaan | Mencocokkan rumah adat |
| Interaksi | Hand tracking, pinch, drag | Hand tracking, pinch, drag |
Dua percobaan ini memperlihatkan potensi AI untuk membantu membuat prototipe pembelajaran, tetapi belum cukup untuk menyimpulkan satu platform lebih unggul. Hasil dipengaruhi prompt, kompleksitas aktivitas, perangkat, dan proses pengujian.
5. Mengembangkan Media dengan Prinsip ATM
Amati: pahami mekanisme interaksi dan alur tantangan dari contoh media.
Tiru: coba terapkan pendekatan teknisnya sebagai latihan.
Modifikasi: sesuaikan tujuan pembelajaran, materi, objek, aturan, tampilan, dan evaluasi.
Contohnya, aktivitas memilih dan menyeret objek dapat digunakan untuk mengurutkan pecahan (Matematika), menyusun struktur teks (Bahasa Indonesia), mengurutkan tahapan wudu (PAI), atau menyusun peristiwa sejarah. Modifikasi bukan sekadar mengganti nama mata pelajaran; aktivitas harus relevan dengan tujuan pembelajaran.
6. Berbagi Template Prompt ATM dan Contoh PAI
Sesuai janji, berikut dokumen yang dapat dijadikan referensi untuk belajar dan mengembangkan prompt sendiri.
Buka Template Prompt ATM ↗
Buka Contoh Prompt PAI ↗
Dokumen prompt khusus percobaan pertama: aktivitas menyusun organ sistem pencernaan menggunakan hand tracking, pinch, dan drag.
Buka Prompt Misi Pencernaan AR ↗
Pastikan akses dokumen diatur agar pembaca dapat membukanya, dan periksa ketepatan materi sebelum digunakan bersama murid.
7. Contoh Penerapan dan Perbaikan di Gemini
Dalam pengembangan AI, kamera dapat aktif tetapi gerakan pinch belum tepat, atau objek belum dapat dipindahkan. Karena itu, saya melakukan pengujian dan perbaikan bertahap. Berikut tautan referensi percobaan:
Lihat contoh penerapan prompt dan perbaikan di Gemini ↗
8. Langkah Praktik Membuat Media AR Motion Gesture
- Tentukan materi dan tujuan pembelajaran.
- Pilih bentuk interaksi, misalnya menyusun atau mencocokkan.
- Sesuaikan prompt dengan kelas, materi, dan aktivitas.
- Buka Google AI Studio atau Gemini Canvas sesuai kebutuhan.
- Periksa tampilan, instruksi, dan akurasi materi.
- Uji kamera, deteksi tangan, serta gerakan pinch dan drag.
- Perbaiki fungsi yang bermasalah secara spesifik.
- Uji kelayakan, aksesibilitas, dan keamanan penggunaan kamera sebelum dipakai murid.
9. Video Tutorial Gemini Canvas
Video berikut khusus memperlihatkan tutorial membuat media AR Motion Gesture menggunakan Gemini Canvas. Eksperimen Google AI Studio dibahas sebagai perbandingan dalam artikel ini.
🎬 Video Tutorial AR Motion Gesture
Pelajari cara mengembangkan aktivitas interaktif dengan gerakan tangan pinch & drag melalui Gemini Canvas.
10. Refleksi: Bukan Sekadar Media yang Menarik
Dari dua percobaan ini, saya semakin memahami bahwa pemanfaatan AI dalam pendidikan bukan hanya tentang membuat aplikasi yang terlihat canggih. Teknologi seharusnya membantu guru merancang pengalaman belajar yang lebih bermakna.
Gerakan tangan, objek virtual, skor, dan animasi memang menarik. Namun, tujuan pembelajaran tetap menjadi dasar utama. Guru tetap perlu menguji fungsi, memeriksa materi, dan menyesuaikan media dengan kebutuhan murid.
Inovasi pembelajaran tidak berhenti pada prompt pertama. Selamat mencoba, ber-ATM, dan berkarya!
GuruUpgradeID
Belajar • Berkarya • Berbagi • Menginspirasi
Instagram • TikTok • YouTube: @guruupgradeid
