Prompt Engineering 10: Prompt untuk Riset

Bab ini menerapkan teknik-teknik sebelumnya ke pekerjaan nyata. Untuk riset, model bahasa paling berguna sebagai asisten membaca dan menyusun: merangkum paper yang kamu berikan, membandingkan banyak paper, dan membantu melihat kelemahan metodologi. Model tidak cocok dijadikan sumber fakta atau pencari referensi tanpa verifikasi (lihat materi 09).

Yang akan dipelajari

• Merangkum paper dengan format ulasan jurnal yang konsisten
• Menyusun tabel perbandingan literatur
• Mengkritisi metodologi
• Membantu merumuskan pertanyaan penelitian
• Alur verifikasi yang wajib dilakukan

Merangkum paper: format ulasan jurnal

Ringkasan yang baik punya struktur tetap, sehingga paper-paper bisa dibandingkan. Format berikut sama dengan bagian-bagian yang dipakai di Ulasan Jurnal di website ini.

Prompt lemah:

Rangkum paper ini.

Prompt yang lebih baik:

Kamu membantu saya menulis ulasan paper untuk pembaca umum yang tertarik
pada AI, tetapi bukan peneliti di bidang ini.

<paper>
[tempel teks paper atau minimal abstrak, metode, hasil, dan kesimpulan]
</paper>

Tulis ulasan dengan subjudul berikut (Markdown, ##):

## Ringkasan
3–5 kalimat sederhana: apa yang diteliti dan apa temuannya.
## Masalah yang diselesaikan
Masalah apa dan kenapa penting.
## Metode
Pendekatan, data (nama, ukuran), dan eksperimen utama.
## Hasil
Temuan utama beserta angka penting, tulis persis seperti di paper.
## Kelebihan
## Keterbatasan
Utamakan keterbatasan yang disebutkan penulis; pisahkan dengan jelas
jika kamu menambahkan keterbatasan dari analisismu sendiri.

Aturan:
- Hanya gunakan informasi dari paper. Jika suatu informasi tidak ada,
  tulis "tidak disebutkan di paper".
- Jangan mengubah angka. Sertakan satuannya.
- Jelaskan istilah teknis saat pertama kali muncul.

Bagian Pendapat saya sengaja tidak diminta. Bagian itu sebaiknya kamu tulis sendiri, karena di sanalah nilai ulasanmu.

Paper yang hanya diwakili abstrak akan menghasilkan ulasan yang dangkal, terutama untuk bagian Metode dan Keterbatasan. Berikan teks lengkap jika memungkinkan, dan pastikan haknya (lihat materi 17 tentang dokumen berhak cipta dan data rahasia).

Tabel perbandingan literatur

Setelah punya beberapa paper, buat tabel perbandingan. Lebih baik bertahap (materi 06): ekstrak per paper, baru gabungkan.

<paper id="1">...</paper>
<paper id="2">...</paper>
<paper id="3">...</paper>

Buat tabel Markdown perbandingan dengan kolom:
Paper | Tujuan | Dataset (ukuran) | Metode | Metrik | Hasil terbaik | Keterbatasan

Aturan:
- Isi hanya dari teks paper; tulis "–" jika tidak disebutkan.
- Salin angka hasil persis seperti di paper, beserta nama metriknya.
- Setelah tabel, tulis 3 poin pengamatan: pola yang sama, perbedaan
  penting, dan hal yang tidak bisa dibandingkan langsung (misalnya
  karena dataset atau metrik berbeda).

Poin terakhir penting: paper dengan dataset atau metrik berbeda tidak bisa dibandingkan hanya dari angkanya. Model kadang menyimpulkan "metode A lebih baik" padahal tidak sebanding.

Mengkritisi metodologi

Model bisa membantu menemukan pertanyaan yang mungkin diajukan reviewer:

Bertindaklah sebagai reviewer yang kritis tetapi adil.
Baca bagian metodologi dan hasil berikut.

<metodologi>...</metodologi>
<hasil>...</hasil>

Identifikasi potensi masalah pada:
1. Pembagian data (kebocoran data, data uji yang terlalu mirip data latih)
2. Pembanding (baseline) yang dipakai
3. Metrik dan uji statistik
4. Generalisasi ke data lain

Untuk setiap masalah: jelaskan kenapa bermasalah, seberapa serius
(tinggi/sedang/rendah), dan informasi apa yang perlu ditanyakan ke penulis.
Jangan menganggap ada masalah jika teks memang sudah menjelaskannya.

Teknik ini juga berguna untuk memeriksa naskahmu sendiri sebelum dikirim.

Merumuskan pertanyaan penelitian

Topik saya: [topik]. Data yang saya punya: [deskripsi].
Waktu: [lama]. Kemampuan: [deskripsi].

Usulkan 5 rumusan pertanyaan penelitian. Untuk setiap usulan, nilai:
kebaruan (perlu saya cek di literatur), kelayakan dengan data dan waktu
saya, serta risiko utamanya. Jangan menyatakan suatu topik "belum pernah
diteliti", karena kamu tidak bisa memastikannya.

Kalimat terakhir mencegah klaim kebaruan yang tidak bisa diverifikasi model.

Alur verifikasi wajib

Hasil dari model	Yang harus kamu periksa
Angka di ringkasan	Cocokkan dengan tabel/teks paper
Nama dataset dan metode	Cocokkan dengan bagian metode paper
Keterbatasan	Apakah memang ditulis penulis, atau analisis model?
Kritik metodologi	Apakah paper sudah menjawabnya di bagian lain?
Usulan referensi (jika ada)	Cari dan buka satu per satu

Coba sendiri

Ambil satu paper di bidangmu. Jalankan prompt ulasan di atas, lalu bandingkan hasilnya dengan pemahamanmu sendiri. Hitung berapa angka yang tepat, berapa yang keliru, dan bagian mana yang terlalu umum.

Catatan bahasa Inggris

Kebanyakan paper berbahasa Inggris. Kamu bisa menempelkan paper berbahasa Inggris dan meminta ulasan dalam bahasa Indonesia, tetapi minta model mempertahankan istilah teknis asli dalam kurung, misalnya "pembelajaran transfer (transfer learning)", agar mudah dicocokkan dengan literatur.

Kesalahan yang sering terjadi

Kesalahan	Akibat
Meminta ringkasan paper hanya dari judul	Ringkasan karangan
Tidak menetapkan format	Ringkasan antar paper sulit dibandingkan
Membandingkan angka dari dataset berbeda	Kesimpulan menyesatkan
Menyalin ringkasan model ke tulisan tanpa membaca paper	Kesalahan ikut tersebar; juga masalah integritas

Latihan

1. Tulis prompt untuk mengekstrak informasi dari 5 abstrak menjadi tabel yang bisa langsung ditempel ke spreadsheet.
2. Kamu ingin tahu apakah sebuah paper berisiko mengalami data leakage. Tulis prompt-nya.
3. Model menyimpulkan "Metode di paper 2 adalah yang terbaik" dari tabel perbandingan. Pertanyaan apa yang harus kamu ajukan sebelum mempercayai kesimpulan itu?

Contoh jawaban

Latihan 1

<abstrak id="1">...</abstrak>
...
<abstrak id="5">...</abstrak>

Ekstrak informasi setiap abstrak menjadi CSV dengan header:
id,tujuan,dataset,metode,metrik,hasil
Gunakan tanda kutip ganda untuk setiap nilai. Tulis "-" jika tidak disebutkan.
Tulis hanya CSV, tanpa teks lain.

Alasannya: CSV dengan kutip ganda aman ditempel ke spreadsheet walaupun isinya mengandung koma; nilai "-" mencegah karangan.

Latihan 2

<metodologi>...</metodologi>

Periksa risiko data leakage pada penelitian ini. Pertimbangkan:
- Apakah pembagian data dilakukan sebelum augmentasi/normalisasi?
- Apakah data dari subjek/pasien yang sama bisa muncul di latih dan uji?
- Apakah pemilihan fitur atau tuning memakai data uji?
Untuk setiap poin: kutip kalimat relevan dari teks, lalu nilai risikonya
(ada/tidak ada/tidak bisa ditentukan dari teks).

Latihan 3

Contoh pertanyaan: Apakah semua paper memakai dataset dan pembagian data yang sama? Apakah metriknya sama? Apakah ada uji signifikansi? Apakah biaya komputasi atau ukuran model dibandingkan? Jika jawabannya "tidak", kesimpulan "terbaik" belum bisa ditarik dari tabel saja.