Prompt & ChatGPTAI untuk Produktivitas & Operasional

Bedanya Prompt Engineering dan Answer Engineering yang Jarang Dibahas Orang

Bedanya Prompt Engineering dan Answer Engineering yang Jarang Dibahas Orang

Prompt engineering membantu merancang instruksi dan konteks untuk tugas AI. Dalam artikel ini, answer engineering berarti merancang keluaran agar dapat digunakan dan diperiksa oleh langkah berikutnya. Keduanya saling berkaitan, bukan dua bidang yang terpisah mutlak.

Format yang sesuai membantu sistem membaca hasil. Namun, jawaban yang lolos pemeriksaan format masih bisa salah isinya, dan jawaban yang benar bisa gagal diproses karena masalah integrasi.

Intinya:

  • Tentukan isi yang diperlukan sekaligus bentuk yang dapat diterima proses berikutnya.
  • Pisahkan pemeriksaan format, makna isi, dan keberhasilan pengiriman atau penyimpanan.
  • Sediakan aturan untuk data kurang, konflik, penolakan, serta hasil yang tidak lengkap.
  • Beberapa pengujian berhasil belum membuktikan proses dapat menangani seluruh keadaan.

Dua hasil yang tampak mirip dapat memerlukan perbaikan berbeda

Bayangkan contoh rekaan toko online yang mengelompokkan pertanyaan pelanggan. Hasilnya kemudian dimasukkan ke spreadsheet untuk dirangkum setiap minggu.

Pada contoh pertama, AI menyebut kategori yang sesuai tetapi menuliskannya dalam kalimat bebas. Pengambil data yang hanya menerima label tertentu gagal memasukkannya ke kolom kategori.

Pada contoh kedua, formatnya sesuai tetapi kategori yang dipilih tidak cocok dengan isi pesan. Sistem berhasil menyimpan jawaban yang keliru.

Contoh ketiga juga mungkin: jawaban dan formatnya sudah benar, tetapi penyimpanan gagal atau baris tercatat dua kali karena proses diulang.

Ketiga masalah itu membutuhkan pemeriksaan berbeda. Mengubah prompt saja belum tentu menyelesaikan semuanya.

Jangan membatasi diagnosis pada prompt atau format

Isi yang meleset dapat berasal dari instruksi, input yang kurang, sumber yang salah, model, atau aturan kategori yang belum jelas. Periksa bahan yang diterima sebelum menyimpulkan penyebabnya.

Masalah pengambilan dapat berasal dari format keluaran, parser, pemetaan kolom, versi skema, atau perubahan integrasi. Sebagian sistem membaca struktur; sebagian lain mencari penanda teks tertentu.

Jika parser menggunakan pola yang terlalu rapuh, variasi kecil dapat membuat hasil gagal. Perbaikan mungkin perlu dilakukan pada cara membaca data, bukan hanya melarang AI mengubah kalimat.

Panduan mengurangi hasil AI yang generik dapat membantu memperjelas instruksi. Untuk proses berulang, tambahkan pemeriksaan alur sampai tempat tujuan.

Tulis kontrak keluaran yang benar-benar dibutuhkan

Kontrak keluaran menjelaskan data yang diterima langkah berikutnya. Tentukan nama field, tipe nilai, pilihan yang sah, serta aturan ketika informasi belum tersedia.

Jangan mewajibkan urutan field jika proses penerima tidak membutuhkannya. Misalnya, pembacaan objek berdasarkan nama key berbeda dari pembacaan kolom berdasarkan posisi.

Bagian kontrak Contoh kebutuhan Pertanyaan pemeriksaan
Identitas item ID pesan dari sumber Apakah hasil dapat dicocokkan dengan item asal?
Kategori Salah satu kategori yang didefinisikan Apakah arti setiap kategori cukup jelas?
Status pemeriksaan Siap dipakai atau perlu review Kapan sistem harus menahan hasil?
Informasi kosong Nilai yang disepakati untuk data tidak tersedia Apakah berbeda dari nol atau string kosong?
Versi kontrak Penanda versi yang digunakan Apakah penghasil dan penerima memakai aturan yang sama?

Pilih field sesuai kebutuhan. Banyak atau sedikitnya field bukan ukuran mutu kontrak; setiap field perlu memiliki tujuan yang dapat dijelaskan.

Jika suatu nilai harus berbentuk angka, jangan sembarang mengisinya dengan teks “TIDAK ADA”. Tentukan representasi data kosong yang memang didukung kontrak, misalnya nilai null jika diperbolehkan.

Bedakan “tidak diketahui”, “tidak berlaku”, dan “nilai nol”. Ketiganya dapat memerlukan keputusan lanjutan yang berbeda.

Structured output membantu bentuk, bukan menjamin kebenaran

Structured output berkaitan dengan keluaran yang mengikuti struktur atau skema tertentu. Cara penerapan serta jaminan teknisnya bergantung pada layanan yang digunakan.

Periksa kemampuan yang tersedia dan lakukan validasi pada sisi penerima. Instruksi “jawab hanya dalam format ini” tidak sama dengan bukti bahwa semua keluaran memenuhi kontrak.

Skema dapat membantu memeriksa apakah field ada dan tipe nilainya sesuai. Skema tidak otomatis membuktikan bahwa kategori benar atau angka sesuai sumber.

Karena itu, pisahkan tiga lapisan pemeriksaan:

  1. Struktur: hasil dapat dibaca dan memenuhi kontrak.
  2. Isi: nilai sesuai input, aturan, dan sumber yang relevan.
  3. Pemrosesan: hasil masuk ke tujuan yang benar tanpa hilang atau tergandakan.

Satu lapisan lulus tidak menggantikan lapisan lain. Status keberhasilan sebaiknya menjelaskan bagian yang memang sudah diperiksa.

Tangani keadaan yang tidak cocok dengan hasil biasa

Keluaran bisa tidak lengkap, ditolak, atau gagal dibuat. Sistem perlu mengetahui kapan hasil boleh dilanjutkan dan kapan harus ditahan.

Untuk input yang kurang, tentukan apakah sistem meminta informasi, mengembalikan status perlu review, atau menyimpan bagian yang sudah diketahui. Jangan memaksa nilai terisi hanya agar tampil lengkap.

Untuk kategori yang bertentangan, jelaskan aturan penyelesaiannya. Jika aturan belum cukup, tandai ketidakpastian dan arahkan ke pemeriksaan yang sesuai.

Jika proses dicoba ulang, periksa identitas item agar satu pesan tidak menghasilkan beberapa baris yang dianggap berbeda. Keberhasilan permintaan ulang juga perlu dicocokkan dengan status sebelumnya.

Tetapkan batas percobaan dan jalur penanganan kegagalan. Mengulang tanpa batas dapat menambah biaya tanpa memperbaiki penyebab masalah.

Satu langkah atau dua langkah?

Memisahkan penyusunan isi dari pengubahan format dapat berguna pada tugas tertentu. Namun, langkah tambahan dapat menambah biaya, waktu, dan peluang isi berubah selama pemindahan.

Satu langkah juga bisa memadai jika instruksi, kontrak, dan pemeriksaannya jelas. Jangan menganggap prompt yang panjang pasti lebih buruk atau dua langkah selalu lebih stabil.

Bandingkan kedua pendekatan pada tugas yang sama. Catat mutu isi, keberhasilan struktur, waktu, biaya, dan kebutuhan koreksi.

Jika memakai dua langkah, periksa bahwa tahap format tidak menambahkan klaim atau menghapus batas penting. Hasil yang lebih ringkas belum tentu mempertahankan makna yang sama.

Uji kasus biasa dan kasus yang perlu ditahan

Mulai dengan contoh yang mewakili pekerjaan. Tiga hasil yang berhasil dapat menjadi pemeriksaan awal, tetapi belum membuktikan proses andal untuk seluruh input.

Kasus uji Yang ingin dipastikan
Input lengkap dan jelas Isi sesuai serta struktur diterima
Informasi penting tidak ada Sistem tidak mengarang nilai untuk melengkapi field
Input bertentangan Konflik ditandai atau diselesaikan sesuai aturan
Keluaran terpotong atau tidak valid Hasil tidak diteruskan sebagai data lengkap
Permintaan di luar cakupan Status penanganan sesuai, bukan kategori yang dipaksakan
Item diproses ulang Penyimpanan tidak membuat duplikasi yang keliru
Versi kontrak berubah Penghasil dan penerima tetap sesuai atau menahan versi yang tidak didukung

Gunakan bahan yang memang boleh diproses. Jika contoh berasal dari pelanggan, hilangkan informasi yang tidak diperlukan dan periksa izin serta akses yang relevan.

Catat versi instruksi, kontrak, model, dan integrasi untuk membantu penelusuran. Setelah perubahan, uji kembali kasus lama agar perbaikan tidak merusak hasil yang sebelumnya benar.

Sesuaikan ketelitian dengan penggunaan hasil

Brainstorming dapat memakai format bebas atau struktur ringan, tergantung bagaimana hasilnya akan digunakan. Pekerjaan sekali jalan juga bisa memerlukan kontrak ketat jika kesalahan pemindahan berdampak besar.

Sebaliknya, jangan membangun struktur rumit untuk data yang tidak pernah dipakai. Mulai dari kebutuhan penerima dan dampak kesalahan.

Untuk tim kecil, catat siapa yang memeriksa kegagalan dan kapan hasil perlu ditinjau. Alarm yang tersedia tetapi tidak ditangani belum menyelesaikan masalah operasional.

Format yang konsisten memudahkan pemeriksaan, tetapi tidak menghilangkan kebutuhan memahami isi. Orang lain tetap membutuhkan konteks serta kriteria yang jelas untuk menilai hasil.

Mulai dari satu alur sampai tujuan akhirnya

Pilih tugas berulang dan ikuti satu item dari input sampai tersimpan atau digunakan. Tandai tempat terjadinya salah isi, perubahan format, atau kegagalan pemrosesan.

Tulis kontrak yang diperlukan, siapkan penanganan data kurang, lalu uji pada beberapa keadaan. Simpan bukti hasil agar perubahan berikutnya bisa dibandingkan.

Tujuannya bukan sekadar membuat jawaban terlihat rapi. Tujuannya memastikan isi yang sesuai dapat diteruskan dengan cara yang dapat diperiksa.

Kalau kamu ingin mengubah kumpulan prompt menjadi proses kerja tim, lihat program mentoring AI.

Pertanyaan yang sering muncul

Apa itu answer engineering dalam artikel ini?

Istilah ini digunakan untuk merancang keluaran AI agar dapat digunakan dan diperiksa oleh langkah berikutnya. Cakupannya meliputi kontrak data, informasi kosong, validasi, dan penanganan kegagalan. Ini berkaitan dengan perancangan prompt serta integrasi, bukan jaminan terpisah bahwa jawaban akan benar.

Apakah structured output menjamin isi AI benar?

Tidak otomatis. Struktur atau skema membantu memeriksa bentuk dan tipe nilai sesuai kemampuan penerapannya. Isi tetap perlu diperiksa terhadap input, aturan, dan sumber yang relevan. Keberhasilan penyimpanan atau pengiriman juga perlu diuji sebagai bagian lain dari alur.

Bagaimana mencari penyebab jawaban gagal diproses?

Periksa instruksi, kelengkapan input, sumber, dan aturan isi. Lalu periksa struktur keluaran, parser, pemetaan field, versi kontrak, serta integrasi. Bedakan hasil salah, format tidak diterima, dan penyimpanan gagal atau ganda. Perbaikan harus mengikuti penyebab yang ditemukan.

Apakah proses AI harus dipisah menjadi dua langkah?

Tidak selalu. Pemisahan penyusunan isi dan format dapat membantu, tetapi juga menambah biaya serta peluang perubahan makna. Bandingkan dengan satu langkah pada tugas yang sama. Nilai isi, struktur, waktu, biaya, dan koreksi; gunakan pendekatan yang memenuhi kebutuhan dengan bukti pengujian.

Artikel terkait