Cara menggunakan AI untuk penelitian dengan cara yang benar - secara bertanggung jawab dan efektif


Jika Anda menggunakan AI untuk penelitian, berikut lima cara untuk mengetahui kebohongannya dan memeriksa fakta sebelum Anda mengandalkannya.

Terkadang, menurut saya chatbot AI dimodelkan setelah remaja. Mereka bisa menjadi sangat, sangat baik. Namun di lain waktu, mereka berbohong. Mereka mengarang-ngarang. Mereka berdiskusi. Mereka dengan percaya diri memberikan jawaban berdasarkan asumsi bahwa mereka mengetahui segala sesuatu yang perlu diketahui, namun sayangnya mereka salah.

Lihat apa yang saya maksud? Anda tidak dapat membedakan dari konteks di atas apakah uraian saya merujuk pada AI atau remaja.

Meskipun sebagian besar dari kita tahu untuk tidak menemui remaja untuk mendapatkan informasi dan nasihat penting, kita mulai mengandalkan AI yang sama-sama menyesatkan. Agar adil, AI tidaklah buruk; mereka hanya diberi kode seperti itu.

Tahun lalu, saya memberi Anda delapan cara untuk mengurangi halusinasi ChatGPT:

  1. Hindari ambiguitas dan ketidakjelasan
  2. Hindari menggabungkan konsep-konsep yang tidak berhubungan
  3. Hindari menggambarkan skenario yang mustahil
  4. Hindari menggunakan entitas fiksi atau fantastik
  5. Hindari pertentangan dengan fakta yang diketahui
  6. Hindari menyalahgunakan istilah-istilah ilmiah
  7. Hindari memadukan realitas yang berbeda, dan
  8. Hindari menetapkan properti yang tidak seperti biasanya

Namun, tips itu adalah hal yang harus dihindari. Saya tidak memberi Anda alat proaktif untuk menggali respons cepat dan memandu AI untuk memberikan respons yang lebih produktif. Teknik ini sangat penting jika Anda akan menggunakan AI sebagai pengganti mesin pencari atau sebagai alat untuk membantu Anda meneliti atau menulis artikel atau makalah.

Mari kita gali lima langkah utama yang dapat Anda ambil untuk memandu AI agar memberikan respons yang akurat.

1. Mintalah referensi dan sumber

Sebelumnya saya telah menulis panduan cara membuat ChatGPT menyediakan sumber dan kutipan. Untungnya, ChatGPT semakin baik dalam mengutip sumber, khususnya dengan GPT-4o LLM dan kemampuan pencarian web dalam versi $20 per bulan.

Namun ChatGPT tidak selalu menyumbangkan sumber-sumber tersebut secara sukarela. Jika Anda melakukan penelitian, selalu --selalu-- tanyakan sumbernya.

Kemudian, uji sumbernya dan pastikan sumbernya benar-benar ada. Berkali-kali menurut pengalaman saya, ChatGPT mengutip sumber yang tampaknya sangat cocok dengan apa yang saya cari. Satu-satunya masalah adalah setelah saya mengklik atau mencari sumber yang disebutkan berdasarkan judul, saya menemukan seluruh sumber telah dibuat-buat.

ChatGPT bahkan memilih jurnal akademik asli, mengarang nama penulis, dan kemudian memberikan judul artikel yang terdengar menarik. Dapatkah Anda bayangkan betapa buruknya seandainya saya memasukkan sumber-sumber tersebut ke dalam karya saya tanpa memeriksa ulang? Aku bergidik bahkan memikirkannya.

Jadi, tanyakan sumbernya, periksa sumbernya, dan hubungi AI jika itu memberi Anda jawaban yang dibuat-buat.

2. Minta AI untuk 'tunjukkan karya Anda'

Di awal penjelajahan saya di ChatGPT, saya meminta alat tersebut untuk membantu saya menemukan mekanik lokal. Saya mengirimkannya ke Yelp dan ulasan Google untuk melakukan analisis sentimen pada komentar. Pada saat itu, mereka menjangkau situs-situs tersebut dan memberi saya informasi berguna.

Saya mencoba tes ini lagi baru-baru ini dan menerima serangkaian peringkat mekanik lainnya. Ini sebenarnya memberi tahu saya, "Berdasarkan analisis komprehensif dari ulasan Yelp dan Google untuk bengkel mobil independen..."

Tapi, ChatGPT berbohong.

Alat ini tidak pernah melihat ulasan Yelp atau Google. Hal ini mungkin terjadi karena situs (termasuk ZDNET) menjadi lebih ketat dalam mengizinkan AI untuk mengikis kontennya. Tidak apa-apa. Argumen saya adalah bahwa AI seharusnya kembali dan mengatakan tidak dapat memeriksa ulasan Yelp atau Google. Sebaliknya, AI hanya mengklaim hal itu terjadi.

Pembohong, pembohong, celana terbakar.

Ketika saya memintanya untuk menunjukkan kerjanya, alat tersebut kembali mengatakan bahwa ia telah melihat ulasan Yelp dan Google. Namun, dalam respons "tunjukkan karya Anda", alat tersebut juga menampilkan sumber ulasan yang dianalisis. Ini ternyata adalah situs bernama Birdeye Reviews.

Sekarang, saya tidak menentang Ulasan Birdeye. Saya belum pernah menggunakannya. Tapi bukan itu intinya. Intinya ChatGPT menyatakan telah menghasilkan informasi berdasarkan ulasan Yelp dan Google.

"Tunjukkan karya Anda" adalah perintah yang ampuh. Anda dapat mengungkap segala macam informasi menarik tentang proses penalaran yang digunakan AI untuk memberikan hasil.

3. Validasi silang tanggapan AI pada pertanyaan terkait

Proses ini memungkinkan Anda dan AI menjelajahi suatu topik secara mendalam untuk melihat apakah jawaban chatbot tetap konsisten secara logis dan relevan secara kontekstual. Kami banyak menggunakan pendekatan ini dalam penelitian dan rekayasa tradisional untuk membantu memastikan kami berada di jalur yang benar. Itu bisa diterapkan pada AI juga.

Misalnya, Anda menulis tentang ban mobil. Anda mungkin bertanya, “Bahan apa yang digunakan pada ban mobil?” Jawaban yang mungkin Anda harapkan adalah “karet”. Namun karet bukan hanya satu bahan. Ada karet yang berasal dari pohon, karet sintetis, dan bahan yang memiliki kelenturan dan kekuatan seperti karet tetapi tidak mengandung karet sama sekali.

Misalnya, karet dan TPU (poliuretan termoplastik) bersifat fleksibel dan terasa seperti karet. Tapi karet sintetis terbuat dari monomer berbahan dasar minyak bumi dan TPU terbuat dari elastomer termoplastik.

Anda bisa bertanya kepada AI, “Jenis karet apa yang digunakan pada ban mobil?” atau “Apakah karet asli masih digunakan pada ban mobil?” Hal ini akan memunculkan jawaban yang menjelaskan bagaimana ban mobil menggunakan campuran jenis karet. Anda dapat menyelami lubang kelinci lebih dalam dengan bertanya, "Di mana lagi karet digunakan di mobil?" atau “Jenis karet apa yang digunakan pada ban mobil Lego?”

Inti dari praktik ini bukanlah untuk menggunakan semua tanggapan dalam makalah Anda, melainkan untuk mengeksplorasi bagaimana AI menangani kelompok pertanyaan ini dan apakah AI kehilangan alur cerita sepenuhnya.

Selain itu, karena ChatGPT mempertahankan pengetahuannya saat berada dalam suatu sesi, semakin banyak Anda bertanya, dan semakin dalam Anda menyelami topik tertentu, semakin Anda melatih AI untuk tetap berada dalam konteks bidang pengetahuan yang Anda cari. Pendekatan ini membantu mencegah AI bekerja dengan sendirinya dan meningkatkan peluang mendapatkan jawaban yang akurat.

4. Tanyakan tentang kejadian terkini atau informasi sensitif terhadap waktu

Banyak chatbot memiliki tanggal batas basis pengetahuan. Versi gratis ChatGPT memiliki tanggal batas pengetahuan pada Oktober 2023, yang berarti apa pun yang terjadi di dunia setelah tanggal tersebut tidak akan diketahui oleh AI.

ChatGPT Plus, yang juga memiliki tanggal batas pengetahuan pada Oktober 2023, juga dapat mengakses informasi di web. Kemampuan ini dapat menghasilkan informasi yang jauh lebih akurat. ChatGPT versi gratis juga dapat mengakses web tetapi dengan cara yang lebih "terbatas". Sebagai aturan umum, OpenAI tidak merinci apa yang dimaksud dengan "terbatas" ketika berbicara tentang versi gratisnya. Namun, Anda biasanya dapat berasumsi bahwa batasan berarti lebih sedikit kueri per sesi, lebih sedikit sumber daya yang disediakan, dan beberapa fitur berfungsi sebentar-sebentar.

Misalnya, ketika saya meminta ChatGPT versi gratis untuk mencantumkan negara-negara anggota NATO, ia mengembalikan daftar 31 negara. Namun ketika saya meminta ChatGPT Plus untuk mencantumkan negara-negara anggota NATO, ia mengembalikan daftar 32 negara. Pasalnya, Swedia resmi bergabung dengan NATO pada Maret 2024.

Chatbots biasanya akan memberi tahu Anda tanggal batasnya jika ditanya. Namun karena ada fitur tambahan (seperti penelusuran web di Plus), sebaiknya coba tanyakan tentang peristiwa yang hanya diketahui AI jika AI memiliki informasi terkini.

Ada trik untuk diterapkan di sini juga. Beberapa menit kemudian, saya bertanya pada ChatGPT versi gratis, "Dapatkah Anda menggunakan web untuk mencari siapa saja anggota NATO saat ini?" Saya secara eksplisit menyuruhnya untuk "menggunakan web". Saya mendapatkan kembali jawaban terkini. Jadi, jika Anda menggunakan versi gratis, pertimbangkan untuk melatihnya di mana mencari informasi untuk mendapatkan jawaban yang lebih baik.

Pendekatan ini akan membantu Anda memastikan cakupan pengetahuan AI dan menentukan apakah Anda mendapatkan rincian yang cukup terkini atau perlu memperhitungkan pengetahuan yang hilang karena batas waktu yang cukup lama.

5. Ajukan pertanyaan lanjutan dan perbaiki pertanyaan Anda secara berulang

Saya menggunakan pendekatan ini ketika saya menggunakan ChatGPT untuk membantu pemrograman saya. Saya mulai dengan kueri sederhana dan menyempurnakan serta memperjelasnya hingga saya mendapatkan beberapa kode dasar. Setelah pendekatan itu berhasil, saya menambahkan kalimat atau detail lain untuk apa yang saya inginkan dalam kode saya. Setelah serangkaian interaksi yang lebih terasa seperti percakapan daripada sesi pengkodean, saya sering kali mendapatkan beberapa kode yang berguna.

Bahkan jika Anda tidak sedang coding, Anda dapat menggunakan pendekatan ini. Katakanlah Anda sedang mengerjakan proyek yang terkait dengan layanan cloud. Anda mungkin bertanya kepada AI, "Bisakah Anda menjelaskan berbagai jenis layanan cloud?"

Dalam contoh ini, Anda mengharapkan jawaban untuk membahas layanan seperti email, hosting web, CRM, dan kategori perangkat lunak sebagai layanan lainnya. Namun, AI merespons dengan deskripsi SaaS (perangkat lunak sebagai layanan), PaaS (platform sebagai layanan), dan IaaS (infrastruktur sebagai layanan).

Sekarang Anda akan mengetahui bahwa ada beberapa cara untuk menafsirkan pertanyaan ini, sehingga Anda dapat melanjutkan dengan "Jelaskan berbagai jenis layanan cloud yang hanya berfokus pada layanan yang termasuk dalam kategori SaaS."

Anda dapat menindaklanjuti dengan pertanyaan seperti, "Berdasarkan kategori SaaS tersebut, buatlah daftar tiga layanan komersial paling populer di setiap kategori, beserta kekuatan dan kelemahan masing-masing."

Itu akan memberi Anda gambaran yang lebih rinci, beserta fitur setiap layanan. Namun mari kita perbaiki pendekatan ini dengan menggunakan satu langkah lagi. AI dalam skenario ini memberikan deskripsi setiap layanan, tetapi Anda ingin mengetahui perbedaan layanan tersebut.

Anda dapat menyaring kueri dengan menambahkan kata "komparatif" seperti dalam perintah ini: "Berdasarkan kategori SaaS tersebut, daftarkan tiga layanan komersial paling populer di setiap kategori, beserta kekuatan dan kelemahan PERBANDINGAN masing-masing."

Dalam pengujian saya, penyempurnaan terakhir menghasilkan tabel yang membandingkan fitur masing-masing. Saya suka meja. Faktanya, jika AI tidak mengembalikan informasi dalam bentuk tabel, tip bonus saya adalah meminta AI untuk menyajikan hasilnya dalam sebuah tabel. Alat ini sering kali memfaktorkan ulang jawabannya dengan cara yang menarik saat beroperasi dengan arahan tersebut.

Apa taktik AI favorit Anda?

Apa praktik terbaik favorit Anda untuk memastikan hasil yang andal saat mengobrol dengan AI? Beri tahu kami di komentar di bawah.

Artikel terkait