Saya membuat ChatGPT, Claude, dan Gemini merangkum 200+ halaman PDF yang sama, dan hasilnya bahkan tidak mendekati


Model AI semakin baik dalam memahami dan meringkas dokumen, namun tidak selalu memberikan hasil yang sama. Saya ingin melihat seberapa besar pentingnya pemilihan model ketika bekerja dengan laporan penelitian yang panjang. Jadi saya menjalankan tes yang sama menggunakan ChatGPT, Claude, dan Gemini, lalu membandingkan ringkasan yang mereka hasilkan. Perbedaannya bukan hanya karena satu faktor saja. Itu tentang kegunaan hasil akhir, dan satu model jelas menonjol untuk alur kerja saya. Dokumen PDF yang sama dan perintah untuk semua dokumen Satu laporan, satu perintah, tiga hasil yang sangat berbeda Agar perbandingan tetap adil, saya memberikan ketiga model AI PDF yang sama dan perintah yang sama persis. Dokumen yang saya pilih adalah International AI Safety Report 2026, sebuah laporan penelitian setebal 220 halaman. Laporan ini dilengkapi dengan penjelasan teknis, diskusi kebijakan, penilaian risiko, statistik, dan prediksi masa depan, menjadikannya ujian yang baik tentang seberapa baik model AI dalam memahami dan merangkum informasi yang kompleks. Saya juga memastikan untuk tidak mengubah perintah antar model. Masing-masing pihak diminta untuk membuat laporan eksekutif dan bukan ringkasan bab demi bab, yang menyoroti temuan-temuan utama laporan, statistik utama, risiko, prediksi, dan rekomendasi praktis. Artinya, satu-satunya variabel adalah model AI itu sendiri, bukan instruksi atau materi sumbernya. Dengan pengaturan yang tetap konsisten, akan lebih mudah untuk membandingkan kualitas ringkasan, jumlah detail yang disertakan dalam setiap model, dan keterbacaan hasil akhir. Prompt Saya menggunakan LLM yang saya hosting sendiri untuk membuat prompt. Anda adalah seorang analis riset ahli. Baca seluruh laporan terlampir sebelum menulis tanggapan Anda. Daripada meringkas setiap bab, buatlah ringkasan eksekutif yang jelas untuk seseorang yang tidak akan pernah membaca dokumen aslinya. Tanggapan Anda harus mencakup: – Ringkasan eksekutif sepanjang 300–400 kata yang menjelaskan tujuan laporan, temuan utama, dan kesimpulan keseluruhan. – 10 kesimpulan paling penting, dengan penjelasan singkat mengapa setiap hal penting. – Lima wawasan mengejutkan atau temuan yang kurang diketahui. – 10 statistik atau fakta numerik paling penting yang disebutkan dalam laporan. – Ringkasan prediksi laporan, masa depan pandangan, dan risiko besar terkait AI.- Lima pelajaran praktis atau rekomendasi untuk bisnis, pengembang, pembuat kebijakan, atau pengguna AI sehari-hari. Gunakan judul yang jelas, bahasa yang ringkas, dan hindari pengulangan informasi. Prioritaskan wawasan yang paling penting dibandingkan detail kecil, pertahankan keakuratan faktual, dan jangan pernah menciptakan informasi yang tidak disebutkan secara eksplisit dalam laporan. Jangan menebak-nebak. Jika ada yang kurang jelas, silakan sorot juga. Model ChatGPT GPT 5.5 Gemini 3.5 Berpikir Claude Sonnet 5 ChatGPT menawarkan keterbacaan terbaik Ringkasan termudah untuk dibaca, tetapi bukan yang terdalam ChatGPT menghasilkan ringkasan yang paling mudah saya baca dari awal hingga akhir. Responsnya terorganisir dengan baik, judulnya masuk akal, dan keseluruhan alurnya terasa alami. Alih-alih membanjiri saya dengan informasi, buku ini berfokus pada ide-ide utama dan menyajikannya dalam cara yang sederhana dan mudah diikuti. Meski begitu, ringkasannya juga terasa agak kabur di beberapa bagian. Dibandingkan dengan alat lainnya, alat ini tidak mendalami laporan secara mendalam, dan beberapa bagian lebih terasa seperti ikhtisar tingkat tinggi daripada analisis mendetail. Meskipun mencakup topik-topik penting, saya ingin lebih banyak konteks dan lebih spesifik. Waktu responsnya berada di tengah, bukan yang tercepat maupun yang paling lambat. Jika saya menginginkan pengarahan yang cepat dan mudah dibaca untuk memahami laporan tanpa membahas setiap detailnya, ChatGPT memberikan keseimbangan yang baik. Namun untuk analisis yang lebih mendalam, saya mungkin akan mencari di tempat lain. Terkait 6 alat AI gratis yang melakukan hal yang sama seperti ChatGPT Pro Alternatif gratis telah berkembang pesat. Gemini menghasilkan ringkasan paling detail Cepat dibuat, dibaca secara menyeluruh Gemini menghasilkan ringkasan paling detail dari ketiga model. Model ini mencakup lebih banyak hal dalam laporan, memasukkan konteks tambahan pada temuan-temuan utama, dan mengangkat beberapa poin yang disebutkan secara singkat atau diabaikan oleh model-model lain. Rasanya seperti membaca versi ringkas dari laporan aslinya. Yang paling mengejutkan saya adalah model ini juga merupakan model tercepat dalam pengujian saya. Meskipun menghasilkan respon paling lama, namun selesai sebelum ChatGPT dan Claude. Satu-satunya kekurangannya adalah butuh waktu lebih lama untuk membacanya. Untuk sesaat, saya merasa ingin membaca laporan, bukan ringkasan. Karena banyaknya informasi, tidak semudah membaca ringkasan ChatGPT. Google Gemini adalah platform AI multimodal Google yang memahami teks, gambar, audio, video, dan kode, membantu pengguna meneliti, menulis, bertukar pikiran, menganalisis informasi, mengotomatisasi tugas, dan meningkatkan produktivitas di seluruh perangkat. Claude adalah yang paling efisien. Keseimbangan terbaik antara kedalaman dan kejernihan Claude akhirnya menjadi favorit saya secara keseluruhan. Butuh waktu paling lama untuk menghasilkan responsnya, tapi sejujurnya saya tidak keberatan menunggu ekstra karena hasil akhirnya sepadan. Alih-alih mencoba memasukkan setiap detail yang ada, Claude berhasil mengidentifikasi apa yang sebenarnya penting dan menyajikannya dengan cara yang jelas dan logis. Ringkasannya terasa fokus dan seimbang. Itu tidak sedetail Gemini, tetapi di beberapa tempat tidak terasa samar-samar seperti ChatGPT. Laporan ini mencakup temuan-temuan utama, statistik, risiko, dan rekomendasi dalam laporan tersebut tanpa membebani saya dengan terlalu banyak informasi. Tulisannya sudah dipoles, dan saya jarang merasa perlu untuk kembali dan membaca ulang satu bagian. Jika saya harus merangkum laporan penelitian panjang lainnya besok, Claude akan menjadi pilihan pertama saya. Ringkasan ini memberikan keseimbangan terbaik antara kedalaman, kejelasan, dan keringkasan, menjadikannya ringkasan yang menurut saya paling berguna secara keseluruhan. Terkait Saya menggunakan Claude, Gemini, dan ChatGPT untuk membuat situs web pribadi saya, dan jelas ada pemenang dalam pertarungan pengembang web AI. Claude memenangkan tes ini, tapi ada kendalanya. Setelah membandingkan ketiga model pada laporan 200+ halaman yang sama, Claude keluar sebagai pemenang keseluruhan saya. Ini memberi saya keseimbangan terbaik antara detail, kejelasan, dan struktur tanpa membuat ringkasannya terasa berlebihan. Meski begitu, tidak ada satu model AI pun yang terbaik untuk semua orang. Gemini adalah pilihan yang lebih baik jika Anda menginginkan ringkasan paling detail, sedangkan ChatGPT masih yang paling mudah dibaca. Pada akhirnya, model yang tepat bergantung pada apa yang paling Anda hargai, tetapi untuk laporan penelitian yang panjang, Claude-lah yang pertama kali saya pilih.


Diterbitkan : 2026-07-10 19:00:00

sumber : www.xda-developers.com