Beberapa minggu yang lalu, saya menguji perangkat lunak chatbot Perplexity.ai gratis. Di akhir artikel, saya memberikan tes $20/bln versi Pro jika cukup Anda tertarik. Saya mendapat permintaan, jadi itulah yang kami lakukan sekarang.
Juga: Ingin satu tahun Perplexity Pro gratis? Inilah cara memperlakukan diri sendiri
Seperti banyak fitur lainnya, untuk menggunakan Perplexity Pro, Anda perlu membuat akun. Anda dapat masuk menggunakan metode autentikasi Google atau Apple atau login SAML. Alternatifnya, Anda dapat membuat akun menggunakan email Anda, itulah yang saya lakukan.
Sayangnya, situs tersebut tampaknya tidak menawarkan Anda cara apa pun untuk mengatur kata sandi atau otentikasi multi-faktor apa pun. Anda telah dikirimi email berisi kode, dan selesai. Saya tidak keberatan mengakses email, namun saya sangat bingung dengan aplikasi online yang mengandalkan email tanpa setidaknya kata sandi. Namun itulah yang dilakukan Perplexity.AI.
Juga: 5 alasan saya lebih memilih Kebingungan daripada semua chatbot AI lainnya
Fitur menarik lainnya dari Perplexity Pro adalah banyaknya mode AI. Seperti yang Anda lihat pada gambar di bawah, Anda dapat memilih di antara beberapa jenis, tergantung pada jenis pekerjaan yang Anda miliki. Saya memilih Default untuk melihat apa yang dilakukannya dengan pengujian tersebut. Setelah menjalankan pengujian, saya bertanya kepada Perplexity Pro versi apa yang digunakan, dan tertulis ChatGPT GPT-4.
Dan dengan itu, mari kita coba.
1. Menulis plugin WordPress
Tantangan ini adalah tugas pemrograman sederhana untuk siapa saja yang memiliki sedikit pengalaman internet. Ini memiliki antarmuka pengguna di dasbor manajemen dengan dua bagian: satu adalah daftar nama yang akan diubah, dan yang lainnya adalah jalan keluar.
Satu-satunya masalah yang sebenarnya adalah bahwa daftar nama dapat berisi duplikat, dan alih-alih menghapus nama tambahan, sarannya adalah memastikan bahwa nama duplikat dipisahkan.
Juga: Bagaimana saya menguji keterampilan chatbot AI – dan Anda juga bisa
Ini adalah layanan khusus yang diminta istri saya untuk digunakan pada situs e-niaganya. Setiap bulan, mereka memutar roda dan beberapa orang memenuhi syarat untuk beberapa entri.
Dengan menggunakan versi standar Perplexity Pro, AI mampu membuat antarmuka pengguna dan kode fungsional, menyediakan blok PHP dan blok JavaScript untuk mengontrol area dan logika default.
Berikut semua hasil tes ini dan tes sebelumnya:
- Kebingungan Pro: Bahasa: bagus, kinerja: bagus
- Bingung: Bahasa: bagus, kinerja: bagus
- Claude 3.5 Soneta: Bahasa: bagus, kinerja: gagal
- ObrolanGPT menggunakan GPT-4o: Bahasa: bagus, kinerja: bagus
- Kopilot Microsoft: Bahasa: lengkap, fungsi: gagal
- Meta AI: Bahasa: lengkap, fungsi: gagal
- Panggilan Kode Meta: Kegagalan total
- Google Gemini Tingkat Lanjut: Bahasa: bagus, kinerja: gagal
- ObrolanGPT menggunakan GPT-4: Bahasa: bagus, kinerja: bagus
- ObrolanGPT menggunakan GPT-3.5: Bahasa: bagus, kinerja: bagus
2. Menulis ulang fungsi string
Untuk setiap tes, saya membuka bidang baru dengan AI. Dalam pengujian ini, saya meminta AI untuk menulis ulang blok kode yang mengandung kesalahan. Kode ini dirancang untuk memvalidasi entri dolar dan sen, yang harus berisi sejumlah digit sebelum koma desimal, kemungkinan tempat desimal, dan dua digit setelah koma desimal.
Juga tidak! Microsoft Copilot gagal dalam setiap upaya yang saya lakukan
Sayangnya, kode yang saya posting hanya mengizinkan bilangan bulat. Setelah beberapa laporan pengguna, saya memutuskan untuk memberikan kode tersebut kepada AI untuk ditulis ulang. Kode saya menggunakan ekspresi reguler, yang merupakan cara singkat untuk mendefinisikan antarmuka. Kata-kata standar saja sudah menarik, tetapi koreksi tidak diperlukan.
Dalam pengujian ini, Perplexity Pro bekerja dengan baik. Kode verifikasi berikut memiliki simbol yang sesuai untuk item yang tidak kompatibel dengan format dolar dan sen, sehingga mengizinkan hingga dua digit setelah koma desimal.
Berikut semua hasil tes ini dan tes sebelumnya:
- Kebingungan Pro: Ia memenangkan
- Bingung: Ia memenangkan
- Claude 3.5 Soneta: Itu telah gagal
- ObrolanGPT menggunakan GPT-4o: Ia memenangkan
- Kopilot Microsoft: Itu telah gagal
- Meta AI: Itu telah gagal
- Panggilan Kode Meta: Ia memenangkan
- Google Gemini Tingkat Lanjut: Itu telah gagal
- ObrolanGPT menggunakan GPT-4: Ia memenangkan
- ObrolanGPT menggunakan GPT-3.5: Ia memenangkan
3. Menemukan bug yang mengganggu
Tes itu membuatku bingung selama beberapa jam. Sebelum diuji, itu adalah bug pada kode aslinya. Masalahnya adalah apa pun yang terjadi tidak ada hubungannya dengan logika atau bahasa apa pun.
Juga: Saya meminta ChatGPT untuk menulis plugin WordPress yang saya butuhkan. Itu dilakukan dalam waktu kurang dari lima menit
Karena sangat frustrasi, saya memutuskan untuk memberikan kode ChatGPT dan melemparkan pesan kesalahan dan meminta bantuan. Untungnya, ia menemukan kesalahan yang saya lakukan dan memberi saya panduan tentang apa yang harus diperbaiki.
Alasan saya memasukkan ini dalam pengujian adalah karena kesalahannya bukan pada bahasa atau logika, melainkan pada pengetahuan tentang kerangka WordPress. Meskipun WordPress populer, pengetahuan tentang kerangka kerja sering dianggap sebagai sifat lingkungan pengembangan perangkat lunak, sesuatu yang diturunkan dari pengembang ke pengembang, dan bukan sesuatu yang dapat dipelajari secara mendalam dengan pengetahuan.
Namun, ChatGPT, serta Perplexity dan sekarang Perplexity Pro, menemukan masalah. Masalah ini disebabkan oleh bug panggilan telepon yang tertanam dalam frame itu sendiri. Jawaban yang jelas, yang dapat Anda dapatkan dengan membaca secara cermat pesan kesalahan yang dihasilkan oleh kode tersebut, adalah sebuah kesalahan.
Plus: Pelanggan Uber One mendapatkan Perplexity Pro gratis selama satu tahun. Inilah cara memperlakukan diri sendiri
Untuk mengatasinya, AI harus menunjukkan pemahaman mendalam tentang bagaimana semua sistem bekerja sama, sesuatu yang dilakukan dengan baik oleh Perplexity Pro.
Berikut semua hasil tes ini dan tes sebelumnya:
- Bingung: Ia memenangkan
- Kebingungan Pro: Ia memenangkan
- Claude 3.5 Soneta: Ia memenangkan
- ObrolanGPT menggunakan GPT-4o: Ia memenangkan
- Kopilot Microsoft: Itu telah gagal
- Meta AI: Ia memenangkan
- Panggilan Kode Meta: Itu telah gagal
- Google Gemini Tingkat Lanjut: Itu telah gagal
- ObrolanGPT menggunakan GPT-4: Ia memenangkan
- ObrolanGPT menggunakan GPT-3.5: Ia memenangkan
4. Menulis naskah
Ini menarik. Perplexity Pro lulus tes ini, tetapi Perplexity versi gratis gagal ketika saya mengujinya beberapa minggu yang lalu. Jadi tidak!
Tapi mari kita bahas ini sedikit. Tantangannya di sini adalah saya meminta AI untuk menulis dokumen yang melalui tiga tahap: Chrome DOM (model dokumen), AppleScript (bahasa scripting Apple), dan Keyboard Maestro (alat Mac keren yang belum terkenal, tapi bagi saya, misi penting) .
Banyak AI yang gagal karena mereka tidak memiliki pengetahuan tentang Keyboard Maestro dalam kredensial mereka dan, oleh karena itu, tidak memberikan kode yang diperlukan untuk membuat skrip melakukan apa yang saya inginkan.
Juga: Cara menggunakan ChatGPT untuk membuat kode: Apa yang bisa dan tidak bisa dilakukannya untuk Anda
Sejauh ini hanya Gemini Advanced dan ChatGPT yang menggunakan GPT-4 dan GPT-4o yang lulus tes ini. Untuk menjawab pertanyaan ini, Perplexity Pro memperkenalkan fitur Pro Search. Seperti yang Anda lihat, fitur Pencarian Pro mencari “tab AppleScript Maestro Keyboard Google Chrome”. Itu juga menggunakan forum Keyboard Maestro utama sebagai sumber daya, yang merupakan sumber terbaik untuk dukungan Keyboard Maestro.
Hasilnya sukses.
Berikut semua hasil tes ini dan tes sebelumnya:
- Kebingungan Pro: Ia memenangkan
- Bingung: Itu telah gagal
- Claude 3.5 Soneta: Itu telah gagal
- ObrolanGPT menggunakan GPT-4o: Dia menang tetapi dengan keberatan
- Kopilot Microsoft: Itu telah gagal
- Meta AI: Itu telah gagal
- Panggilan Kode Meta: Itu telah gagal
- Google Gemini Tingkat Lanjut: Ia memenangkan
- ObrolanGPT menggunakan GPT-4: Ia memenangkan
- ObrolanGPT menggunakan GPT-3.5: Itu telah gagal
Semua hasil
Berikut hasil lengkap keempat tes tersebut:
Seperti yang Anda lihat, Perplexity Pro hanya memasuki ChatGPT dengan GPT-4 dan GPT-4o hanya memiliki skor 4 dari 4. Setelah menjalankan pengujian, saya memeriksanya dengan AI Perplexity Pro dan diberi tahu bahwa AI tersebut menggunakan GPT-4 untuk menganalisis dan menjawab pengujian saya.
Karena GPT-4/4o adalah satu-satunya AI yang berhasil menyelesaikan keempat pengujian saya sebelumnya, hal ini masuk akal. Sejauh ini, saya belum menemukan model lain yang dapat melakukan keempat pengujian tersebut.
Juga: Cara menjalankan beberapa model AI di Mac atau PC Anda – tidak memerlukan cloud pihak ketiga
Jika Anda memilih Perplexity Pro, saya yakin dapat mengatakan bahwa program ini akan membantu Anda dengan baik dalam program ini.
Sudahkah Anda mencoba menyalin dengan Perplexity, Copilot, Meta AI, Gemini, atau ChatGPT? Apa yang kamu alami? Beritahu kami di komentar di bawah.
Anda dapat mengikuti pembaruan harian saya di media sosial. Pastikan untuk berlangganan pembaruan mingguan saya, dan ikuti saya di Twitter/X di @DavidGewirtzdi Facebook di Facebook.com/DavidGewirtz, di Instagram di Instagram.com/DavidGewirtz, dan di YouTube di YouTube.com/DavidGewirtzTV.
