Anda bisa mengetahui apakah ChatGPT merekomendasikan devtool Anda dalam satu sore, tanpa membeli apa pun. Buat sekitar 25 prompt yang mungkin diketik oleh calon pembeli, jalankan masing-masing dalam sesi baru di ChatGPT, Perplexity, dan Gemini, catat setiap penyebutan dan kutipan di spreadsheet, lalu hitung tingkat penyebutan Anda. Hasilnya adalah tiga hal yang tidak diberikan oleh uji coba dashboard mana pun: angka dasar, daftar pihak yang disebut alih-alih Anda, dan halaman persis yang dikutip mesin AI sebagai bukti.
Semua ini tidak memerlukan alat. Itu memang disengaja. Kami menyarankan setiap tim memulai dengan metode ini, termasuk tim yang mampu membayar langganan apa pun di pasaran.
Mengapa mulai dengan pengujian manual
Pengujian manual menunjukkan persis apa yang dilihat pembeli, tanpa lapisan pengumpulan data di antaranya. Sebagian besar alat pelacak mengumpulkan jawaban melalui otomatisasi UI, bukan API resmi (CPO Peec pernah menyatakannya secara terbuka), sehingga angka di dashboard bisa berbeda dari hasil Anda. Jawaban AI juga berubah: Ahrefs mengukur bahwa Google AI Overviews menulis ulang jawabannya kira-kira setiap 2.15 hari, dan 45.5% kutipan berganti di antara dua respons berurutan. Satu pengujian manual yang cermat lebih berguna daripada uji coba dashboard yang tidak memberi Anda pelajaran apa pun.
Dua catatan penting sebelum mulai. Pertama, pengujian manual Anda juga merupakan sampel kecil: dua kali pengujian atas 25 prompt di 3 mesin menghasilkan bukti indikatif, bukan hukum alam. Kedua, angkanya tidak akan stabil, dan itu wajar. Tujuan putaran pertama adalah mendapatkan nilai dasar; tujuan putaran kedua (bulan depan) adalah melihat tren. Pengukuran Ahrefs sendiri tentang pergantian kutipan di AI Overviewsadalah alasan mengapa pengujian ulang lebih penting daripada hasil tunggal apa pun.
Mengapa scraping UI penting: dalam diskusi yang membandingkan pelacak utama, pengguna mencatat bahwa CPO Peec mengakui hasilnya berasal dari scraping UI web, sehingga jawaban dapat berbeda dari yang dilihat pembeli yang sudah login (r/SEO_tools_reviews). Saat Anda menjalankan prompt sendiri, tidak ada keraguan tentang apa yang diukur.
Langkah 1: buat set berisi 15 hingga 30 prompt
Gunakan sekitar 25 prompt yang dibagi ke dalam empat niat pembeli: penemuan (cara pembeli mencari kategori Anda), perbandingan (adu langsung), alternatif (kueri untuk beralih), dan implementasi (pertanyaan terkait tugas). Tulis seperti pembeli akan mengetiknya, dan jangan menyebut alat Anda sendiri kecuali pada beberapa pemeriksaan bermerek. Komposisinya lebih penting daripada jumlahnya, karena setiap niat mengukur bagian funnel yang berbeda.
| Kategori | Persentase dalam set | Contoh (untuk alat feature flag) | Apa yang diukur |
|---|---|---|---|
| Penemuan | 40%, sekitar 10 prompt | "alat feature flag terbaik untuk startup", "alat untuk mengelola perilisan fitur" | Apakah Anda muncul saat pembeli mulai mencari dalam kategori ini |
| Perbandingan | 25%, sekitar 6 prompt | "LaunchDarkly vs PostHog", "Unleash vs Flagsmith" | Apakah Anda mampu bertahan dalam perbandingan langsung yang ketat |
| Alternatif | 20%, sekitar 5 prompt | "alternatif LaunchDarkly", "alternatif open source untuk LaunchDarkly" | Apakah Anda masuk dalam daftar yang dipertimbangkan saat pembeli ingin beralih |
| Implementasi | 15%, sekitar 4 prompt | "cara merilis fitur dengan aman di Next.js", "library terbaik untuk pengujian A/B pada aplikasi React" | Apakah Anda muncul saat prompt menjelaskan tugas, bukan kategorinya |
Empat aturan untuk menulis prompt:
- Gunakan frasa yang netral. "Apa alat feature flag terbaik" mengukur kondisi nyata; "Apakah AcmeFlags alat yang bagus" mengukur bias Anda sendiri.
- Sertakan 3 hingga 5 prompt yang seharusnya menampilkan alat Anda jika alat tersebut cukup dikenal, dan 5 hingga 8 prompt yang mungkin tidak akan menampilkannya. Kelompok kedua adalah tempat pertumbuhan dimulai.
- Tetapkan redaksi persisnya dan simpan di spreadsheet. Pengujian ulang hanya bermakna jika prompt-nya identik.
- Beri nomor P01 sampai P25 agar setiap jawaban yang dicatat bisa ditautkan kembali ke satu baris.
Langkah 2: jalankan dengan benar
Jalankan setiap prompt dalam sesi baru, di jendela penyamaran atau profil yang belum login, satu prompt per percakapan. Uji ChatGPT, Perplexity, dan Gemini, bukan hanya ChatGPT: tingkat sitasi tiap mesin sangat berbeda. Dalam satu analisis terhadap 118,101 jawaban, Perplexity menghasilkan rata-rata 21.87 sitasi per jawaban, dibandingkan 7.92 pada ChatGPT (Qwairy, Q3 2025). Menurut analisis Muck Rack yang dikutip oleh Writer, hanya sekitar 11% domain yang dikutip ChatGPT juga dikutip oleh Perplexity yang dikutip oleh WriterDi sinilah kejutan antar mesin terlihat.
Detail praktis yang dapat mengubah hasil Anda:
- Pilih satu mode ChatGPT (gratis tanpa login atau akun berbayar) dan gunakan secara konsisten untuk semua pengujian. Lakukan hal yang sama untuk Gemini.
- Jangan mengarahkan percakapan terlebih dahulu. Jangan gunakan pembuka seperti instruksi sistem atau "kamu adalah seorang ahli". Pembeli tidak mengetik seperti itu.
- Satu prompt untuk setiap chat baru. Pertanyaan lanjutan akan mencemari sampel.
- Lakukan pengujian selama dua atau tiga hari dan jalankan setiap prompt dua kali per mesin. Perkirakan jawaban akan berbeda antar pengujian; data pergantianAhrefs menunjukkan bahwa kira-kira setengah kutipan dapat berubah di antara dua pengamatan berurutan.
- Di Perplexity, gunakan mode default. Mode riset mendalam menjawab pertanyaan yang berbeda dari pertanyaan pembeli.
Perhitungannya: 25 prompt × 3 mesin × 2 pengujian = 150 jawaban. Itu setara dengan satu sore penuh ditambah satu pagi singkat.
Langkah 3: catat semuanya di spreadsheet
Satu baris untuk setiap jawaban. Dua belas kolom sudah cukup; dua di antaranya (kompetitor yang disebut dan URL yang dikutip) ternyata lebih penting daripada kolom tentang Anda sendiri. Jika jawaban menyebut Anda tanpa kutipan, catat penyebutannya; jika jawaban mengutip halaman dokumentasi Anda tanpa menyebut nama Anda, catat juga. Keduanya adalah sinyal berbeda dan memerlukan perbaikan berbeda.
| Kolom | Contoh nilai | Alasannya |
|---|---|---|
| tanggal | 2026-10-21 | Melacak perubahan antar putaran |
| mesin | ChatGPT | Setiap mesin berbeda; irisan kutipannya rendah |
| run | 1 atau 2 | Memeriksa variasi dalam mesin yang sama |
| prompt_id | P07 | Menautkan kembali ke set prompt yang sudah ditetapkan |
| kategori | perbandingan | Menganalisis kesenjangan berdasarkan niat, bukan hanya satu tingkat keseluruhan |
| prompt (verbatim) | "launchdarkly vs posthog" | Kemudahan untuk direproduksi |
| disebut | Y / N | Metrik utama |
| posisi | peringkat 1 / 2–3 / disebut belakangan / tidak disebut | Urutan menunjukkan tingkat pertimbangan, bukan sekadar kemunculan |
| cara dijelaskan (satu baris) | "open source, di-host sendiri" | Menunjukkan apakah positioning sesuai dengan niat |
| kompetitor yang disebut | LaunchDarkly, Unleash, Flagsmith | Daftar kompetitor nyata Anda di setiap mesin AI |
| URL yang dikutip | thread reddit.com/r/devops, dokumentasi vendor | Lapisan pengambilan informasi yang benar-benar dipercaya AI |
| jenis sumber kutipan | dokumentasi / reddit / artikel daftar / G2 / github | Menunjukkan di mana Anda perlu mendapatkan kutipan |
Tabel pivot atau beberapa rumus di bagian akhir akan memberi Anda satu-satunya angka yang penting: tingkat penyebutan per mesin, tingkat penyebutan per kategori, dan seberapa sering setiap kompetitor disebut alih-alih Anda.
Langkah 4: tafsirkan seperti peneliti
Satu kali disebut tidak membuktikan apa pun; tingkat kemunculanlah yang berarti. Satuan temuan adalah "disebut dalam N dari 25 jawaban, per mesin". Jika ChatGPT menyebut Anda dalam 3 dari 25 jawaban (12%), sedangkan kompetitor langsung disebut dalam 15 dari 25 jawaban (60%) pada set yang sama, itulah temuannya. Hal lainnya—peringkat, kesan, satu jawaban yang kebetulan menguntungkan—hanyalah noise sampai terulang dalam pengujian berikutnya.
Cara membaca spreadsheet:
- Hitung tingkat penyebutan per mesin dan per kategori. Tingkat penemuan menunjukkan visibilitas saat pembeli mulai mencari kategori; tingkat perbandingan menunjukkan kekuatan Anda masuk pertimbangan. Sebuah alat bisa terlihat baik pada satu metrik dan nyaris tak terlihat pada metrik lainnya.
- Bedakan antara yang disebut dan yang dikutip. ChatGPT mengutip sekitar 7.92 sumber per jawaban, sedangkan Perplexity 21.87 (Qwairy), jadi kedua mesin menggunakan mekanisme pengambilan informasi yang berbeda. Jika nama Anda muncul tanpa kutipan, biasanya itu berarti model mengingat data pelatihan, bukan sedang membaca web.
- Perhatikan terutama kolom "kompetitor yang disebut" dan "URL yang dikutip". Jika kompetitor terus muncul dari thread Reddit atau artikel daftar tertentu, halaman-halaman itu adalah celah pengambilan informasi Anda. Sekitar 85% sitasi AI mengarah ke sumber yang bukan milik merek tersebut (analisis Muck Rack, melalui Writer), jadi jika semua bukti Anda hanya ada di situs sendiri, rendahnya daya ingat AI adalah hasil yang wajar, bukan misteri.
- Anggap deskripsi yang keliru sebagai masalah tersendiri. Jika ChatGPT menyebut Anda tetapi mengatakan "khusus untuk perusahaan besar" padahal produk Anda open source, itu adalah kegagalan positioning dan solusinya berbeda dari masalah tidak muncul sama sekali.
- Sebelum bertindak berdasarkan hal yang mengejutkan, periksa kewajarannya di berbagai mesin. Hasil dari satu mesin dalam satu pengujian hanyalah hipotesis.
Tidak ada angka "baik" yang berlaku universal, dan vendor mana pun yang menyebutkannya sedang menjual sesuatu. Satu-satunya tolok ukur dengan bukti terpublikasi hanyalah indikasi: Ahrefs menganalisis 17 million kutipan AI dan menemukan bahwa URL yang dikutip sekitar lebih baru 25.7% dibanding hasil organik Google; ChatGPT juga paling mudah mengutip halaman terbaru. Halaman perbandingan yang usang mengurangi peluang Anda secara terukur.
Sore kedua: ubah nilai dasar menjadi daftar perbaikan
Dua kolom terakhir di spreadsheet sebenarnya sudah menjadi daftar tugas: kompetitor yang berulang kali tidak Anda ikuti, dan halaman yang terus dikutip mesin AI tetapi Anda tidak hadir di sana. Untuk devtool, perbaikannya biasanya tập trung di tempat yang sama. Tìm cách xuất hiện trong các thread so sánh và bài tổng hợp vốn đã được trích dẫn. Cấu trúc lại tài liệu sao cho mỗi trang trả lời trọn vẹn một câu hỏi, bằng những đoạn mà công cụ có thể trích nguyên vẹn. Xuất bản các trang so sánh trung thực có nêu tên đối thủ, vì các công cụ ưu tiên trang trả lời trực tiếp câu hỏi so sánh. Để llms.txt và quyền truy cập của trình thu thập dữ liệu AI luôn mở, tránh để vấn đề kỹ thuật cản trở việc truy xuất. Cập nhật những trang cũ lẽ ra phải có thứ hạng tốt.
Kami akan membahas setiap perbaikan ini secara mendalam di tulisan mendatang di situs ini.
Ulangi setiap bulan
Set prompt yang sama persis, spreadsheet yang sama, sebulan sekali. Putaran pertama memberi Anda nilai dasar, putaran ketiga menunjukkan tren, dan tren itulah yang bisa Anda kelola. Jika angkanya berubah, Anda akan ingin tahu alasannya; jika tidak, Anda terhindar dari mengaitkan kebetulan dengan peluncuran produk.
Jika pengujian Anda menunjukkan kesenjangan besar dan Anda ingin orang lain menutupnya, itulah pekerjaan kami. CiteGap menjalankan pengujian yang sama di lebih banyak mesin dan prompt, mendiagnosis penyebab kesenjangan, lalu menyerahkan daftar perbaikan kepada Anda (atau menerapkannya), sebagai proyek satu kali, bukan langganan. Mulailah dengan audit lite gratis, dan bawa spreadsheet Anda jika ada. Itu akan mempercepat dan mengurangi biaya diagnosis.
Sumber
- Perubahan AI Overview (rata-rata bertahan 2.15 hari, 45.5% kutipan berganti): Ahrefs
- Jumlah kutipan per jawaban (Perplexity 21.87, ChatGPT 7.92, 118,101 jawaban, Q3 2025): Qwairy
- Porsi media earned (sekitar 85% kutipan AI) dan rendahnya irisan kutipan antar mesin (11% domain), analisis Muck Rack melalui Writer: writer.com
- Kesegaran (URL yang dikutip 25.7% lebih baru, 17 million kutipan dianalisis): Ahrefs
- Thông tin về việc thừa nhận lấy dữ liệu qua UI và so sánh công cụ: r/SEO_tools_reviews