Bir yapay zekâ ajanının gerçekten zaman kazandırdığını nasıl anlarsınız?
Bu konudaki raporlamanın çoğu etkinliği ölçer, çünkü etkinliği saymak kolaydır. Önemli olan sayı ise daha küçüktür, elde etmesi daha zordur ve zahmete değer.
Sorular ve yanıtlar
Neyi ölçmeliyim?
Adı belli bir kişiye, adı belli bir işte geri kazandırılan dakikaları ve çıktının ne sıklıkla düzeltilmesi gerektiğini. Geri kalan her şey — çalıştırmalar, token'lar, yayına alınan ajanlar — etkinliktir. Etkinlik, iş işe yarasa da yaramasa da yükselir; insanların raporladığı sayı olmasının sebebi de tam olarak budur.
Daha önce kimse süre tutmadıysa başlangıç noktasını nasıl elde ederim?
Hiçbir şey değişmeden önce kişiden üç gün boyunca süre tutmasını isteyin. Üç günlük kusurlu bir ölçüm, kusursuz bir tahminden iyidir ve işin gerçekten o kadar sürüp sürmediğine dair sonraki tartışmayı da bitirir.
Gerçekçi bir tasarruf nedir?
İyi seçilmiş bir iş için, okumanın ve taslak yazmanın çoğu ve karar vermenin hiçbiri — çoğu zaman geçen sürenin yarısı ile dörtte üçü arası, kalanı ise gözden geçirme. İşin tamamını ortadan kaldırdığını iddia eden her şey, kimsenin sorumlu olmadığı bir işi tarif ediyordur.
Kalitenin korunduğunu nasıl anlarım?
Şikâyetleri değil düzenlemeleri sayın. Gözden geçiren kişiden her çıktının değiştirilmeden mi, hafifçe düzenlenerek mi, yoksa yeniden yazılarak mı gittiğini not etmesini isteyin. Yeniden yazma oranındaki artış, bir şeyin kaydığına dair en erken işarettir — genellikle ajan değil girdiler kaymıştır.
Bir ajanı ne zaman kapatmalıyım?
Gözden geçirme, işin kendisinden uzun sürdüğünde; yeniden yazma oranı ilk iki haftadan sonra düşmeyi bıraktığında; ya da yardım etmesi gereken kişi sessizce kullanmayı bıraktığında. Sonuncusu en güvenilir olanı ve en az raporlananıdır.
Karar vermeden önce ne kadar beklemeliyim?
İki hafta gerçek kullanım. İlk birkaç gün her iki yönde de temsil edici değildir — yenilik şişirir, alışkın olmamak bastırır. İkinci haftaya gelindiğinde insanlar artık onu düşünmeyi bırakmıştır; sayının bir şey ifade etmeye başladığı an da odur.