Amazon, belirli bölgelerde alıcıların seçtiği bir ürünü nasıl beğendiklerini ölçmeyi zorlaştıran yeni bir yıldızlı derecelendirme sistemini test etmeye başladı. Android Police sitesi, şirketin Hindistan’daki mobil uygulamasında, Almanya’daki web sitesinde ve Almanya’dan erişildiğinde küresel web sitesindeki deneysel sistemi tespit etti. Test, web sitesinin tipik olarak beş yıldızlı bir resimle gösterilen ağırlıklı ortalama derecelendirmesinin yerini alıyor gibi görünüyor. Alıcılar bu resim yerine, ürün resminin yanında, aldığı 5 yıldızlı puanların yüzdesini gösteren tek bir sarı yıldız görüyor. İnsanlar bir ürünün ortalama puanının 5 mi yoksa 3,5 mu olduğunu bir bakışta anlayamayacaktır, çünkü her iki durumda da tek bir sarı yıldızla temsil edilmektedir. Ayrıca, yeni sistem yalnızca 5 yıldızlı derecelendirmelerin yüzdesini gösterdiğinden, bir ürünün şimdiye kadar kaç yorum aldığı da hemen görülemiyor. Yayının da belirttiği gibi, bu durum satıcıların olumsuz yorumlara karşı 5 yıldızlı yorumlar almak için vicdansızca yollar arayarak potansiyel alıcıları kandırmasını kolaylaştırıyor. Sistemin tehlikeli bir şekilde kusurlu olduğu açık gibi, çünkü yalnızca beş yıldızlı yorumların yüzdesine dayanarak ürünleri iyi bir şekilde gösterir, diğer derecelendirmelerin olumsuz olup olmadığını gerçekten söylemez. Ayrıca, satıcının kötü niyetli bir şekilde yeterli sayıda beş yıldızlı yorum elde ederek gerçekten olumsuz olan yorumların akışını engellemesini çok daha kolay hale getirir.
Buna kıyasla, ağırlıklı ortalama bir derecelendirmenin ücretli veya sahte olumlu değerlendirmelerle çarpıtılması daha zordur ve bunların tespit edilmesi kuşkusuz güçtür. Kullanıcı deneyimi açısından bakıldığında, yeni derecelendirme görüntüleme sistemi beş sarı yıldız kadar göz atılabilir değil. Ayrıca, yeni sistemde “5 yıldız”dan bahsedilmesi ve sadece bir sarı yıldız kullanılması yeni kullanıcıları en azından kısa süreliğine yanıltabilir. Amazon’un kredisine göre, ağırlıklı ortalama derecelendirme hâlâ beş yıldızlı olanların yüzdesinin yanında belirtiliyor ve ürün sayfasında derecelendirmelerin yüzde dağılımını hala görebiliyorsunuz. Bununla birlikte, Amazon puanlama dökümünü ve ayrıntılarını tamamen kaldırmadı. Bir ürünün yalnızca ortalama puanına değil, aldığı yorum sayısına da bakan potansiyel alıcılar, ürün sayfasında yorumların dökümünü görmek için tıklayabilirler. Bu pek uygun değil gibi duruyor. Satın almak için bir ürün seçmek olması gerekenden daha uzun sürebilir, ancak en azından bu seçenek mevcut. Sorulduğunda, bir Amazon sözcüsü deneysel özelliği doğrulamadı ve The Verge’e; “Mümkün olan en iyi alışveriş deneyimini sunmak için müşterilerimiz adına her zaman yenilikler yapıyoruz.” ifadelerini kullandı. Yine de bir özelliğin test edilmesi her zaman geniş çaplı bir yayına yol açmaz ve Amazon uygulamaya karar verirse bu derecelendirme sisteminde değişiklikler yapabilir. Amazon’un yıldız derecelendirmelerinin basit bir ortalama olmadığını, bir destek sayfasına göre “makine öğrenimli modeller” kullanılarak hesaplandığını unutmamak gerekir.