Heboh Keraton Agung Sejagat, Bikin Resah Warga