Tanah Bergerak di Banjarnegara, Puluhan Warga Mengungsi