Estaba teniendo problemas con ufw no me permite añadir una nueva regla.
# ufw deny from 54.38.157.178 to any ERROR: initcaps [Errno 2] iptables: La cadena ya existe.
Así que esto es lo que hice:
ufw desactivar iptables -F iptables -X ufw enable
Y luego volví a añadir la regla
# ufw deny from 54.38.157.178 to any Regla añadida
Con este comando puede listar las reglas por número
ufw estado numerado
Esto es para borrar una regla por número, tomado del comando anterior
ufw eliminar 8
Aquí hay que insertar una regla al principio
ufw insert 1 deny from [ip-a-bloquear] to any