Abre el álbum en la aplicación y pulsa en los tres puntos que aparecen en la esquina superior derecha para ir a los ajustes de álbum y poder eliminar el álbum.
Si lo haces, el álbum se eliminará definitivamente.