Aunque se puede expulsar desde el explorador de archivos, para "retirarlo con seguridad", no pasa nada que lo sacas simplemente, excepto si en este momento está funcionando un app instalado en este o se está grabando algún archivo en el, en este caso puede haber una pérdida de datos.