UF1466 - Sistemas de almacenamiento

1.1. Sistemas de archivo

1.1.1. Nomenclatura y codificación

1.1.2. Jerarquías de almacenamiento

1.1.3. Migraciones y archivado de datos

1.2. Volúmenes lógicos y físicos

1.3. Concepto de particionamiento

1.3.1. Concepto de tabla de particiones y MBR

1.3.2. Descripción de sistemas de almacenamiento NAS y SAN. Comparación y aplicaciones. Comparación de los sistemas SAN iSCSI, FC y FCoE

1.3.3. Gestión de volúmenes lógicos. El sistema de gestión de volúmenes LVM. Guía básica de uso de LVM

1.3.4. Acceso paralelo

1.3.5. Protección RAID. Comparación de los diferentes niveles de protección RAID. Mención de la opción de controladoras RAID software o hardware: RAID 0, RAID 1, RAID 5 (Recuperación de discos grandes con RAID 5) y RAID 6

1.4. Análisis de las políticas de Salvaguarda

1.5. Los puntos únicos de fallo, concepto e identificación

1.6. Tipos de copias de seguridad y calendarización de copias

1.7. Salvaguarda física y lógica

1.8. Salvaguarda a nivel de bloque y fichero

1.8.1. Conceptos de Alta Disponibilidad. Diferencias entre cluster, grid y balanceo de carga

1.8.2. Integridad de datos y recuperación de servicio. Guía mínima para elaborar un plan de continuidad de negocio. Conceptos de RTO (Recovery Point Objective) y RTO (Recovery Time Objective)

1.8.3. Custodia de ficheros de seguridad. Problemática de la salvaguarda y almacenamiento de datos confidenciales. Algunas implicaciones Ley Orgánica de Protección de Datos (LOPD)

1.1. Sistemas de archivo

Situados ante un ordenador podemos ver una serie de elementos como son el teclado, la pantalla, el ratón… No obstante, existen otros elementos que no podemos ver, tales como su disco duro y sus circuitos integrados… Todos estos elementos, los que vemos y los que no, forman parte de lo que se conoce como arquitectura hardware de un ordenador.

Veámoslo mejor con un esquema:

Faltaría por mencionar un último tipo de dispositivos:

Dispositivos de almacenamiento. Permiten almacenar la información.

–Dispositivos externos: CDs, pendrives...

–Dispositivos internos: módem, tarjeta de red.

Y estos últimos son los que vamos a tratar en el tema que nos ocupa.

Hablemos ahora del disco duro de un ordenador. ¿Qué tenemos ahí?

–Información para el correcto funcionamiento del ordenador (valores, parámetros)

–Información para el funcionamiento de los distintos programas que tenemos instalados.

–Información que nosotros queramos guardar en el ordenador.

¿Cómo está la información dentro del ordenador?

La información encuentra almacenada en una serie de ficheros y/o archivos, lógicamente ordenados y estructurados de modo que el sistema encuentre siempre aquello que busca y necesita.

A este modo de organizar y estructurar la información así como los distintos elementos utilizados por el computador para obtener dicha información es lo que se conoce como sistemas de archivos. Por lo tanto:

Definición

Un sistema de archivos es un método según el cual se produce el almacenamiento y la organización de los archivos del computador. Su objetivo es hacer más fácil la tarea de encontrarlos y su posterior utilización. Los sistemas de archivos son muy utilizados en dispositivos de almacenamiento tales como discos duros y CD-ROMs.

Dicho de otro modo, en un lenguaje más formal, un sistema de archivos está formado por un conjunto de datos abstractos, implementados para el almacenamiento, organización jerárquica, manipulación, acceso, direccionamiento y recuperación de datos. Los sistemas de archivos tienen mucho en común con la tecnología de las bases de datos.

Conjunto de carpetas integrantes de un sistema de Archivos

Los sistemas de archivos suelen incluir las siguientes características:

–Almacenamiento de datos basados en archivos.

–Estructura de directorio jerárquico (carpeta).

–Control sobre el tiempo de acceso permitido para un archivo dado.

–Un concepto de propiedad de archivos.

–Contabilidad del espacio utilizado.

No obstante, no todos los sistemas de archivos presentan estas características. Por ejemplo, un sistema de archivos construido para un sistema operativo monousuario, fácilmente podría utilizar un método de control de acceso más simplificado y no requerir el soporte sobre la propiedad de archivos.

Importante

El sistema de archivos utilizado tiene un gran impacto en la naturaleza de la carga de trabajo diaria. Por ello, es importante elegir el sistema de archivos de modo que sea este el que mejor se ajuste a los requerimientos funcionales de nuestra organización. Con esto, no sólo nos aseguramos que el sistema está la altura de las tareas, sino que además es más fácil y eficiente de mantener.

Por otro lado, la mayoría de los sistemas operativos presentan su propio sistema de archivos, los cuales usualmente son representados de forma textual o gráfica a través de gestores de archivos o Shell.

Desde una perspectiva gráfica, solemos utilizar la metáfora (carpeta) para hablar de directorios, elementos de los sistemas de archivos, que contienen bien otros archivos, bien otros directorios (carpetas). Podemos decir pues, que un sistema de archivos es la parte integral de un sistema operativo moderno.

Clasificación de los sistemas de archivos

Los sistemas de archivos se clasifican en tres categorías:

–Sistema de archivo de disco: diseñado para el almacenamiento, acceso y manipulación de archivos en un dispositivo de almacenamiento.

Ejemplos:

∙EXT2 (Second Extemded Filesystem o Segundo sistema de Archivo Extendido).

∙EXT3 (Third Extended Filesystem o Tercer sistema de Archivo Extendido).

∙FAT (File Allocation Table o Tabla de ubicación de Archivos).

∙NFTS.

–Sistema de archivo de Red: diseñado para acceder a sus archivos a través de una red. Se clasifican en sistemas de archivos distribuidos y sistemas de archivos paralelos.

∙Sistemas de archivos distribuidos (no proporcionan E/S en paralelo). Ej. AFS, Apple Share, CIFS.

∙Sistemas de archivos paralelos (proporcionan una E/S de datos en paralelo). Ej: PVFS, PAFS.

–Sistemas de archivos de Propósitos especial: aquellos sistemas de archivos que no pertenecen a ninguno de los dos tipos anteriores.

Como hemos dicho, no todos los sistemas operativos admiten un sistema de archivos dado.

Relación entre los sistemas de archivos y los sistemas operativos más comunes:

Sistema operativo Tipos de sistemas de archivos admitidos

Dos FAT16

Windows 95 FAT16

Windows 95 OSR2 FAT16, FAT32

Windows 98 FAT16, FAT32

Windows NT4 FAT, NTFS (versión 4)

Windows 2000/XP FAT, FAT16, FAT32, NTFS (versiones 4 y 5)

Linux Ext2, Ext3, ReiserFS, Linux Swap (FAT16, FAT32, NTFS)

MacOS HFS (Sistema de Archivos Jerárquico), MFS (Sistemas

de Archivos Macintosh)

OS/2 HPFS (Sistema de Archivos de Alto Rendimiento)

SGI IRIX XFS

FreeBSD, OpenBSD UFS (Sistema de Archivos Unix)

Sun Solaris UFS (Sistema de Archivos Unix)

IBM AIX JFS (Sistema Diario de Archivos)

En este apartado vamos a analizar alguno de los sistemas de archivos antes mencionados con más profundidad.

Sistemas de archivos FAT (File Allocation Table, Tabla de Ubicación de Ficheros) FAT, FAT 16 y FAT32

Ha sido el sistema de archivos utilizado por las ediciones no empresariales de Microsoft Windows hasta Windows ME. Además, cuenta con la ventaja de ser un sistema de archivos admitido casi por todos los sistemas operativos. Estamos pues, ante un formato sencillo, cuyo uso está muy extendido entre disquetes, tarjetas de memoria, almacenamiento, USB y dispositivos similares.

Sabías qué

Bill Gates junto con Marc McDonald fueron los creadores de este sistema de archivos en 1977. FAT fue el primer sistema de archivos utilizado por Microsoft.

En su funcionamiento, FAT utiliza una tabla de asignación de archivos que no es más que un índice. Este índice crea una lista de contenidos del disco donde graba la ubicación de los archivos que este (el disco) posee.

Un archivo está compuesto por bloques, sin embargo, la información no siempre se almacena en estos de forma continua. Por este motivo, la tabla de asignación es la responsable de mantener la estructura del sistema mediante la creación de vínculos a los bloques que conforman el archivo.

Ventajas del sistema FAT

Ninguno de los sistemas de archivos compatibles con Windows NT permite la recuperación de archivos eliminados. Esto porque las utilidades de recuperación de archivos intentan acceder directamente al hardware, siendo esto imposible de lograr en Windows NT. Solo se podría recuperar el archivo, si este estuviese en una partición FAT y se reiniciara el sistema en MS-DOS.

Al iniciarse con muy poca sobrecarga, FAT es el sistema de archivos más adecuado para unidades de menos de 200MB aproximadamente.

Desventajas del sistema

–Fragmentación excesiva de datos. El proceso de lectura y escritura es cada vez más lento y complicado. Esto es así porque cuando se borran y escriben nuevos archivos suele dejar fragmentos dispersos por todo el soporte de almacenamiento Para agilizar la lectura/escritura se utiliza la desfragmentación, sin embargo se trata de un proceso demasiado largo.

–No fue diseñado para ser redundante ante fallos.

–No posee permisos de seguridad para cada archivo. Cualquier usuario puede acceder a cualquier fichero en el soporte.

Elementos que componen el sistema FAT

–Sector de arranque.

–Región FAT: contiene la tabla de asignación de archivos.

–Región del directorio raíz.

–Región de datos: donde se almacena el contenido de ficheros y carpetas.

Hoy día existen los siguientes sistemas FAT, FAT16 y FAT32. A continuación puedes ver una tabla donde quedan reflejadas las características de estos tres sistemas de archivo.

Sistemas FAT, FAT16 Y FAT32. Características

Sistemas de archivos NFTS (New Technology File System, Sistema de archivos de nueva tecnología)

Este sistema de archivos encuentra sus fundamentos en el sistema de archivos HPFS y IMB/Microsoft, y es el usado por el sistema operativo OS/2. Sin embargo a diferencia de FAT o HPFS no existe ningún objeto especial en el disco y no hay ninguna dependencia del hardware subyacente.

Este sistema de archivos tiene también ciertas influencias del formato de archivos HFS diseñado por Apple.

Su principal inconveniente es que necesita para sí mismo una buena cantidad de espacio en el disco duro, siendo esta la razón por la que no es recomendable su uso en discos con menos de 400 MB libres.

Definición

NFTS es un sistema de archivos basado en una estructura denominada tabla maestra de archivos o MFT. Esta tabla maestra puede contener información detallada de los archivos.

Características

–Se recomienda un tamaño mínimo de partición de 10GB

–El tamaño máximo de fichero viene limitado por el tamaño de volumen, siendo el tamaño recomendado para cada volumen de 2 TB

–El sistema NFTS tiene soporte para archivos dispersos.

–Hay tres versiones de NFTS: v1.2 en NT 3.51, NT 4, v3.0 en Windows 2000, y v3.1 en Windows XP, Windows 2003, Windows Vista y v5.1 en Windows 2008

–Las últimas versiones incluyen características tales como cuota de disco y punto de montaje de volumen.

Funcionamiento

–Todo lo que tenga que ver con los ficheros se almacena en forma de metadatos.

–Almacenamiento: los nombres de archivo son almacenados en Unicode (UFT-16) y la estructura de ficheros en árboles-B. Una estructura de datos más compleja acelera el acceso a los ficheros y reduce la fragmentación, solventando con esto el mayor inconveniente del sistema FAT.

–Garantiza la integridad del sistema (no de cada archivo) empleando para ello un registro transaccional (journal).

–Los sistemas NFTS han demostrado tener una estabilidad mejorada, lo cual resultaba un requisito ineludible considerando la naturaleza inestable de las versiones más antiguas de Windows NT.

Este sistema de archivos posee un funcionamiento prácticamente secreto, ya que Microsoft no ha liberado su código como hizo con FAT.

La ingeniería inversa, aplicada sobre sistemas de archivos, ha permitido el desarrollo de controladores como el NFTS-3G, que actualmente proveen a sistemas operativos GNU/Linux, Solaris, MacOSX o BSD entre, de soporte completo de lectura y escritura en particiones NTFS.

Interoperabilidad.

Actualmente Microsoft provee medios para convertir particiones FAT32 a NFTS, pero no en sentido contrario (NFTS a FAT32). Por su parte, Partition Magic de Symantec y el proyecto de código abierto NFTSResize son capaces de redimensionar particiones NTFS.

La herramienta convert incluida en los sistemas NT (Windows 2000 en adelante), permite modificar un disco con sistema de ficheros FAT32 a NFTS, sin perder ningún dato con la instrucción

convert [unidad]:/fs:ntfs

NTFS da soporte sólo de lectura a particiones formateadas, mientras que NFTS-3G es una utilidad de licencia GPL que permite lectura y escritura en particiones NFTS.

Objetivos de NFTS

Confiabilidad

–Al hacer un seguimiento de transacciones con el sistema de archivos, NFTS es un sistema de archivos recuperable

∙FAT o HPS:

Cuando ejecutan un comando, CHKDSK comprueba la coherencia de los punteros dentro del directorio

∙NFTS: mantiene un registro de transacciones con estos componentes. De este modo CHKDSK solo tiene que deshacer las transacciones hasta el punto de confirmación para recuperar la coherencia dentro del sistema de archivos.

–Ante un error en un sector, que es la ubicación de uno de los objetos especiales del sistema de archivos.

∙FAT o HPFS: producen un error de un único sector

∙NFTS evita este tipo de errores. Por un lado no utiliza objetos especiales, y protege y realiza el seguimiento de todos los objetos de disco. Por otro NFTS mantiene varias copias de la tabla maestra de archivos.

–Ante un error en un sector , que es la ubicación de uno de los objetos especiales del sistema de archivos.

∙FAT o HPFS: producen un error de un único sector

Funcionalidad

Uno de los principales objetivos de NFTS es proporcionar una plataforma enriquecida y flexible que pueda ser utilizada por otros sistemas de archivos.

NFTS admite varias secuencias de datos, siendo además totalmente compatible con el modelo de seguridad de Windows NT. De este modo ya no es un archivo de datos en una única secuencia de datos.

Finalmente, NFTS permite a cada usuario agregar a un archivo sus propios atributos los cuales han sido definidos por él mismo.

Compatibilidad con POSIX de archivos recuperable

NTFS es el sistema de archivos compatible que presenta una máxima adherencia a POSIX.1, al cumplir los siguientes requisitos de POSIX.1:

–La nomenclatura de NFTS realiza distinción entre mayúsculas y minúsculas.

–En POSIX, los archivos LÉAME.TXT, Léame.txt y léame.txt son distintos.

–Respecto a la marca de tiempo adicional, esta proporciona la hora a la que se produjo el acceso al archivo por última vez.

Eliminación de limitaciones

En NFTS se permite un aumento del tamaño de los archivos y volúmenes, (ahora pueden tener hasta 2^64 bytes (16 exabytes o 18.446.744.073.709.551.616 bytes).

Con NFTS se produce la vuelta al concepto de clústeres de FAT logrando de este modo evitar el problema que presenta HPFS con NTFS ya que HPFS presenta un tamaño de sector fijo. La razón de cambio es que al ser Windows NT un sistema operativo portátil era bastante probable que se encontrase tecnología de disco diferente en algún lugar. Se considera entonces que quizás 512 bytes por sector no fuera siempre un valor adecuado para la asignación y se define el clúster como múltiplos del tamaño de asignación natural del hardware.

Finalmente, en NTFS todos los nombres de archivo se basan en Unicode, y los nombres de archivo 8.3 se conservan junto con los nombres de archivo largos.

Ventajas de NTFS

Como se ha visto en el apartado anterior NFTS es la mejor opción para grandes volúmenes; en particular para volúmenes de 400MB o superiores. A diferencia de los que sucede con FAT, el rendimiento de NFTS no se degrada con tamaños de volumen grandes.

La capacidad de recuperación de NFTS ha sido diseñada de manera que un usuario nunca tenga que ejecutar ningún tipo de reparación de disco en una partición NFTS.

Desventajas de NTFS

Para volúmenes inferiores a 400Mb, no se recomienda la utilización de NTFS, dada la sobrecarga de espacio que esto implica. La sobrecarga antes mencionada se refiera a los archivos de sistema de NFTS que utilizan 4MB de espacio de unidad en una partición de 100MB.

NFTS no integra actualmente ningún cifrado de archivos. Por este motivo, este sistema de archivos, puede ser arrancado bajo MS-DOS o cualquier otro sistema operativo y, mediante una utilidad de edición de bajo nivel ver los datos almacenados en un volumen NFTS.

Windows NT formatea todos los disquetes con el sistema de archivos FAT. Esto es debido a que la sobrecarga de espacio que supone NFTS, hace que este sistema de archivos NFTS no coja en un disquete.

Sistema de archivos ZFS

ZFS es un novedoso sistema de archivos desarrollado por Sun para SO Solaris. Su núcleo y otras partes del sistema operativos Solaris se diseñaron en el proyecto Open Solaris. De este modo, se puede utilizar ZFS con Open Solaris o bien con Nexenta OS, la primera distribución de GNU/Solaris.

Sabías que

Triste ha sido el final de Open Solaris, pues tras la adquisición de Sun por parte de Oracle se cerró el proyecto, pero algunos de sus forks (illumos y OpenIndiana) continúan en desarrollo.

ZFS: Un Sistema de Archivos con triste final

Como veremos ZFS no es un sistema de archivos tradicional, ya que:

–Presenta una Gran capacidad: Cuenta con capacidad para gestionar una ingente capacidad de almacenamiento (está pensado para que en la práctica nunca se pueda construir un sistema de almacenamiento tan grande que ZFS no lo pueda controlar).

–Incorpora la administración de volúmenes en el propio sistema de ficheros combinando discos en un pool

–Permite crear instantáneas (de lectura o modificables)

–Crear un sistema de archivos es una operación ligera, más parecida a crear un directorio en un sistema de archivos tradicional que a crear un sistema de ficheros

–Gran rendimiento

–Compatibilidad. Desde el punto de vista del SO, un fichero en ZFS es igual que cualquier otro fichero POSIX, además es posible mover los sistemas de ficheros entre máquinas con diferente endianness, por ejemplo entre máquinas Sparc y x86.

Las patentes de software y las licencias utilizadas son un obstáculo para el uso de ZFS en Linux.

–Por un lado, las licencias CDDL y GPLv2 son incompatibles y no es posible que un mismo software satisfaga ambas.

–En segundo lugar, el camino hacia una reimplementación de ZFS puede estar bloqueado legalmente por las patentes de software.

Aun así, existen dos vías para utilizar ZFS con Linux:

ZFS on FUSE

Existe una implementación incompleta de ZFS en el espacio del usuario utilizando FUSE. Si bien de esta manera se puede obviar la incompatibilidad de licencias es difícil conseguir un rendimiento próximo al nativo.

Native ZFS on Linux

El laboratorio Laurence Livermore National Laboratory ha recibido el encargo de reimplementar ZFS de manera nativa en Linux. En la página web del proyecto se ofrecen paquetes para las principales distribuciones de GNU/Linux.

Sistema de archivos: Btrfs

Btrfs es un sistema de archivos de nueva generación para GNU/Linux con funciones que permiten escalar el almacenamiento a configuraciones de gran capacidad. Aunque no ha sido desarrollado en su totalidad, este se encuentra integrado en el núcleo desde la versión 2.6.29 y actualmente es utilizable incluso como sistema de archivos raíz.

Características:

Sistema de Archivos: Btrfs

∙Hace uso extensivo de copy-on-white

∙Permite snapsohtos de solo lectura o modificables.

∙Incluye soporte nativo para sistemas de archvo multidispositivo y soporta subvolumenes

∙Protege la información mediante checksums, soprta compresión y optimizaciones para discos SSD, permite empaquetado eficiente de ficheros pequeños...

1.1.1. Nomenclatura y codificación

El conjunto de principios y reglas aplicadas para la denominación inequívoca, única y distintiva de los distintos elementos es lo que se conoce como el nombre de nomenclatura. Así, hablaremos de nomenclatura de archivos, nomenclatura de sistemas operativos….

Así pues, la nomenclatura en los sistemas de archivos es el conjunto de normas, reglas y principios utilizados para definir de forma unívoca a los elementos que lo integran: los propios sistemas de archivos y los archivos alojados en estos.

La mayoría de los sistemas operativos aceptan nombres de archivos que responden a la siguiente estructura.

Nombre.extensión del archivo

Nombre: Conjunto de cadenas de caracteres.

Extensión: La extensión del archivo, siempre detrás del punto, proporciona información acerca de la naturaleza del archivo.

Así por ejemplo, el sistema operativo de Windows reconoce las extensiones y le proporciona un significado. Los usuarios (o procesos) pueden registrar extensiones con el sistema operativo y especificar para cada una de estas qué programa tiene asignado esa extensión. De este modo, cuando un usuario hace doble clic sobre un nombre de archivo, el programa asignado a la extensión del archivo se inicia tomando como parámetro este archivo.

Otro ejemplo:

Tenemos un compilador de C que compila todos los archivos cuya terminación sea .c Por otro lado, este compilador podría rehusar a realizar la compilación si los archivos no tuviesen esta terminación. Este tipo de convenciones son especialmente útiles en el caso de que un mismo programa maneje distintos tipos de archivos.

Sea ahora, el mismo compilador de C al que le llegan una serie de archivos para compilar y enlazar; algunos archivos de C y otros en lenguaje ensamblador. En este caso, la extensión se vuelve esencial para que el compilador sepa qué hacer con ellos en función de su extensión. Es decir, el compilador sabrá, según la extensión de los archivos, cuales son los archivos de C, cuáles son archivos de lenguaje ensamblador y qué archivos son de un tipo diferente a los anteriores.

Definición

En informática, una extensión de archivo o extensión de fichero es una cadena de caracteres anexada al nombre de un archivo, usualmente precedida por un punto. Su función principal es diferenciar el contenido del archivo de modo que el sistema operativo disponga el procedimiento necesario para ejecutarlo o interpretarlo, sin embargo, la extensión es solamente parte del nombre del archivo y no representa ningún tipo de obligación respecto a su contenido.

Veamos ahora, la nomenclatura de dos de los principales sistemas de archivos: FAT y NFTS.

–FAT: Nomenclatura

∙Utiliza la convención de nomenclatura tradicional 8.3.

∙Los nombres de los archivos deben crearse con el conjunto de caracteres de ASCII.

∙Los nombre de archivo o directorio deberán responder a la siguiente estructura:

Hasta 8 caracteres de longitud + Separador de punto (.) + Extensión de hasta tres caracteres.

El nombre puede empezar con una cifra o un número y puede contener cualquier carácter excepto:

? " / \ > < * | :

Nota 1:

Ha de considerarse que la utilización de cualquiera de estos caracteres puede conducir a resultados inesperados.

Nota 2:

Los siguientes nombres CON, AUX, COM1,COM2, COM3, COM4, LPT1,LPT2, LPT3, PRN Y NUL se encuentran reservados.

Convención de nomenclatura de NFTS

–A diferencia del sistema FAT, en NTFS los nombres de archivo o directorio pueden tener hasta 255 caracteres de longitud.

–Los nombres conservan el modelo de mayúsculas y minúsculas, no distinguiendo sin embargo entre mayúsculas y minúsculas.. De este modo NFTS reconocería como tres archivos diferentes: maría, María y MARIA mientras que para FAT serian un único archivo.

–Los nombres pueden