En este tema, aprenderemos sobre los comandos básicos y avanzados del Sistema de Archivos Distribuido de Hadoop (HDFS). Estos comandos son esenciales para interactuar con HDFS, permitiéndonos realizar operaciones como crear directorios, copiar archivos, eliminar datos y más.

HDFS proporciona una serie de comandos que se pueden utilizar desde la línea de comandos para gestionar archivos y directorios. Estos comandos son similares a los comandos de Unix/Linux, pero están diseñados para trabajar en el entorno distribuido de Hadoop.

La sintaxis general para ejecutar comandos de HDFS es:

Donde:

• hdfs dfs es el prefijo que indica que estamos ejecutando un comando de HDFS.
• <comando> es el comando específico que queremos ejecutar.
• <opciones> son los argumentos adicionales que el comando puede requerir.

Para listar los contenidos de un directorio en HDFS, utilizamos el comando ls:

Ejemplo:

Para crear un nuevo directorio en HDFS, utilizamos el comando mkdir:

Ejemplo:

Para copiar archivos desde el sistema de archivos local a HDFS, utilizamos el comando copyFromLocal:

Ejemplo:

Para copiar archivos desde HDFS al sistema de archivos local, utilizamos el comando copyToLocal:

Ejemplo:

Para eliminar archivos o directorios en HDFS, utilizamos el comando rm:

Para eliminar un directorio y su contenido de manera recursiva, utilizamos la opción -r:

Ejemplo:

Para ver el contenido de un archivo en HDFS, utilizamos el comando cat:

Ejemplo:

Para mover archivos o directorios dentro de HDFS, utilizamos el comando mv:

Ejemplo:

Para cambiar los permisos de archivos o directorios en HDFS, utilizamos el comando chmod:

Ejemplo:

Para ver el espacio utilizado por los archivos y directorios en HDFS, utilizamos el comando du:

Ejemplo:

Para ver el estado de un archivo en HDFS, utilizamos el comando stat:

Ejemplo:

1. Crea un directorio llamado practica en tu directorio de usuario en HDFS.
2. Lista el contenido del directorio practica.

Solución:

1. Copia un archivo llamado datos.txt desde tu sistema de archivos local a HDFS en el directorio practica.
2. Verifica el contenido del archivo datos.txt en HDFS.

Solución:

1. Elimina el archivo datos.txt del directorio practica.
2. Elimina el directorio practica.

Solución:

En esta sección, hemos aprendido los comandos básicos y avanzados de HDFS que son esenciales para gestionar archivos y directorios en el Sistema de Archivos Distribuido de Hadoop. Estos comandos nos permiten realizar operaciones como crear, copiar, mover y eliminar archivos y directorios, así como cambiar permisos y ver el estado de los archivos. Con esta base, estamos preparados para manejar datos en HDFS de manera eficiente y efectiva.

En el próximo tema, profundizaremos en la Replicación de Datos en HDFS, donde aprenderemos cómo HDFS asegura la disponibilidad y la tolerancia a fallos mediante la replicación de datos.