Nota: para terminar con este grupo básico de post pasare a una puesta totalmente funcional del Modo-Swarm con Apache-Spark, con un Nodo-Master con 1-replica y un Nodo-Wolker con 2-replicas (es recomendable establecer etiquetas para los Nodos como Buenas-Practicas). -. Empecemos por ver los Nodos del Host y Server, Crearemos Network-Overlay confirmaremos su creación y estableceremos […]
Seguir leyendo
Recopilando: Docker puede crear imágenes automáticamente leyendo las instrucciones de un archivo (Dockerfile) es un documento de texto que contiene todos los comandos que un usuario puede llamar en la línea de comandos para ensamblar una imagen. Los docker build usuarios pueden crear una compilación automatizada que ejecute varias instrucciones de línea de comandos en […]
Seguir leyendo
Nota: A continuación escalamos al utilizar Dockerfile, utilizamos la imagen base (ubuntu-python-pip:latesh) que es la creada en el posts anterior. Creamos el fichero dockerfile dentro de la carpeta my-dockerfile en la que creamos una nueva carpeta Creamos una carpeta dentro de my-dockerfile : In: root@juan-Aspire-ES1-512:/my-dockerfile# mkdir base-spark-hadoop Creamos un archivo dockerfile con nano : In: […]
Seguir leyendo
Nota: estos apuntes sirven para tener una visión clara del proceso de creación de Images-Docker sin usar Dockerfile, útil para que los retoques que tengamos que hacer a una images para que se ajuste a nuestros fines, de eta forma cumplan nuestras necesidades. # Crear un contenedor Docker lo llamaremos (spark-docker) # In: root@juan-Aspire-ES1-512:/# docker […]
Seguir leyendo
-. Estos Apuntes se basan un laboratorio de Apache-Spark y Docker y controlando por PySpark , Jupyter-Notebook . Probando diferentes configuraciones de Pytho-Venv , Docker ,en Cluster. En esta ocasión usare un portátil Host el cual ejecuta sus nodo Master, Jupter, SparkSession y un Server-Ubuntu:20.04 en el cual irán alojados los Worker1 , Worker2 , […]
Seguir leyendo
Nota: En este laboratorio de Apache-Spark y Docker y controlando por PySpark , Jupyter-Notebook, su objetivo es poner en funcionalidad diferentes programas para conseguir un entorno de producción. -.Estos Apuntes se basan en un laboratorio (Que iré escalando) de Apache-Spark y Docker y controlando por PySpark , Jupyter-Notebook . -.Probando diferentes configuraciones de Pytho-Venv , […]
Seguir leyendo
Prologo: ( Este post exponemos un caso real, en el cual generamos un entorno virtualizado-ligero ¡paso a paso! Usando Python3-Venv). Python3-Venv El venv módulo proporciona soporte para la creación de “entornos virtuales” ligeros con sus propios directorios , aislados de los directorios de sitios del sistema. Cada entorno virtual tiene su propio binario de Python […]
Seguir leyendo