Blog de ArmandoF
Video
💻 #BigDataPipeline en la Nube 🌐
Cada plataforma Cloud (#Azure, #AWS,#GCP) ofrece un conjunto completo de servicios que cubren todo el ciclo de vida de los datos:
1️⃣ Ingestion: Recopilación de datos de varias fuentes
2️⃣ Data Lake: Almacenamiento de datos brutos
3️⃣ Computation: Procesamiento y análisis de datos
4️⃣ Data Warehouse: Almacenamiento de datos estructurados
5️⃣ Presentation: Visualización y generación de informes
AWS utiliza servicios como #Kinesis para la transmisión de datos, #S3 para el almacenamiento, #EMR para el procesamiento, #RedShift para el almacenamiento y #QuickSight para la visualización.
El pipeline de Azure incluye #EventHubs para la ingesta, #DataLakeStore para el almacenamiento, #Databricks para el procesamiento, #CosmosDB para el almacenamiento y #PowerBI para la presentación.
GCP ofrece
#PubSub para la transmisión de datos, #CloudStorage para data Lake, #DataProc y #DataFlow para el procesamiento, #BigQuery para el almacenamiento y #DataStudio para la visualización.
Cada plataforma Cloud (#Azure, #AWS,#GCP) ofrece un conjunto completo de servicios que cubren todo el ciclo de vida de los datos:
1️⃣ Ingestion: Recopilación de datos de varias fuentes
2️⃣ Data Lake: Almacenamiento de datos brutos
3️⃣ Computation: Procesamiento y análisis de datos
4️⃣ Data Warehouse: Almacenamiento de datos estructurados
5️⃣ Presentation: Visualización y generación de informes
AWS utiliza servicios como #Kinesis para la transmisión de datos, #S3 para el almacenamiento, #EMR para el procesamiento, #RedShift para el almacenamiento y #QuickSight para la visualización.
El pipeline de Azure incluye #EventHubs para la ingesta, #DataLakeStore para el almacenamiento, #Databricks para el procesamiento, #CosmosDB para el almacenamiento y #PowerBI para la presentación.
GCP ofrece
#PubSub para la transmisión de datos, #CloudStorage para data Lake, #DataProc y #DataFlow para el procesamiento, #BigQuery para el almacenamiento y #DataStudio para la visualización.
This media is not supported in your browser
VIEW IN TELEGRAM
🧠 Plan: Confluence, Slack, Redmine, Taiga
👨💻 Code: GitHub, GitLab, IntelliJ, VSCode
🏗️ Build: Gradle, Jenkins, Travis CI, Bazel, Maven
🧪 Test: Postman, Jest, Mocha, Selenium
🚀 Release: GoCD, Helm, FluxCD, ArgoCD
☁️ Deploy: Terraform, Chef, Ansible, Puppet
🔍 Monitor: Zabbix, ELK Stack, Grafana, Netdata
⚙️ Operate: Azure, AWS, Kubernetes, Rancher
👨💻 Code: GitHub, GitLab, IntelliJ, VSCode
🏗️ Build: Gradle, Jenkins, Travis CI, Bazel, Maven
🧪 Test: Postman, Jest, Mocha, Selenium
🚀 Release: GoCD, Helm, FluxCD, ArgoCD
☁️ Deploy: Terraform, Chef, Ansible, Puppet
🔍 Monitor: Zabbix, ELK Stack, Grafana, Netdata
⚙️ Operate: Azure, AWS, Kubernetes, Rancher
Si trabajas en el mundo de IT que IA prefieres usar mas al dia a dia
Anonymous Poll
69%
🌐ChatGPT
31%
🟥Copilot
atajo para en mongo shell sacar listado de bd y almacenamiento ocupado por las mimas ordenando de mayor a menor
db.adminCommand({ listDatabases: 1 }).databases.sort((a, b) => b.sizeOnDisk - a.sizeOnDisk).forEach(db => {
... print(`Database: ${db.name}, Size: ${(db.sizeOnDisk / (1024 * 1024)).toFixed(2)} MB`);
... });
——
Si usas mongodb compass
usa este->
db.adminCommand({ listDatabases: 1 }).databases
.sort((a, b) => b.sizeOnDisk - a.sizeOnDisk)
.forEach(db => {
print(`Database: ${db.name}, Size: ${(db.sizeOnDisk / (1024 * 1024)).toFixed(2)} MB`);
});
db.adminCommand({ listDatabases: 1 }).databases.sort((a, b) => b.sizeOnDisk - a.sizeOnDisk).forEach(db => {
... print(`Database: ${db.name}, Size: ${(db.sizeOnDisk / (1024 * 1024)).toFixed(2)} MB`);
... });
——
Si usas mongodb compass
usa este->
db.adminCommand({ listDatabases: 1 }).databases
.sort((a, b) => b.sizeOnDisk - a.sizeOnDisk)
.forEach(db => {
print(`Database: ${db.name}, Size: ${(db.sizeOnDisk / (1024 * 1024)).toFixed(2)} MB`);
});
Noviembre es sinónimo de Devfests
- 30 de Noviembre Devfest Aranjuez: https://buff.ly/4eoegf1
- 30 de Noviembre Devfest Aranjuez: https://buff.ly/4eoegf1
Google Developer Groups
DevFest Aranjuez 2024
In-person Event - Los DevFest son eventos comunitarios a gran escala, impulsados por la pasión y el talento de desarrolladores locales.
Se celebran anualmente en todo el mundo y cada uno tiene un enfoque único, pero todos comparten la misma misión: reunir…
Se celebran anualmente en todo el mundo y cada uno tiene un enfoque único, pero todos comparten la misma misión: reunir…
Únete a Trade Republic. La forma más inteligente de invertir, gastar y ahorrar. Acepta mi invitación a través del enlace para obtener una recompensa de bienvenida.
https://refnocode.trade.re/hhxnhg0s
https://refnocode.trade.re/hhxnhg0s
Traderepublic
Trade Republic
This media is not supported in your browser
VIEW IN TELEGRAM
Nuevo intro para cada conversación de trabajo
Mañana nos vemos por aca
https://aws-experience.com/emea/iberia/e/bd8e7/generative-ai-day-jornada-de-inteligencia-artificial-generativa-evento-presencial
https://aws-experience.com/emea/iberia/e/bd8e7/generative-ai-day-jornada-de-inteligencia-artificial-generativa-evento-presencial
AWS Experience Iberia
Generative AI Day: Jornada de inteligencia artificial generativa (evento presencial)
En este evento gratuito dedicado a la inteligencia artificial generativa, líderes de negocio y expertos en tecnología se unen para conectarse, colaborar y aprender sobre los últimos avances de la IA generativa que están transformando el mundo.