¿Qué tan grande es la nube?

Gran nube

El mes pasado, 2007es.com te reveló la verdadera escala de la pornografía en Internet. En cualquier momento, la transmisión de videos para adultos probablemente utilice alrededor del 30% del ancho de banda total de Internet, lo que equivale a alrededor de 6 terabytes de pornografía consumidos. cada segundo. Pero, ¿qué pasa con el otro 70%? Netflix, YouTube y otros sitios de videos que no son para adultos son enormes acaparadores de ancho de banda, que posiblemente representan hasta el 40% del tráfico de Internet. Los casilleros de archivos digitales, como Rapidshare y Megaupload, representan alrededor del 10% del tráfico en todo el mundo. La navegación web y el correo electrónico (¡y spam!) Son otro 15%. Y luego está la computación en la nube.

Hoy en día, la gran mayoría de los servicios y sitios web están alojados en la nube. Con esto quiero decir que, en lugar de empresas (como Ziff Davis / 2007es.com) que gestionan su propio hardware, se utilizan servicios informáticos y de almacenamiento en la nube de terceros. Amazon Web Services (AWS), Microsoft Azure y Google son tres ejemplos destacados de grandes clústeres en la nube, pero hay cientos de operaciones más pequeñas que varían en tamaño desde un centro de datos completo hasta unos pocos racks.

El poder de la nube reside en el hecho de que puede ser coaccionado y encajado en tareas tan dispares como una supercomputadora basada en la nube, al correo web, a almacenamiento de documentos simple. En un solo clúster en la nube, Google puede alojar y publicar petabytes de videos de YouTube y almacenar todo su correo electrónico y documentos. Sin embargo, de todas las facetas de la nube, hoy nos centraremos en el almacenamiento en la nube.



Un centro de datos de Microsoft

Un centro de datos de Microsoft

Si bien el almacenamiento puede no ser tan atractivo como los terabytes de RAM y miles de núcleos de CPU, es la forma más confiable de medir el tamaño de la nube, especialmente cuando tomamos en cuenta el uso del ancho de banda. De la cantidad total de almacenamiento también podemos calcular el costo de almacenamiento en la nube y, a partir de ahí, finalmente podemos trabajar por qué empresas como Google, Microsoft y Dropbox se están volviendo locas para proporcionar servicios de almacenamiento en la nube.

Al igual que la historia de la pornografía, primero comenzaremos con algunos números teóricos y luego pasaremos a algunas cifras del mundo real (y hardware) de Backblaze, un proveedor de respaldo en la nube.

Petabytes

En su mayor parte, las cifras reales de las grandes empresas, como Google, Facebook, Amazon y Microsoft, son pocas y espaciadas. Sin embargo, si recorre la web, surgen algunas cifras aproximadas:

  • Facebook, en su presentación de OPI, dijo que almacena más de 100 petabytes (PB) de medios (fotos y videos). No es poco realista decir que Facebook probablemente tiene una capacidad de almacenamiento total mucho más allá de eso, una vez que se tienen en cuenta las copias de seguridad y otros datos (actualizaciones de estado, me gusta, etc.), posiblemente en el rango de 300 PB.
  • Microsoft admitió recientemente que Hotmail almacena más de 100 petabytes y que SkyDrive, con “17 millones de clientes”, almacena 10 PB de datos. Al igual que Facebook, la capacidad total de Microsoft, una vez que tenemos en cuenta el resto de Azure y sus propiedades web, probablemente supere los 300 petabytes.
  • Megaupload es relativamente pequeño en comparación, aparentemente almacena solo 25 petabytes.
  • Amazon, en lugar de darnos una buena y sencilla cantidad de petabytes, anuncia la cantidad total de objetos almacenados por su servicio de almacenamiento en la nube S3. En abril de 2012, Amazon S3 almacenaba 905 mil millones de objetos. Si asumimos un tamaño promedio de 100 KB, eso es alrededor de 90 petabytes; si el tamaño medio es de 1 MB, son 900 petabytes, ¡casi un exabyte!
  • Dropbox, hace un año, almacenó “más de 10 petabytes” de datos. Tenía 25 millones de usuarios en ese entonces y 100 millones de usuarios en la actualidad, por lo que en igualdad de condiciones, la empresa ahora almacena alrededor de 40 PB de datos.

Para poner estas cifras en perspectiva, una computadora promedio probablemente tenga un disco duro de 500 GB o 1 TB, y un petabyte equivale a 1024 TB. Por lo menos, los centros de datos de Microsoft y Facebook albergan más de 100.000 discos duros. Sin construir hardware personalizado, puede incluir 48 unidades en un gabinete de 4U. Después de tener en cuenta el equipo de red, eso significa que probablemente esté viendo alrededor de 400 discos duros por rack de 40U, o 250 racks, cada uno de los cuales ocupa alrededor de un metro cuadrado de espacio de piso. Esto puede parecer mucho, pero si considera que Google, Amazon, Facebook y Microsoft implementan regularmente centros de datos con planos de planta de más de 30.000 metros cuadrados (300.000+ pies cuadrados), en realidad no es tanto. En la gran escala de las cosas, se dedica mucho más espacio a los servidores (es decir, CPU) y equipos de red.

Banda ancha

Conmutador de centro de datosEn cuanto al ancho de banda, tenemos incluso menos datos de los grandes. Sabemos que, hasta el año pasado, se guardaban un millón de archivos cada cinco minutos, por lo que hoy, con cuatro veces más usuarios, eso es 800.000 archivos por minuto. Amazon S3, que es significativamente más grande que Dropbox, maneja '650,000 solicitudes por segundo'.

Si asumimos que el archivo promedio almacenado en Dropbox es de 500 KB (una combinación de fotos, videos y documentos), Dropbox almacena un total de 400,000 megabytes (0.4TB) por minuto, o 6.7GB por segundo (54Gbps). No tenemos ningún dato sobre cuántos datos Dropbox envía por minuto (es decir, personas que descargan archivos de su Dropbox), pero probablemente esté en la región de 10 a 20 Gbps.

Amazon S3, que se utiliza principalmente para almacenar archivos estáticos para sitios web (imágenes, hojas de estilo, videos), probablemente tenga un tamaño de archivo promedio más bajo que Dropbox. Si asumimos un tamaño medio de 100 KB por archivo, 650.000 solicitudes por segundo equivalen a un total de 61 gigabytes de datos transferidos por segundo, o 488 Gbps. Esto está muy cerca de la cifra de 800 Gbps que estimamos para un gran sitio de pornografía, lo que equivale a alrededor del 2% del tráfico total de Internet: ¡Amazon es bastante grande!

Facebook y Microsoft, con entre 100 y 300 PB de almacenamiento cada uno, probablemente se encuentran entre Dropbox y Amazon en términos de uso de ancho de banda, tal vez 200 Gbps por pieza.

¡Pero basta de teoría! ¡Analicemos algunos números del mundo real y hardware del mundo real!

Copyright © Todos Los Derechos Reservados | 2007es.com