INFORME DE LA RETRANSMISIÓN DE ECLIPSE SOLAR 2013

Transcripción

1 INFORME DE LA RETRANSMISIÓN DE ECLIPSE SOLAR 2013 CRÉDITOS El Séptimo Programa Marco de la Unión Europea (EU, FP7/ , INFRASTRUCTURES , INFRA : e-science environments) ha promovido la retransmisión bajo el proyecto GLORIA GLObal Robotic telescopes Intelligent Array for e-sciencie (Grant Agreement Number ). INFRAESTRUCTURA 1.- Portal Web retransmisión. La infraestructura desplegada por CanarCloud ( se basaba en un Cluster VMware vsphere 5 ( basado en arquitectura Intel Nehalem interconectado a un sistema de almacenamiento RAID centralizado capaz de soportar la carga de los varios miles de peticiones contra el portal de la retransmisión junto con un balanceador de DNS, el cual interconectó todas las instancias web, tanto físicas como virtuales de todos los colaboradores, garantizando un reparto de carga equitativo de todas las visitas al portal web entre todas las instancias. 1

2 Ante las altas expectativas y con el fin de reducir el tiempo y la tasa de transferencia de los recursos incluidos en la web (logotipos e imágenes estáticas, javascript y ficheros de estilos, etc ) se implementó un Proxy con cache de contenido estático a través del servicio de CDN gloria.cdn.canarcloud.net. El funcionamiento de esta arquitectura fue el siguiente: Los clientes hacían la petición al portal web de la retransmisión que debía estar diseñado para que su tamaño (en bytes) fuera el mínimo posible. Un sistema de Balanceo de Carga decidía cual de todos los servidores que formaban ese cluster atendía cada petición que llegaba en función de la política implementada. El cliente era atendido por el servidor seleccionado por el sistema de Balanceo de Carga. Cuando el cliente cargaba la página directamente en su navegador, éste, solicitaba a gloria.cdn.canarcloud.net la carga de los contenidos estáticos a través del proxy, el cual suministra un tiempo mínimo de cache de 3h. Colaboradores Web Se solicitó la colaboración de instituciones públicas o privadas, asociaciones, fundaciones, etc para la ayuda en la difusión vía Internet del portal de entrada a la retransmisión (live.gloria-project.eu) en un intento de evitar el colapso por confluencia masiva de peticiones. Colaboradores Web Básicos 2

3 En este tipo de colaboración, la institución, organización, asociación, etc. une temporalmente una máquina o conjunto de máquinas de su propiedad al cluster propuesto. Esta máquina (o máquinas) que se agrupaba, servía el portal web con todos los contenidos de la retransmisión. El Centre de Serveis científics i acadèmics de Catalunya [1 servidor web] TOTAL [1 servidor web] Colaboradores Web Avanzados Colaboradores con una o más máquinas compatibles con VMware vsphere 5 con más de 4 GB de RAM, más de 4 cores, 3 o más IPs y un ancho de banda de 100 Mbps o más, han colaborado integrando dichas máquinas como nodos remotos del Cluster. CanarCloud [1 cluster vsphere nodos + 2 VPS + 2 Amazon EC2] Instituto de Astrofísica de Canarias [1 nodo vsphere VPS] INAF IASF de Bolonia [1 nodo vsphere VPS] La Universidad de Varsovia [4 VPS] Astronomical Institute of Academy of Sciences (Irlanda)[1 VPS] Chile [1 VPS] TOTAL [13 VPS] Sitios Web con player embebido Además de los colaboradores anteriores, también nos encontramos con sitios web que solicitaron la inclusión de un player en sus páginas web consumiendo nuestra señal de video pero soportando de manera independiente visitas a su web. Agencia SINC Yahoo.es Streaming de video. La infraestructura desplegada por CanarCloud ( se basaba en un Cluster de instancias Wowza sobre Amazon Elastic Compute Cloud (Amazon EC2) en una configuración multirepetidor junto con un balanceador de DNS, el cual interconectaba todas las instancias repetidoras para soportar un máximo de visitas simultáneas, garantizando un reparto de carga equitativo de todas las visitas entre todas las instancias. 3

4 El funcionamiento de esta arquitectura fue el siguiente: Generación de los Streams Conexión 1: con una duración total de 5 minutos a de 12:00-12:05 UT (13:00-13:05 CET) coincidiendo con la máxima ocultación parcial en Europa. La señal definitiva se envió a la instancia eclipse2013.canarcloud.tv para su distribución a través del CDN. Conexión 2: con una duración total de 10 minutos de 14:20-14:30 UT (15:20-15:30 CET). La señal definitiva se envió a la instancia eclipse2013.canarcloud.tv para su distribución a través del CDN. Timelapses: Desde el 3 de noviembre a las 13:00 UT (14:00 CET) y cada minuto se refrescó la imagen del Sol (eclipsado por la Luna parcialmente). Directo a través del portal de la retransmisión Los clientes que accedían al portal de la retransmisión (live.gloria-project.eu) encontraban un reproductor que obtenía las señales de cada uno de los canales haciendo una petición a eclipse2013.gloria-project.eu. Los clientes que lo deseaban y que disponían de un reproductor compatible podían conectarse directamente a la dirección eclipse2013.gloria-project.eu. Un sistema de Balanceo de Carga decidía cuál de todas las instancias que formaban el 4

5 cluster atendía cada petición de acceso al directo que llegaba a eclipse2013.gloria-project.eu en función de la política implementada. El cliente era atendido por la instancia repetidora seleccionada por el sistema de Balanceo de Carga. Directo a través de colaboradores Los colaboradores con infraestructura propia de retransmisión de video obtenían la señal directamente de una instancia reservada en el CDN y la redistribuían utilizando su propia infraestructura de manera que aquellos clientes que lo deseaban podían acceder al directo a través de los portales web de dichos colaboradores. Aquellos colaboradores que no disponían de infraestructura propia de retransmisión de video o que, por cuestiones técnicas no podían conectar dicha infraestructura a la nuestra pudieron solicitar el uso directo de nuestra propia infraestructura, reservándoles un % de la misma en función de las expectativas de visitantes. Colaboradores de Video Colaboradores Wowza Colaboradores con una o más máquinas compatibles con VMware vsphere 5 con más de 4 GB de RAM, más de 4 cores, 3 o más IPs y un ancho de banda de 1 Gbps han colaborado integrando dichas máquinas como nodos remotos del Cluster y permitiendo el despliegue de instancias Wowza sumándose a las desplegadas por CanarCloud. CanarCloud [CDN compuesto por instancias m1.large Wowza Amazon EC2] Televisiones y Repetidores Colaboradores con infraestructura de Live-Stream propia han redistribuido nuestra señal a través de sus portales web o televisiones. Canal Youtube GLORIA CanarCloud Blog Sky-Live.TV La Vanguardia TVN S.A. ESTADÍSTICAS 1.- Portal Web retransmisión Para la obtención de estadísticas de visitas del portal web de la retransmisión (live.gloria-project.eu) se habilitó el servicio de recolección de estadísticas Google Analytics para datos globales del portal y el recolector Awstat a nivel local para analizar la contribución 5

6 individual de cada colaborador. El periodo analizado comprende las visitas entre los días 03 (0h UT) y 05 (0h UT) de Noviembre del Google Analytics Según este servicio podemos observar que en el periodo analizado hemos obtenido visitas y páginas vistas, tal y como podemos observar en la siguiente gráfica. Top 10 País de Origen Spain 24,91% Chile 12,36% Poland 12,32% Argentina 10,38% Mexico 8,19% Colombia 4,09% United States 3,94% Uruguay 2,47% Venezuela 2,39% Czech Republic 1,53% Navegador Chrome 44,74% Firefox 19,22% Safari 10,17% Internet Explorer 9,66% Android Browser 8,68% Safari (in-app) 3,66% Opera 1,93% Opera Mini 0,61% BlackBerry 0,38% Mozilla 0,30% Sistema Operativo Windows 65,59% Android 14,25% ios 12,01% Macintosh 4,51% Linux 2,26% Windows Phone 0,57% BlackBerry 0,42% (not set) 0,16% SymbianOS 0,09% Nokia 0,04% Awstat Según la herramienta de recolección de estadísticas locales Awstat instalada en la mayoría de las instancias de los colaboradores web, podemos ver la contribución de cada uno de los colaboradores al porcentaje total de visitas, páginas y tráfico transmitido. 6

7 Totalizando los datos obtenidos de aquellos colaboradores con Awstat instalado, observamos que globalmente el portal live.gloria-project.eu ha recibido visitas y páginas vistas, suministrando 8.63 GBytes de datos. Proxy estático gloria.cdn.canarcloud.net Analizando los datos suministrador por el proxy estático desplegado observamos que se han producido peticiones que es equivalente a un tráfico de 7,40 GBytes de datos con un % de acierto del 94,09% lo que supone un ahorro en transferencia de datos suministrado por los colaboradores web cercano al 46,00% y el correspondiente incremento de rendimiento. Sitios Web con player embebido (propio o cedido) Si analizamos los datos suministrados por aquellos colaboradores que han publicitado el acontecimiento en sus propias páginas web utilizando, tanto nuestro player como su propia infraestructura nos encontramos con la siguiente información: Canal Youtube GLORIA ( A través de este canal se obtuvieron visitas. Poland 24,10% Spain 21,10% 7

8 United States 9,10% Mexico 7,80% Chile 6,70% Argentina 6,20% CanarCloud Blog ( A través del Blog de CanarCloud se obtuvieron 343 visitas y 431 páginas vistas. Sky-Live.TV ( A través del portal Sky-Live.TV se obtuvieron visitas y páginas vistas. Agencia SINC ( A través del portal de la Agencia SINC se obtuvieron de manera estimativa unas visitas y páginas vistas. 2.- Streaming de video. Para la obtención de las estadísticas del directo, CanarCloud ha desarrollado un servicio de recolección REST encargado de monitorizar a intervalos de 1 minutos todas y cada una de las instancias Wowza. Según este servicio, podemos observar durante las 2 retransmisiones que un total de visitantes se conectaron al directo, de los cuales visitantes observaron de forma simultánea la segunda retransmisión, alcanzando un máximo total de ancho de banda de MBps y un tráfico de datos transferido de GB. 8

9 Televisiones y Repetidores Debido a que, algunos de los colaboradores solicitaron un % de nuestro CDN para distribuir nuestras señales a través de cada uno de sus portales o integraron sus infraestructuras con nuestro sistema de recolección de estadísticas, las estadísticas anteriores ya engloban estos visitantes. Si desglosamos los datos obtenidos en función de la fuente desde la que se consumieron las señales en cada una de las retransmisiones obtenemos los siguientes datos: Retransmisión 3 Noviembre (12:00-12:05 UT) Retransmisión 3 Noviembre (14:20-14:30 UT) TOTALES y COMPARATIVA La siguiente tabla resume el número de visitas al portal web de live.gloria project.eu y al streaming del vídeo en directo, donde en la figura se comparan los 9 eventos 9

10 retransmitidos hasta el momento. Los últimos cinco se refieren a eventos de GLORIA. Visits Maximum Web portal 194,390 9,500 Video 26,859 11,298 Figura: Comparación de espectadores y visitas a la web de la retransmisión en varios eventos, TSE 2010 (Eclipse Total de Sol, 11 de Julio del 2010, Isla de Pascua), TLE 2010 (Eclipse total de Luna, 20 de Diciembre del 2010, Teide), TLE 2011 (Eclipse Total de Luna, 15 de Junio del 2011, Teide), NL 2011 (Auroras boreales, en Agosto del 2011, Groenlandia), VT 2012 (Tránsito de Venus, 6 de Junio del 2012, Australia / Japón/ Noruega), NL 2012 (Auroras boreales, en Agosto del 2012, Groenlandia), TSE 2012 (Eclipse Total de Sol, 13 de Noviembre del 2012, Australia), NL 2013 (Auroras boreales, en Agosto del 2013, Groenlandia), TSE 2013 (Eclipse Total de Sol, en Noviembre de 2013, Kenia). 10