Era el 6 de septiembre, algo antes de SIMO 2009 y parecía otra perogrullada mía. Apenas había instalado una veintena de cámaras IP y no creía en la continuidad del blog, ¿total de qué iba a hablar?, ponemos 4 post este mes y lo dejamos. Fuimos en octubre si no recuerdo mal, la feria iba de mal en peor y nosotros debutábamos como invitados por el “Premio Vivero 2009″. Al final el premio quedó desierto, los 9000€ de premio desaparecieron y la feria fue cancelada al año siguiente. Nosotros salimos de allí con más de 200 tarjetas recogidas y la ilusión por las nubes.

Mirar atrás da un poco de vértigo, pero después de 100 post y todo lo que nos ha pasado es imposible no decir ¿si hubiera sabido esto?¿y si…?

Vidium - Premio Vivero 2009

No me gusta el pasteleo rosa, pero hoy toca hacer balance, no hay blanco/negro o éxito/derrota, he aprendido mucho me atrevería a decir: video, óptica, web o escalabilidad, pero eso lo puede hacer cualquiera con tiempo y Google. Hay otras cosas más empíricas y difíciles de conseguir, la experiencia de dirigir un equipo de desarrollo durante casi 4 años, aprender a vender, los Ususaurios, distribuidores transformados en amigos, ser engañado/timado/saltado en varias ocasiones, negociar nuestro futuro en Utrech, que tus grabaciones sean utilizadas en más de una decena de juicios…

Hoy Vidium sigue adelante con los nuevos modelos de NVR, ya tenemos más de 500 visitantes únicos/mes en nuestro blog, no está mal para un blog de nicho ¿no?

¡Gracias a todos!

Si nunca has fracasado…

Think different

Hace unos meses me topé con este video donde uno de estos magos se sube a un escenario, se trata del ingeniero jefe de Youtube, Coung Do. Durante una hora, nos enseñaba (con mucho humor) al resto de los mortales como funcionaba Youtube en sus inicios.

Os dejo el video original por si alguien se anima (52 minutos)

Las cifras

• Youtube tiene un 12000 visitantes por segundo, mil millones por día
• Soporta la distribución de más de 100 millones de videos al día
• Fue comprada por Google en 2009 por 1650 millones de dólares
• Empezaron con el siguiente equipo (9 personas): 2 Sysadmins, 2 arquitectos de escalabilidad, 2 desarrolladores, 2 ingenieros de red y 1 administrador de bases de datos.

La idea inicial

El video es muy ilustrativo, desde su inicio Youtube entró en una vorágine de cuellos de botella, ante el increible éxito que alcanzaban cada mes. Para escalar tenían que mantenerlo sencillo y barato, utilizando hardware de consumo (que como veis es la tónica general en estas plataformas) y la mínima cantidad de nodos posibles. El objetivo era soportar el volumen de video a procesar y el ancho de banda de los videos de mayor éxito.

La plataforma

• Apache: Para servir las páginas
• Python
• SuSe y MySQL
• Psyco: compilador de python a C, permite ejecutar en código byte en vez de usar un intérprete aumentando la velocidad
• Lighttpd: Para servir el video
• NetScalar para balanceo de carga y caché de contenidos estáticos

Vamos a intentar centrarnos en el software, ya que hoy en día gracias a la Ley de Moore y el Cloud Computing la horquilla de potencia supera las necesidades de cualquier proyecto. Si os fijais, en Youtube no era necesario un servidor de videostreaming como Wowza, FMS o Red5. Youtube se encarga de estandarizar, si se puede llamar así, todos los videos que le entran a un mismo formato, permitiendo reproducir desde un player flash sin necesidad de cargar codecs.

Curiosidades sobre Youtube

• Cada vídeo está almacenado en un mini-cluster, es decir, siempre es servido por más de un ordenador permitiendo mayor velocidad y tolerancia a fallos.
• Los contenidos más populares se mueven a un CDN, que replica el contenido y está más cerca (en cuanto a saltos de red) del ordenador del usuario.
• Videos con 1-20 visitas diarias, generan efecto long tail con mucho volumen de tráfico pero  no conviene cachearlos, sale caro.
• Gran parte de los problemas venían de las imágenes en miniatura (thumbnails), era muy difícil ser eficientes. Piensa que hay 4 imágenes por cada video, son archivos pequeños por lo que están en unos pocos servidores, al final el sistema se quedaba sin iNodos, tardaban 6-10 horas en cachear un equipo para reiniciarlo y el número de lecturas/escrituras era insuficiente para servirlos ¿cómo lo solucionaron?
• Usan Google Big Table, una base de datos noSQL que hemos mencionado en otros post, permite tener muchos elementos y su acceso es mucho más rápido, así pudieron tener un sistema redundante y con alta tolerancia a fallos.

Podemos definir un patrón común entre Justin y Youtube, el video es un arma de doble filo. Requiere un ancho de banda y una capacidad de procesamiento grande, pero mayor aún debe ser la capacidad de escalar y hacer frente a los cuellos de botella. Es imprescindible mantener una estructura lo más llana posible, con ordenadores de consumo para reducir costes y la importancia del fallo de uno de los equipos, un sistema atomizado es la mejor solución casi siempre que hablamos de tecnología.

Por último elige tus propias guerras, tanto Justin como Youtube han sabido delegar en CDNs y datacenters para centrarse en el core de sus respectivos negocios.

Si tienes curiosidad puedes aprender más en el post original de Highscalability

El crecimiento y la adopción de soluciones de alta definición en el mundo de la videovigilancia se consolida como una apuesta segura para los próximos años. Según un estudio reciente de IMS Research, titulado “The World Market for CCTV and Video Surveillance Equipment – 2010 Edition”, para el 2014 más del 50% de las cámaras IP tendrán calidad megapixel o superior.

Se requiere:

- 3 años de experiencia en PHP.

- Conocimientos sólidos de PHP y Bases de datos.

- Conocimientos en XML, Ajax, CSS, jQuery y Javascript.

- Experiencia con Linux, Servidor Apache y Bases de Datos MySQL.

Se valora:

- Experiencia con frameworks MVC

- Conocimientos sobre Symfony,

- Capacidad para trabajar en equipo.

- Experiencia en proyectos con metodología en desarrollo ágil

Se ofrece:

- Contrato indefinido

- Retribución económica en función de la valía aportada.

- Flexibilidad de horarios, entorno joven y bien situado junto a universidad