juantomas Hacking the planet

14 marzo, 2015

Scalatra para impacientes: Como montar un proxy de Elastic Search en 3 minutos

Un proxy puede ser un buen ejemplo de microservicio para construir con Scalatra. Un proxy es un servicio que normalmente recoge peticiones y las traslada a otro servicio. Si hay respuesta de este servicio se la devuelve al que empezó la llamada.

Habitualmente además se añaden algunas cosas que el servicio original no implementa como pueden ser: validación de usuarios, estadísticas de uso, agregación de información, simplificación de interfaces, tareas de servicio, capa de administración, etc.

En nuestro caso vamos a implementar un proxy contra Elastic Search con Scalatra en menos de 3 minutos ;-P

Eso si con algunos requisitos:

* Deberías tener instalado Scala. Si no lo tienes aquí tienes un mini tutorial de como instalar scala estilo shotgun.

* Si ya tienes instalado Scalatra todavía lo haremos en menos tiempo. Si no este manual de como instalar Scalatra para impacientes   te ayudará a hacerlo en un par de minutos.

Y ahora llega la mejor parte, tenemos dos opciones:

a) hacerlo de cero. Buscar toda la documentación de Scalatra, Interface REST de Elastic Search, etc, etc.

b) Clonar este proyecto de github, configurarlo y aprender como con unas cuantas lineas de Scalatra montamos un proxy de Elastic Search y los configuramos a nuestra medida y necesidades.

Por supuesto vamos a escoger la opción B que nos mete en el partido en 3 minutos.

1) clonar el proyecto de ejemplo de proxy para Elastic Search usando Scalatra:

git clone https://github.com/nfb-onf/nfbsearch-scalatra.git

2) Configurar el URI de conexión a tu Servidor de elastic Search (linea 35)

$ cd NFBSearch-Scalatra
$ vi src/main/scala/ca/nfb/NFBSearchServlet.scala

3) hacer un build del proyecto y lanzarlo.
$ ./sbt
> container:start
> browse

Lo que más me gusta de usar Scalatra es lo sencillo que es implementar una acción:

  get("/search") {                                                     
    contentType = formats("json")                                      
    val q:String = params("q")                                         
    val httpClient = new HttpClient                                    
    val response: Response = httpClient.get(new URL("http://localhost:9200/nfb_films/films/_search?q=" + q))          
    response.body.asString                                             
  }                     

Incluso alguien con poca experiencia con Scala/Scalatra sería capaz de leer y modificar este código.

Es puro código suscinto sin ningún tipo de ceremonia, lo explica muy bien Javier Lafora, nuestro CTO en ASPGems en su post sobre por que usamos ruby y rails en ASPGems como tecnología web y tiene muchos puntos en común con «Por que usamos Scala para hacer Big Data en ASPGems» (este todavía no está escrito!!! 😉 )

«Scala is Love»

Agradecer a los usuarios de la cuenta de github «nfb-onf» que me ha ahorrado un par de horas del plan A con su maravillosa y gratuita contribución a la comunidad. Muchas Gracias!!! os debo unas cervezas!!

3 marzo, 2015

Mañana miércoles día 4 tenemos el IV Meetup de Machine Learning

Filed under: ASPgems,big data,Eventos — Etiquetas: , , , — juantomas @ 4:41 pm

En esta ocasión nos visita Carlos Gil Bellosta y nos hablará sobre:  «Factorización no negativa de matrices» (Una aplicación a los motores de recomendación)»

Os dejo el enlace a la página del meetup machine learning Spain (¿todavía no te has apuntado? a que esperas!!!) y la convocatoria oficial:

Llegamos al IV meetup y en éste podemos celebrar que ya somos 400 en el grupo. Parece que «data science» sigue de moda y nuestro grupo continúa creciendo.

Estamos cerrando los últimos flecos del meetup para la próxima semana. En principio será el día 4 a las 19.00h, aunque estad atentos al grupo por si hay algún cambio. Tendremos a un ponente de lujo que seguro que todos conocéis, Carlos Gil Bellosta*: «Ex-eBay, ex-BBVA, ex-everis, ex-Barclays, exmatemático, ex casi todo. No obstante, estadístico diletante, entusiasta de R y bloguero en los ratos libres de los días de hacer».

Dará una charla sobre «Factorización no negativa de matrices» (Una aplicación a los motores de recomendación). Os recomiendo que no os la perdáis.

Después de la charla haremos networking como siempre, con unas cervezas de por medio. Esperamos que os guste. ¡Nos vemos el miércoles!

Saludos.

2 marzo, 2015

Scalatra para impacientes: como crear tu primer proyecto

Filed under: ASPgems,big data,Hacks,Proyectos,scala — Etiquetas: , , , , — juantomas @ 2:40 pm

En el post anterior os conté como instalar algunos requisitos previos para poder usar scalatra. Ahora vamos a crear un primer proyecto.

Usaremos giter8 para crear la estructura inicial del proyecto. Vamos a utilizar SBT pero también se podría hacer con maven y le guste usar esta herramienta de compilación.

Para ello vamos a ejecutar:

g8 scalatra/scalatra-sbt 

nos hará las siguientes preguntas:

$ g8 scalatra/scalatra-sbt 
organization [com.example]:
package [com.example.app]:
name [My Scalatra Web App]:
servlet_name [MyScalatraServlet]:
scala_version [2.9.2]:
version [0.1.0-SNAPSHOT]:

Donde:

organization:  nombre del dominio del que publica al reves, si no tienes la gente acostumbra a usar: com.github.username

package: A Paquete al que se asigna todo el código que se va a generar. La Scala Style Guide  recomienda que tu organización tenga todo su código bajo mismo namespace.

name:  El nombre de tu proyecto. giter8 creará un directorio con este nombre y dentro estará toda la estructura.

servlet_name: El nombre de la clase Servlet podría ser BlogServlet o Blog.

scala_version: Que versión de Scala vas a utilizar.

version: La versión de tu proyecto.

Ahora es el momento de construir tu primer proyecto:

$ cd 
$ chmod u+x sbt
$ ./sbt

sbt se encargará de bajarse todo lo que necesite tu máquina para que funcione scalatra y sus dependencias. La primera vez es posible que tarde unos minutos.

Una vez generado el proyecto y para probar que funciona:

$ ./sbt
> container:start

Ahora puedes probarlo en este enlace http://localhost:8080

Los tutoriales de Scalatra son muy buenos. Te recomiendo que les des un vistazo. Tienen ejemplos de cada caso de uso: como subir ficheros, JSON, Akka, etc.

El siguiente post de esta serie será montar un proxy de Elastic Search usando Scalatra.

Bonus de Post:

Si inicializas un proyecto de Scalatra con estas opciones en una ventana aparte:

$ ./sbt
> container:start
> ~ ;copy-resources;aux-compile

Cada vez que modifiques el código, se compilará automáticamente y recargará la nueva versión si accedes a la url 😉

 

Powered by WordPress