Generating files to Eclipse

Based on the instructions of how to set up Pig into Eclipse environment [here] is necessary to execute through terminal:

ant clean eclipse-files

But, due to clean parameter, some folders are deleted and the generation is not complete. After some time trying to generate those files, this is the right instruction:

ant clean
ant eclipse-files
ant

And automatically will be generated some files and java files necessary in order to complete all resources to link

Enhanced by Zemanta
Publicado en Hadoop, Pig, Varios | Etiquetado , , | Deja un comentario

What is Pig?

Just to make more clear, I added the description of Pig available:

Pig provides an engine for executing data flows in parallel on Hadoop. It includes a language, Pig Latin, for expressing these data flows. Pig Latin includes operators for many of the traditional data operations (join, sort, filter, etc.) as well as the ability for users to develop their own functions for reading, processing, and writing data.

Programming Pig, by Alan Gates, published by O’Reilly

On this way, more non-programming related users can take advantages of Pig abilities, because is not oriented to data, instead is oriented to processing.

Enhanced by Zemanta
Publicado en Hadoop, Pig, Varios | Etiquetado , , , , | Deja un comentario

Hadoop – Pig (Intro)

 

Apache Hadoop Logo

Hadoop

Well, after many years of producing a lot of information everywhere, it is necessary to create some sort of processing massive data for customers. But that’s not a easy task, actually it depends on feasible resources to use in a short time (time is precious, time implies money).

The most common storage and processing tools are the RDBMS, been honest you need some special abilities in order to translate some user requirements into SQL statements! that another story and another post.

But, by the time data sets has grown exponentially and only few RDBMS can reach same processing level requirements, but there some problems one of them: simplicity and storage (again space = speed * time, time is money, so space is costly!)

Fortunately, there are some inexpensive alternatives, one of them provided by Apache Software Foundation, called Apache Hadoop.
Hadoop is an open-source project started by Doug Cutting, based on some papers published by Google, on which were described which kind of methodology was used to deal with storing and processing all their big amount of data.

After Hadoop has been consolidated on open source communities, was necessary to create some upper layer tools, such Apache Pig, that provides a higher level of abstraction for data users, without writing long data-processing applications in low-level (Java).

 

 

 

 

Enhanced by Zemanta
Publicado en Hadoop, Varios | Etiquetado , , , , | Deja un comentario

Japan Fest por las Fiestas de Guayaquil!

image001La idea de un festival para mostrar la cultura Japonesa en nuestra ciudad, nació de la Gran Fiesta Japonesa que se realizó en Quito el año pasado para celebrar el nonagésimo aniversario de amistad entre Ecuador y Japón.

Miembros de la Asociación de ex participantes del Barco para Jóvenes del Mundo-Ecuador (SWYAA-Ecuador) residentes en Guayaquil, tomaron la iniciativa de organizar este evento. Es la primera vez que se exponen varias áreas de la cultura japonesa en Guayaquil.

También participan una decena de Voluntarios Técnicos Japoneses que pertenecen a la Agencia Internacional de Cooperación de Japón (JICA) y que viajan desde distintas ciudades del Ecuador para colaborar en la difusión de su cultura durante el festival. Cabe destacar la cooperación de un grupo de voluntarios locales que han sido el motor en la preparación del JAPAN FEST. Tendremos exhibiciones de Kendo, Karate, Jiu Jitsu, origami, kimonos, caligrafía japonesa, anime, manga y un bazar benéfico para las obras de asistencia social de nuestra agrupación.
La Embajada del Japón en Quito, el Consulado General de Japón en Guayaquil y la asociación de ex participantes del barco para los Jóvenes del Mundo invitan al público en general a asistir a este festival preparado en honor a las fiestas de la Fundación de Guayaquil y para celebrar el vigésimo aniversario del Programa Barco para los Jóvenes del Mundo.

Lugar: Outlet del terminal Terrestre, Nivel 2

Días: Sábado 25 y Domingo 26 de Julio, 2009

Hora: 10am a 5pm,

ENTRADA LIBRE

Publicado en Varios | Etiquetado , , | Deja un comentario

Manifiesto para «programación ágil»

Algunas veces, programar es una actividad (para algunos extraña, para otros un reto) que requiere cierto grado de agilidad, pues, no siempre se cuenta con el tiempo suficiente para preparar productos efectivos en corto tiempo.

Para esto, la comunidad … en comunidad … decide tener un manifiesto para programación ágil, que permite el desarrollo colaborativo, que algunas compañías como Apache Software Foundation la han hecho propia implícitamente.

El manifiesto:

  • Los individuos y las interacciones sobre los procesos y herramientas. Al fin al cabo, siempre hay que desarrollar para un sector con una necesidad.
  • Trabajar en el software sobre documentación comprensiva. Para muchas personas, podría resultar peligroso; pero, habría que considerar que si el producto resulta explicarse por sí mismo no hay necesidad de documentar in-extenso.
  • Colaboración sobre contrato. Los contratos atan, la colaboración en comunidad libera.
  • «Responder a los cambios» sobre «Seguir un plan». La flexibilidad resulta una herramienta de cambio constante y necesario para cualquier plan … cualquiera.

http://www.agilemanifesto.org/

Publicado en Varios | Etiquetado , , , , | Deja un comentario