echo "c/o/s/a/s/#s/o/b/r/e/#/l/i/n/u/x/,#p/y/t/h/o/n/,#n/o/d/e/./j/s,#a/n/d/r/o/i/d/././.#a/n/d#/a/l/l#/t/h/a/t#j/a/z/z"|sed -e's/\///g;s/#/ /g' cosas sobre linux, python, node.js, android... and all that jazz
Este es un pequeño script en bash, para analizar los mails enviados por determinado usuario a partir del archivo de log del postfix, no es lo optimo pero funciona :D
#!/bin/bash
echo "Buscando mail de: $1"
for i in $(grep sasl_username=$1 /var/log/maillog | awk '{print $6}'| cut -c -12); do grep $i /var/log/maillog| grep -E "from=|to="|awk '{if ($7 ~ "from"){ print "\n" $7 }else if ($7 ~ "to"){print $7}}';done
Explicar como funcionan los closures en javascript no es una tarea de una sola vez, siempre surgen dudas y hay que volverlo a explicar. Por eso les dejo está porción del video de Alex Russell (@slightlylate on Twitter) del google IO 2011, en el que explica de forma simple y muy precisa como funciona está técnica y sobre todo por qué es tan importante manejarla.
Digging about another project that requires sending messages via D-Bus I decided to make this simple app, that shows a notification of my recent tweets (your) timeline , and with this I can be updated about what's going on twitter while you do your daily tasks ...
It was originally madeonly for Linux environments, because in my work I have ubuntu, but then with the help of @dual3nigma decided port to mac and window$ using growl.
The app requires the libnotify library for Linux environments and growl for Mac / Window$, was made with Node.js and the code is available at Github where you will find all the steps to install and use.
Indagando sobre otro proyecto que requiere envio de mensajes a través de D-Bus se me ocurrió hacer esta simple app, que me mustra en un cuadro de notificación los últimos tweets de mi (tu) timeline, y con esto poder estar actualizado de lo que pasa en twitter al mismo tiempo que haces tus tareas diarias...
En un principio fue realizada sólo para entornos linux, ya que en mi trabajo tengo ubuntu, pero luego con la ayuda de @dual3nigma decidí portalo a mac y window$ utilizando growl.
La app require de la librería libnotify en entornos linux y de growl para Mac / Window$, fue realizada con Node.js y el código está disponible en Github en donde encontrará todos los pasos para instalarla y usarla.
Este es el segundo post de la serie sobre node.js (socket.IO y mongoDB), si no lo hicieron lean el primero post #1.
Este capitulo es sobre el manejo de rutas, como ya sabrán cuando creamos nuestro servidor (en nuestro caso usando express) debemos declarar las rutas que manejaremos, y si bien esto a primera vista parece fácil hay algunas cosas a tener en cuenta.
Comencemos con algo simple, establecer la respuesta para la ruta "/"
Con lo anterior establecemos como manejaremos un requerimiento de nuestro index (ej: http://javierviola.blogspot.com) y que para este post en particular responderemos simplemente con el texto handler : /.
Antes de seguir una aclaración, para demostrar el uso de rutas utilice simplemente los métodos res.write y res.end con el fin de imprimir la función que respondió el requerimiento y los parámetros pasados.
Esto nos permitiría responder tanto a un GET de /users como a /users/12 o /users/pedro, y esto es posible porque el primer parámetro de la funci&oacuet;n get express lo utiliza como una expresión regular, por lo cual esta definición puede servir para lista todos los usuarios, algun usuario o los usuarios que matcheen con el valor de :id.
Y esto es posible porque :id define un placeholder lo cual nos permite acceder al valor a través del objeto req.params.
Veamos las diferentes respuestas:
lucaMac:02-Routes pepo$ curl localhost:3000/users
handler: /users/:id?
parametros:
id : undefined
lucaMac:02-Routes pepo$ curl localhost:3000/users/pedro
handler: /users/:id?
parametros:
id : pedro
lucaMac:02-Routes pepo$ curl localhost:3000/users/25
handler: /users/:id?
parametros:
id : 25
También podemos definir varios placeholders simplemente cambiando el primer argumento:
Y como pueden observar, aquí no sólo accedemos a id y action, sino que restringimos el primero a que sea numérico y damos tres opciones para el segundo, gracias a las regex :)
Veamos como funciona:
curl localhost:3000/users/25/edit
handler: /users/:id
parametros:
id : 25
action : edit
lucaMac:02-Routes pepo$ curl localhost:3000/users/25/delete
handler: /users/:id
parametros:
id : 25
action : delete
lucaMac:02-Routes pepo$ curl localhost:3000/users/25/del
Cannot GET /users/25/del
lucaMac:02-Routes pepo$ curl localhost:3000/users/pedro/delete
Cannot GET /users/pedro/delete
Como vemos funciona y si la regex no se cumple 404 no se puede encontrar....
lucaMac:02-Routes pepo$ curl localhost:3000/users/pedro/delete -I
HTTP/1.1 404 Not Found
X-Powered-By: Express
Content-Type: text/plain
Connection: keep-alive
* Ya veremos al final una posibilidad de manejar esto de una forma más pro
Bueno ya manejamos los GETs ahora queremos manejar los POSTs para ello definimos:
app.post('/users',function(req,res){
res.write('handler post: /users/ \n');
res.write('parametros en body: \n');
for(key in req.body){
res.write('\t'+key+' : '+req.body[key]+'\n');
}
res.end();
});
Y en este caso nos valemos del middleware bodyParser que nos permite acceder a los valores pasados a través del objeto req.body.
Una cosa interesante de express es que nos ofrece el middleware methodOverride que nos permite ser más semántico en nustras rutas, ya que no permite que un POST sea transformado en un PUT o y así ser manejado por app.put o app.delete respectivamente...
Para ello veamos la siguiente definición:
/* post */
app.post('/users',function(req,res){
res.write('handler post: /users/ \n');
res.write('parametros en body: \n');
for(key in req.body){
res.write('\t'+key+' : '+req.body[key]+'\n');
}
res.end();
});
/* We can use put to be more semantics, like a RESTful api.
For this be use the middleware methodOverride, this
middleware check for the input _method in the body
(this input could be hidden for don't show to the
end user), and if its present tranform the post in the
_method input value and don't pass this in req.body
*/
app.put('/users',function(req,res){
res.write('handler put: /users/ \n');
res.write('parametros en body: \n');
for(key in req.body){
res.write('\t'+key+' : '+req.body[key]+'\n');
}
res.end();
});
/* delete, as in put we can use methodOverride to be
more semantic
*/
app.delete('/users',function(req,res){
res.write('handler delete: /users/ \n');
res.write('parametros en body: \n');
for(key in req.body){
res.write('\t'+key+' : '+req.body[key]+'\n');
}
res.end();
});
Como vemos definimos la misma ruta para los tres verbos http (POST,PUT,DELETE), y gracias al middleware methodOverride atender cada uno de ellos según el valor del input _method que se pase, y para explicarlo mejor un ejemplo:
Un post común:
lucaMac:02-Routes pepo$ curl -X POST -d "id=32&action=delete" localhost:3000/users/
handler post: /users/
parametros en body:
id : 32
action : delete
Un post, pero que será respondido como put:
lucaMac:02-Routes pepo$ curl -X POST -d "id=32&action=delete&_method=put" localhost:3000/users/
handler put: /users/
parametros en body:
id : 32
action : delete
vean como se pasa el valor de _method para que el middleware sobreescriba el método
Y por último el mismo post, pero respondido como delete
lucaMac:02-Routes pepo$ curl -X POST -d "id=32&action=delete&_method=delete" localhost:3000/users/
handler delete: /users/
parametros en body:
id : 32
action : delete
Y con esto queda explicado el middleware...
Una cosa importante a tener en cuenta es que las rutas se procesan secuencialmente y en la ubicación que fueron declaradas, es por eso que es muy importante hacer una declaración ordenada de nuestras rutas para que cada requerimiento sea atendido por la ruta que queramos y no por otra
Y haciendo uso de esto último, y utilizando un wildcard podemos manejar los errores 404 de una forma simple con esta ruta al final de todo:
app.all('*',function(req,res){
res.write('handler all: *\n');
res.write('ERR, no regex match\n');
res.end();
});
De esta forma atenderemos cualquier ruta (*) y en cualquier verbo http que no haya sido manejada anteriormente, con lo cual es muy útil para servir errores 404
Veamos como funciona:
lucaMac:02-Routes pepo$ curl -X POST -d "id=32&action=delete" localhost:3000/users/dasdsdas
handler all: *
ERR, no regex match
lucaMac:02-Routes pepo$ curl -X GET -d "id=32&action=delete" localhost:3000/usedasd
handler all: *
ERR, no regex match
Espero que haya sido claro en como es el uso de rutas con express y cualquier cosa no duden en contactarme
Les dejo el código utilizado Código en Github
Hasta la próxima (con la explicación de como funcionan los middlewares :) )
This series of posts, are related to the previous post node.js apps with real time which explains how to install the necessary components to develop an application with node.js + socket.IO + MongoDB.
But along the way I thought best to start with some basics, and from them be adding complexity until an application (I have not yet defined, hearing ideas...) which makes use of socket.IO for real-time interactions.
Well, let's start with a very basic introduction to Express frameworks.
This framework is widely used and perfectly combines with socket.IO, is very simple to use and brings many things "out of the box" ready to use.
The first thing we do is create the environment where we will develop this demo, we created the directory for this application and within the structure we create the following subdirectories:
var express = require('express');
var app = module.exports = express.createServer();
In these two lines load the module you need and call the function createServer we return an object with the web server will use to listen to requests and answer them.
Then we go to its configuration, which are the following lines
They first set the directory / views as a repository of templates, for this we use a variable defined globally node.js runtime is __dirname whose value is a string with the absolute path of the directory of your app.
Then we set to "ejs" as our engine for rendering templates, so remember to install the module via npm (npm install ejs).
The final set is to establish that we will not use a layout file for this example, if we wanted we could have a database file for all of our templates or for use only for some pages.
Then we declare the Middlewares we will use the first express.bodyParser () is used for parsing of the post (either json or not) and you return the result parses the variable accessible via req.body , the following is express.methodOverride () that is important to be declared after express.bodyParser () because it performs a check on the variable req.body , this middleware is useful to override the methods of our forms, just an input field with the hidden attribute, like this:
Then we declare the use of app.router which is simply the middleware that contains all the paths defined, and performs route lookup based on the URL of the current request and the HTTP method.
And finally declare the directory from where we provide our static content express.static (__dirname + '/ public') , this allows us to access our resources (in the directory public ) directly referencing it as , note that there is no need to reference the directory public but directly we refer to directories in there
Well, with this we have our first app using node & Express, the code in this first post is on Github Posts
lucaMac:nodeapps pepo$ git clone git@github.com:pepoviola/Socket.IO_rooms.git
Cloning into Socket.IO_rooms...
ERROR: Hi pepoviola, it's GitHub. We're doing an SSH key audit.
Please visit https://github.com/settings/ssh/audit/1767330
to approve this key so we know it's safe.
Fingerprint: 7c:(...):54
fatal: The remote end hung up unexpectedly
Yes, I had read the news that they had exploited a vulnerability that allowed update rails attributes inserting a new SSH key for more detail can read these links [0].
Therefore began an audit GitHub SSH key, for it asks that we enter the link listed above ("Please visit https://github.com/settings/ssh/audit/1767330") to approve or reject our key now ... If you have multiple keys as I uploaded to github, since different machines rub shoulders and this means that you must enter each machine and check if the ssh fingerprint is correct or not. Which brings us to what inspired me to write this post, i dont know if everyone knows how to read your fingerprint to validate the github presented to us, if do not know it I leave here a simple explanation.
The first thing to know is where is our public key, which usually is in the path ~/.ssh/ (/home/[user]/.ssh) with the name id_rsa.pub, when you have found this file must run the following command
lucaMac:nodeapps pepo$ git clone git@github.com:pepoviola/Socket.IO_rooms.git
Cloning into Socket.IO_rooms...
ERROR: Hi pepoviola, it's GitHub. We're doing an SSH key audit.
Please visit https://github.com/settings/ssh/audit/1767330
to approve this key so we know it's safe.
Fingerprint: 7c:(...):54
fatal: The remote end hung up unexpectedly
Así es, había leido de la noticia de que habían explotado una vulnerabilidad de rails que permitía updetear los atributos insertando una nueva key de SSH, para más detalle puede leer estos links [0].
Por lo tanto Github comenzó una auditoria de claves SSH, para ello nos pide que ingresemos al link que figura arriba (" Please visit https://github.com/settings/ssh/audit/1767330 "), para aprobar o rejectar nuestras claves, ahora... Si tu tienen como yo varias claves subidas a github, ya que codeas e diferentes maquinas esto representa que debes ingresar a cada maquina y chequear si el fingerprint de ssh es correcto o no. Lo cual nos trae a lo que me inspiró a escribir este post, que es que no sé si todo el mundo sabe como leer su fingerprint para validarlo con los que nos presenta github, si no lo saben les dejo aquí una simple explicación.
Lo primero que debemos saber es donde se encuentra nuestra llave pública, que por lo general se encuentra en el path ~/.ssh/ (/home/[user]/.ssh) con el nombre id_rsa.pub, una vez localizado este archivo debemos ejecutar el siguiente comando
Esta serie de post, tienen relación con el post anterior real time apps con node.js el cual explica como realizar la instalación de los componentes necesarios para desarrollar una aplicación con node.js + mongoDB + socket.IO.
Pero en el camino me pareció mejor comenzar con algunas cosas básicas, y a partir de ellas ir sumando complejidad hasta lograr una aplicación (que todavía no tengo definida cual sera, se escuchan ideas) que haga uso de socket.IO para las interacciones en tiempo real.
Bueno, vamos a comenzar con una introducción muy básica a frameworks Express.
Este framework es muy utilizado y se combina a la perfección con socket.IO, es muy simple de utilizar y trae muchas cosas "out of the box" lista para utlizar.
Lo primero que vamos a hacer es crear el entorno donde desarrollaremos este demo, para ello creamos el directorio de la aplicación y dentro de el creamos la siguiente estructura de subdirectorios:
Paso a explicar para que utilizares cada directorio:
views : Es el directorio donde alojaremos nuestros templates node_modules : Donde se instalaran los módules que utilizaremos public : Directorio de contenido, aquí alojaremos nuestros css, js, imagenes, etc.
Una vez creados los directorios, abrimos nuestro editor preferido para comenzar a desarrollar nuestra app.
El contenido de este simple ejemplo es:
var express = require('express');
var app = module.exports = express.createServer();
En estas dos líneas cargamos el módulo que necesitamos y llamamos a la función createServer que nos retorna un objeto con el servidor web que utilizaremos para escuchar las peticiones y responderlas.
Luego pasamos a la configuración del mismo, que son las siguientes líneas
En ellas primero establecemos el directorio /views como repositorio de templates, para ello usamos una variable definida globalmente en tiempo de ejecució de node.js que es __dirname cuyo valor es un string con el path absoluto del directorio de nuestra app.
Luego establecemos a "ejs" como nuestro motor para renderizar los templates, para ello recordemos intalar el módulo vía npm (npm install ejs).
El último set es para establecer que no utilizaremos un archivo de layout para este ejemplo, si quiesieramos podríamos tener un archivo de base para todos nuestros templates o también para utilizar sólo para algunas páginas.
Luego declaramos los Middlewares que vamos a utilizar, el primero express.bodyParser() es utilizado para el parseo de los post (sean json o no) y nos devuelve el resultado del parsea accesible vía la variable req.body , el siguiente es express.methodOverride() que es importante que esté declarado después de express.bodyParser() ya que realiza una verificación sobre la variable req.body , este middleware es muy útil para sobreescribir los métodos de nuestros formularios, simplemente con un campo input con el atributo hidden, algo así:
Luego declaramos el uso de app.router que es simplemente el middleware que contiene todas las rutas definidas, y realiza consulta de rutas basándose en la URL de la solicitud actual y el método HTTP.
Y por último declaramos el directorio desde donde proveemos nuestro contenido estático express.static(__dirname + '/public'), esto nos permite acceder a nustros recursos (dentro del directorio public) directamente referenciandolo como <link href="/css/style.css" rel="stylesheet" type="text/css"></link> , noten que no hace falta referenciar el directorio public sino que directamente hacemos referencia a los directorios dentro del mismo.
Bueno y con esto tenemos nuestra primera app utilizando node & Express, el código de este primer post se encuentra en Github Posts
This is a small article about how to use node.js as web server to display the results of a query to a MySQL database engine.
The first thing to do is to check is that we have installed the mysql module to run it the following:
lucaMac:BLOG_POSTs pepo$ node
> var Client = require('mysql').Client
Error: Cannot find module 'mysql'
at Function._resolveFilename (module.js:332:11)
at Function._load (module.js:279:25)
at Module.require (module.js:354:17)
at require (module.js:370:17)
at repl:1:14
at REPLServer.eval (repl.js:80:21)
at repl.js:190:20
at REPLServer.eval (repl.js:87:5)
at Interface. (repl.js:182:12)
at Interface.emit (events.js:67:17)
>
If fails, proceed to install the module via npm:
npm install mysql
The first thing we do is create the object for the query:
var Client = require('mysql').Client,
client = new Client();
client.user = 'user';
client.password = 'password';
client.host='127.0.0.1';
client.port='3306';
client.database='database_name'
client.connect();
And within this we perform the query, and associate to its callback function
client.query(
"select * from table where campo1 > 1 limit 10;",
function select(err, results, fields) {
if (err) {
console.log("Error: " + err.message);
throw err;
}
print data to the console and the web response
console.log("Number of rows: "+results.length);
console.log(results);
for (var i in results){
var result = results[i];
res.write(result.campo1+"\n");
}
res.end();
});
We finished the code, setting up a port for listening
A few days ago I finished a simple application tweetland.com.ar I made in order to learn more about Node.js and MongoDB ... on the road I also came across Socket.IO which is a great library for real time applications.
The first is to prepare the environment. To do this first download node.js (from node.js ), after downloading the installation follows the traditional steps:
./configure
make
make install *
* the last step as root
Once installed, continue with the installation of modules. For this node has npm (which is Node Package Manager) that allows us to install the modules with a single command install npm . Instructions for installing npm are in your home page, also I leave
curl http://npmjs.org/install.sh | sh
At this time we have installed both node.js as its package manager npm. Usually what I usually do is create a directory in my case I call nodeapps as workspace.
Entering the same:
cd "path to nodeapps"
and within it begin to install the modules you require. This is important because when you install the modules npm node_modules create the directory (if not there before), and install the modules in that directory.
This is important because when we do within our code something like:
var sys = require('sys');
node will automatically search the directory sys module within node_modules in the current directory and not finding it will continue with the search recursively upwards, which is always important to remember where you installed the modules that we use.
Before going further make the installation of some modules used, these are express, socket.io, mongoose.
And this is precisely the last module we will use to interact with our database MongoDB, which is an object-oriented database (JSON), high performance and scalable. (in another post I will explain a little more how it works because it is a relatively new and very interesting).
To install you have to download the appropriate version from download , and once discharged, proceed to decompress
pepo@sokol:~/DESARROLLO/POSTS/node_socket_mongo$ tar -xzf mongodb-linux-i686-2.0.2.tgz
Once unpacked and could start the service mongod and start, but I'd rather create the directory structure I will use my base, create two directories for data and logs, the first store the files of the database and the second of logs. I also create the configuration file with which I will start the service, in my case is as follows:
Bind_ip option is set to only listen on localhost requests (since by default it does on all interfaces) and indicate that we will not configure the authentication and verbose.
To start the service simply run:
bin/mongod --config mongod.config *
* Inside the unzipped directory MongoDB
we see something like this:
# mongodb-linux-i686-2.0.2/bin/mongod --config mongod.config
all output going to: ./logs/mongodb.log
Finally to test the service entered as follows (always from the binary directory MongoDB):
pepo@sokol:bin$ ./mongo
MongoDB shell version: 2.0.2
connecting to: test
> show dbs
local (empty)
Well, with this we have our environment set up and configured to start programming applications in node.js with MongoDB, but that will be for the next post....
Hace unos días terminé una simple aplicación tweetland.com.ar que realicé con el objetivo de aprender (existe otro?) más sobre Node.js y mongoDB... en el camino también me topé con Socket.IO que es una gran librería para realizar aplicaciones en tiempo real.
Lo primero es preparar el ambiente, para ello primero descargamos node.js (desde su home page node.js), una vez descargado la instalación sigue los pasos tradicionales:
./configure
make
make install *
* este último como root
Una vez instalado, seguimos con la instalación de módulos. Para ello node cuenta con npm (que es Node Package Manager) que nos permite instalar los módulos con un simple comando npm install . Las instrucciones para instalar npm están en su home page, igualmente se las dejo:
curl http://npmjs.org/install.sh | sh
En este momento ya tenemos instalado tanto node.js como su manejador de paquetes npm. Por lo general lo que suelo hacer es crear un directorio, en mi caso lo llamo nodeapps, como workspace.
Ingreso al mismo:
cd "path to nodeapps"
y dentro de él comienzo a instalar los modulos que requiero. Esto es importante porque al instalar los modulos npm creará el directorio node_modules (siempre y cuando no exista antes), e instalará los modulos en dicho directorio.
Y esto es importante porque cuando dentro de nuestro código hagamos algo como:
var sys = require('sys');
node automáticamente buscará el módulo sys dentro de directorio node_modules en el directorio actual y de no encontrarlo seguira con la busqueda recursiva hacia arriba, por lo cual siempre es importante tener en mente donde se instalán los módulos que vamos a utilizar.
Antes de seguir adelante realicen la instalación de algunos módulos que utilizaran, estos son express, socket.io, mongoose .
Y este último módulo es justamente el que utilizaremos para interactuar con nuestra base de datos mongoDB, que es una base orientada a objetos (JSON), de alta performance y escalable. (en otro post explicaré un poco más como funciona ya que es una tecnología relativamente nueva y muy interesante).
Para realizar la instalación tenemos que descargar la versión que corresponda desde mongoDB download , y una vez descargada la descomprimimos
pepo@sokol:~/DESARROLLO/POSTS/node_socket_mongo$ tar -xzf mongodb-linux-i686-2.0.2.tgz
Una vez descomprimido ya podríamos arrancar el servicio mongod y comenzar, pero antes prefiero crear la estructura de directorios que utilizaré con mi base, para eso creo dos directorios data y logs, el primero guardará los archivos de la base de datos y el segundo los archivos de logs. También creo el archivo de configuración con el que voy a levantar el servicio, en mi caso tiene la siguiente forma:
La opción bind_ip está configurada para que sólo escuche las peticiones sobre el localhost (ya que por defecto lo hace sobre todas las interfaces) e indicamos que no tendremos autenticación y configuramos el verbose.
Para levantar el servicio simplemente ejecutamos:
bin/mongod --config mongod.config *
* Dentro de directorio descomprimido de mongoDB
Y veremos algo como:
# mongodb-linux-i686-2.0.2/bin/mongod --config mongod.config
all output going to: ./logs/mongodb.log
Por último para probar el servicio ingresamos de la siguiente forma (siempre desde el directorio de binarios de mongoDB):
pepo@sokol:bin$ ./mongo
MongoDB shell version: 2.0.2
connecting to: test
> show dbs
local (empty)
Bueno, y con esto ya tenemos nnuestro entorno instalado y configurado para comenzar a programar aplicaciones en con node.js con mongoDB, pero eso quedará para la próxima....
En este tiempo de diversas resoluciones de pantallas es cada vez más importante poder contar con buenas herramientas para probar facilmente como se un sitio en diferentes dispositivos, en este link les dejo 5 muy buenas herramientas que facilitan esa tarea.