Las ponencias han sido muy interesantes y amenas, @sandopen ha sido un magnifico anfitrión, he tenido la oportunidad de conocer en persona a @yoriento,  de compartir la jornada con mis ex-colegas de Telefónica, de charlar con los amigos de la red y con bastantes ponentes. Hemos pasado un poco de calor pero los abanicos de movistar nos han ayudado a aliviarlo.

He recogido los datos de Twitter de la jornada (me faltan las dos primeras horas) con este dataset he realizado la siguiente  infografía.

• ¿Cuál es la cantidad de tweets?
• ¿Qué se puede obtener con los APIs de Twitter?
• ¿Cuáles son las limitaciones del API de Twitter?
• ¿Qué persistencia tienen los tweets?

Lo que he averiguado lo he  representarlo en una infografía para los muy ocupados y en modo textual para los que su curiosidad sea aún mayor.

¿Cuál es la cantidad de tweets?

El número de usuarios de Twitter  y por tanto el de tweets generados tiene un crecimiento espectacular.  El despegue comenzó en el 2009 y en un año se ha multiplicado por 25.  Con este tráfico de entrada cualquier evento global es una prueba de fuego para Twitter, como ha sido el caso de la Wold Cup que nos ha traído de nuevo a la ballena azul.

Durante la segunda semana de la World Cup se ha alcanzado el record de  3.283 TPS (Tweets Per Second) y la media actual es de 750 TPS.  Esto hace casi inalcanzable obtener tal cantidad  de información (y almacenarla) por lo que habrá que pensar en  soluciones creativas para poder obtener los datos que se deseen.

¿Qué se puede obtener con los APIs de Twitter?

Twitter ofrece tres APIs:   Streaming API,  REST API y  Search API aplicables a necesidades diferentes.

El Streaming API proporciona un subset de tweets en casi tiempo real. Se establece una conexión permanente por usuario con los servidores de Twitter y mediante una petición http  se recibe un flujo continúo de tweets en formato json.  Se puede obtener una muestra aleatoria (statuses/sample), un filtrado (statuses/filter) por palabras claves o por usuarios. Sin embargo, los métodos más interesantes cómo obtener todo el caudal de tweets (statuses/firehose) o sólo los tweets que tienen enlaces (statuses/links) o los tweets con retweets (statuses/retweet) “Is not a generally available resource” :-(

El Search API suministra los tweets con una profundidad en el tiempo de 7 días que se ajustan a la query solicitada. Es posible filtrar por, cliente utilizado, lenguaje y localización. No requiere autenticación y los tweets se obtienen en formato json o  atom.

El REST API ofrece a los desarrolladores el acceso al core de los datos de Twitter. Todas las operaciones que se pueden hacer vía web son posibles realizarlas desde el API.  Dependiendo de la operación requiere o no autenticación, con el mismo criterio que en el acceso web. Sopota los formatos: xml, json, rss, atom.

El Search API ofrece una información más limitada del tweet,  en concreto sobre los datos del autor en el que solo indica el Id,  el screen_name y la url de su avatar. Los otros dos APIs si ofrecen el perfil completo del autor en el momento de la escritura del tweet.

¿Cuáles son las limitaciones de  los APIs de Twitter?

En el Streaming API el flujo es continuo y la velocidad de recepción de tweets tendrá fluctuaciones que dependerán del ancho de banda de los dos extremos de la conexión y la sobrecarga de los servidores de Twitter. Actualmente estoy haciendo medidas en dos servidores y publicaré los resultados tan pronto como estén disponibles.

En el Search API y en el REST API existe una limitación de 150 peticiones a la hora por usuario o por IP si la llamada no está autenticada.
Es importante saber cómo realizar la  paginación de las  peticiones de una manera óptima para sacarle el  máximo partido.

(*) hemos obtenido los seguidores de Barack Obama que sobrepasa los 4,5 millones de followers

¿Qué persistencia tienen los tweets?

Aunque todos los tweets residan en las BB.DD. de Twitter hay una limitación temporal para obtenerlos.

-



paco229 en su momento @congosto dijo que iba a publicar los scripts que usó para hacerlo #inp
8:01 AM May 19th via TweetChat

Le he sacado un poco de brillo al script y lo he documentado para que lo pueda usar quién esté interesado en sacar información de Twitter.

El script asume que el formato de entrada es el modo texto de la  herramienta tweetbackup. Está escrito en python y permite extraer la siguiente información de un conjunto de tweets:

• los autores y cuantos tweets han escrito
• las palabras y el número de veces que se han utilizado (es posible filtrar las palabras irrelevantes)
• los hastagh y el número de repeticiones
• el número de tweets por cada día
• el número de tweets por hora
• las urls y el número de repeticiones, el ranking de los sitios web mencionados y de los servicios acortadores de urls.

Descargar tweets_info.py

He aprovechado para cambiar el diseño de barriblog-wiki para publicar tambien allí las herramientas que vaya realizando. Espero que sean de utilidad

(Al pulsar en la imagen se mostrará en su tamaño real)

Datos de interés

• Usuarios: se han recogido 3093 tweets en los que se han detectado  9001,24 tweets/usuario. el 20% de los usuarios han escrito el 71,35% de los tweets. Los 10 usuarios más activos han sido: @futureweb2010 (125), @LaTerribleLiz (119), @BoraZ ( 96), @fabien_gandon ( 88), @smalljones (67),  @tommyh @olgag (57),  @apisanty (47), @karenchurch.

• Urls: se han encontrado  1.112 urls, de las cuales 549 eran distintas, con un índice de repetición de 2,03. Se han detectado 845 urls acortadas, lo que supone un 76%. El servicio cortador más extendido es bit.ly con un 65,9%.
• Tendencias: Se detecta un interés creciente en Twitter. En la conferencia WWW2009 se utilizó  como herramienta de comunicación y ahora se estudia como fenómeno emergente. Se encuentra presente en el top ten de las urls con más RTs y clicks.
• RT vs. Clicks: No se ha encontrado una correlación entre el número de retransmisiones de los tweets y el numero de clicks alcanzados, como se puede ver en la siguiente figura:

Metodología

• Se han utilizado herramientas propia para extraer la información (programadas en Python)
• Se ha utilizado el API de bit.ly con la librería Python-bitly de  yoav.aviram para obtener los clicks y las urls reales y el número de clicks
• Las visualizaciones se han realizado con many eyes

DataSet:

• www2010

Post relacionados:

• WWW2009
• WWW2009: 20 y 21 de abril
• WWW2009: 22 y 23 de abril

Correlación entre el nº de clicks y los RTs entre los tweets que se han retransmitido cinco o más veces.

Para acceder a la visualización interactiva, pulsar en la imagen

Una de las preguntas que me hacía en el análisis del hashtag #manifiesto era si existía alguna correlación entre la retransmisión de una url y el número de clicks que recibía. He podido comprobarlo analizando los clicks de la urls acordadas por el servicio bit.ly usando el API de bit.ly

En los datos recogidos hay valores muy extremos, siendo 0,007 el índice de correlación lineal de la muestra total. Aparecen urls con miles de clicks que no se han retransmitido, mientras que otras muy retransmitidas no han llegado a cien clicks. Sin embargo, si se calcula la  correlación segregando la muestra en función del número de RTs el índice aumenta hasta el 0,41 para las urls que han tenido 5 o más RTs (caso que ilustra la cabecera del post). La siguiente imagen muestra el índice de correlación entre los clicks y los RTs en función de la muestra segregada por nº de RTs.

No se puede concluir  nada concreto de estos datos y es preciso medir otros valores como el número de seguidores para intentar aproximarse  a una medida de la influencia del emisor del tweet. Para calcularla aún debo esperar un poco.

Antecedentes

Cuando analicé las urls del los tweets del hashtag #manifiesto, descubrí  que las urls acortadas son una barrera para estudiar los enlaces que aparecen en los tweets. De una muestra de 20.236 tweets que contenían links,  el 82% estaban acortados. El coste en tiempo que supone expandir la url y la tasa de error dificultan obtener el enlace real. Para alargar una url se precisa un acceso http por lo que se dispara el tiempo de tratamiento, pasando a hablar de unidades de segundo por enlace.

Comentando con mi grupo de investigación esta limitación estuvimos buscando alternativas para solventar el problema, como paralelizar los accesos http o intentar interactuar con los servicios acortadores. Siendo bit.ly con un 55,76%. el servicio más extendido parecía el candidato ideal para estudiar qué posibilidades ofrecía. @nordez, rápidamente vio el API de bit.ly y me pasó el enlace.

Aunque mi intención era intentar mejorar el tiempo de expansión de los enlaces utilizando el API por su posibilidad de enviar peticiones de un grupo de urls, me llamó la atención una opción que permite obtener el número de clicks de un link dado y me distrajo del objetivo. La información que proporciona el API de los clicks está muy simplificada, tan solo se obtienen los clicks por usuario y los globales, mucho menos de los que suministra la interfaz web cuando a la url corta de bit.ly se le añade un + al final, pero supongo que se estarán reservando para opciones premium.

Metodología

He probado el API de bit.ly con la librería Python-bitly de  yoav.aviram para analizar los clicks de las urls acortadas con bit.ly. Procesar 4.331 urls ha llevado 78m 50.546s. aproximadamente 1,09 segundos por url y se han producido 37 errores (0,85%).  De los datos obtenidos se han eliminado las urls que se han comprimido anónimamente porque no aparece su número de clicks, quedando en 3.636 urls. Todos lo datos obtenidos están disponibles en este dataset.

Enlaces relacionados:

• Blogs vs. Prensa en el hashtag #manifiesto
• Analizando el hashtag #manifiesto
• Resultados del estudio del hashtag #manifiesto (versión wiki)

Nunca se sabe la dificultad que entraña hacer algo hasta que no se pone una a ello. Pensé que sería trivial extraer las urls de los tweets del hashtag #manifiesto y me equivoqué de lado a lado. La mayor barrera han sido las urls acortadas que es necesario expandirlas para poder analizarlas. Este pequeño detalle implica acceder a la web (consumo masivo de tiempo) y bregar con los errores de las urls (los errores humanos y de red). El script para extraer esta información ha tardado en ejecutarse más de 12 horas y debido a los errores he tenido que lanzarlo cuatro veces. Pero la paciente labor del investigador siempre tiene su recompensa y a continuación presento el análisis de las 20.236 urls que he obtenido.

Mapa de sitios más referenciados en los tweets

(Para acceder a  la visualización interactiva pulsar en la imagen)

La imagen anterior ilustra el reparto de menciones a sitios web estructurados por blogs, prensa, redes sociales, TV, video, Organizaciones,wikis, etc..  Se ha utilizado una visualización treemap que ilustra muy bien la parcelación de los sitios webs al ser el tamaño de las “parcelas“  directamente proporcional al número de referencias. Como se puede observar, hay dos grandes “fincas”: las de los blogs y la de la prensa, el resto de medios se aglutina en una tercer territorio misceláneo. El terreno de los blogs es ligeramente más extenso y está bastante uniformemente distribuido, destacando Mangas Verdes, eDans y Alt140. En el territorio de la prensa dominan cuatro latifundios El Pais, Público,  ABC, 20 Minutos y El Mundo. Cabe destacar que ha circulado más información textual que multimedia.

La siguiente imagen muestra el  topten de sitios mencionados En él se encuentran presentes la prensa, las redes sociales y los  blogs.

(Para acceder a  la visualización interactiva pulsar en la imagen)

Topten de tweets mencionados

Analizando el detalle de las 6.199 urls diferentes encontradas se observa que los mensajes que más se han difundido han sido los de los blogs, dos grupos de facebook, un vídeo de youtube, un wiki de una organización y un post de una cadena de televisión. Las noticias de los grandes medios de prensa se han difundido menos.

Como curiosidad la url más mencionada http://es.twirus.com/ con 321 menciones es un servicio que twitea los hashtags más calientes y por tanto se ha excluido del ranking.

Acortadores de urls

Una característica de los tweets es el uso de acortadores de urls para optimizar el espacio de los tweets. El 82% de las urls estaban acortadas. Me he sorprendido al identificar 103 acortadores diferentes. Se observa que además de los servicios web, algunos blogs utilizan su propio sistema de reducción del tamaño de sus urls.

bit.ly destaca sobre todos los sistemas de acortar url con un 55.76% seguido de tinyurl.com con una cuota del 16.17%

(Para acceder a  la visualización interactiva pulsar en la imagen. )

Conclusiones

Metodología usada

• Se ha utilizado el lenguaje python para extraer la información
• Se extrajeron 21.905 urls con una tasa de fallo por error de acceso al descomprimir las urls acortadas del 7,6%. El proceso de extracción duró más de 12 horas
  
• Se procesaron automáticamente 20.236 urls para obtener los sitios más mencionados, las urls más referenciadas y los  distintos acortadores de url.  Se ha realizado una revisión manual de las urls acortadas porque dieron algunos falsos positivos

El data set

• Los datos obtenidos y procesados se encuentran en esta hoja de cálculo

Enlaces relacionados:

• Blogs vs. Prensa en el hashtag #manifiesto
• Analizando el hashtag #manifiesto
• Resultados del estudio del hashtag #manifiesto (versión wiki)

El 2 de diciembre de 2009 pude observar en twitter el revuelo suscitado por la Ley de Economía Sostenible que contenía un caramelo envenenado para la cultura libre. Los tweets se fueron agrupando en torno al hashtag #manifiesto y en ese momento pensé en monitorizar esta información para analizarlo pasado unos meses. No me engañó la intuición.

El pasado 1 de abril, aprovechando las vacaciones y que tenía que practicar Python me puse a extraer alguna información relevante de los 37.131 tweets que tenía en ese momento. A falta de de tener a punto la herramienta que está haciendo un alumno en su PFC, usé el servicio tweet backup. No fue posible exportar los datos en formato rss debido a un error del servicio, posiblemente por el tamaño del fichero y lo descargué en formato html.

Me quedaba bastante trabajo por hacer pero fui sacando algunas píldoras de información por Twitter y contactando con los más destacados twitadores del hashtag #manifiesto: @edyvidal, @paco229 y @casteleiro. Tengo que agradecerles sus ideas y su ayuda a la difusión de los tweets.

Hoy, la Asociación de Internautas, el Portal TIC, el ABC y 20 minutos se han hecho eco de una de las visualizaciones que publique en Many Eyes y divulgué vía twitter. Como ha quedado la información un poco dispersa la voy a ir agrupándola en el blog como paso previo a la publicación en wiki de los experimentos

Autores

Se han detectado 6.449 autores diferentes, que siguen la ley de Pareto: el 20% de los autores han escrito el 78,35% de los tweets.

Gracias a la idea que me dio @paco229 visualicé en Many Eyes la cantidad de tweets publicados por los usuarios. El data set no es completo porque los 6.449 eran muchos para visualizar y solo subí a 298 autores que habían publicado más de 20 twets. El data set completo se puede obtener aquí.

Conversación:

Se extrajeron las palabras de los tweets eliminando las que eran irrelevantes como artículos y preposiciones.  Se obtuvieron dos versiones que se visualizaron con Wordle

	Versión con RT: no se filtró el RT para que se pudiera observar la proporción entre la retransmisión de mensajes y mensajes originales. Como se puede apreciar la propagación ha sido muy intensa. Pulsar en la imagen para verla en su tamaño real
	Versión sin RT: filtrando los RT para que se pudiera ver la proporción de las palabras de la conversación más usadas. Pulsar en la imagen para verla en su tamaño real.

datset hashtag

El tiempo

La frecuencia de tweets ha ido variando y se ha incrementado en en momentos claves como: 8-1-2010 primera reunión de Red Sostenible y 19-3-2010 se aprueba llevar la Ley al congreso sin cambios

Este es su timeline

Respecto a las horas de publicación, la hora punta de es las 12:00 a.m.

dataset de los datos de tiempo



Hace un par de meses encontré un interesante post titulado Building a Visual Resume y me pareció tan buena idea que lo “tuiteé“. A @cristaljar también le pareció útil y nos intercambiamos algunos tweets.

Entre otras cosas @cristaljar me comentó su dudas de poder hacer un C.V. visual bueno. Esto me dio que pensar y busqué la manera de poder generar este tipo de CV mediante una herramienta que si bien su resultado no sería tan brillante como los que mostraba el post, tendría la eficacia visual buscada.

Este es el resultado de mi C.V. con dos vistas:

Enfatizando las instituciones en las que he trabajado

Resaltando mi carrera profesional

Como lo he hecho

Preparar datos de origen: Tabla con las siguientes columnas: Empresa, Evento-Fin,  Evento_ini, Puesto,    Proyectos,  Color. El formato es texto separado por tabulaciones. Estos son los ficheros para la  vista de empresa y para la vista de carrera.

Transformar datos a formato dot: Se aplica un filtro awk al fichero de texto separado por tabulaciones y se genera un fichero en formato dot invocando a los scripts awk para la  vista de empresa o  para la vista de carrera de esta manera.

Generar el gráfico: Se procesa el fichero dot con el programa Graphviz abriendo el fichero en formato dot para la vista de empresa o  para la vista de carrera

Post relacionados

30 Artistic and Creative Résumés

Con este post se finaliza el estudio de propagación de la campaña de TijerasNo. En este caso se visualiza la tercera cuestión del experimento: ¿Influyó Twitter en la propagación?

.

Propagación de la campaña TijerasNO en Twitter y blogs from M. Luz Congosto on Vimeo.

Se ha escogido una visualización con un layout circular realizada con la herramienta SoNIA. El código de color es:

• Azul twitter: para los bloggers que SI tienen usuario en Twitter
• Negro: para los que NO tienen usuario Twitter

El tamaño de los nodos es directamente proporcional al número de enlaces entrantes al blog, por tanto los de mayor tamaño son los hubs.

Como se observa en la visualización en las primeras horas del inicio de la campaña hay un conjunto de blogs que tiene dos características: son hubs y tienen usuario Twitter. El resto de la campaña se propagó por blogs que en su mayoría no tienen usuario Twitter.

Llama la atención el escaso número de bloggers partidarios de la ciencia que están en el twitterverse, lo que induce a pensar que  twitter no está tan extendido como parece entre los bloggers.

Conclusión

Twitter influyó al propagar la campaña  rápidamente a entre blogs que tienen  bastante influencia y que  actuaron de detonante para extender  la campaña en la blogoesfera que se comportó como una lenta mecha que dio lugar a la publicación de más de mil posts el día 7 de octubre y cuya repercusión saltó a otros medios de comunicación.

Twitter y los blogs son dos medios diferentes que se complementan y se necesitan para la propagación de campañas.

Datos de entrada a la herramienta:

• SoNIA:  fichero barrio-link-twitter.son en formato .son.

Experimento completo en BarriBlog Wiki

En este post visualiza la segunda cuestión del experimento: ¿Cómo fue la propagación? Para ello he tenido que recurrir a herramientas que permitan cierta interactividad y no he encontrado ninguna que me haya convencido al 100%, por lo que muestro dos visualizaciones en distintas herramientas. Se han utilizado SoNIA y Pajek, ambas permiten visualizaciones teniendo en cuenta la evolución en el tiempo.

Visualización con SoNIA

Layout circular con los enlaces invisibles para resaltar los nombres de los Hubs

.

Propagación de la campaña TijerasNO en los blogs. Layout circular from M. Luz Congosto on Vimeo.

.

Visualización con Pajek

Layout Fruchterman-Reingold ajustado manualmente.

.
.

Propagación blogs de TijerasNO. Layout Fruchterman-Reingold from M. Luz Congosto on Vimeo.

.

El código de color es el mismo que se utilizó en la visualización del post anterior:
• Verde los adheridos antes del día D (7 de octubre)
• Rojo los adheridos el día D,
• Azul los adheridos después del día D

El tamaño de los nodos es directamente proporcional al número de enlaces entrantes, por tanto los de mayor tamaño son los hubs.

Como se observa en ambas visualizaciones, en la propagación de los tres primeros días, del 2 al 5 de octubre, participan la mayoría de los Hubs, durante los dos días siguientes ningún Hub se hace eco. El día D, el 7 de octubre, un Hub y bastante blogs poco conectados se apuntan a la campaña, posiblemente debido a la repercusión del evento en medios externos a la blogosfera. Después de la campaña la propagación se apaga lentamente aunque el día  9 de octubre aparece un Hub tardío.

Datos de entrada a las herramientas:

• SoNIA:  fichero barrio-link.son en formato .son.
• Pajek: fichero barrio-link.net en formato .net.

La campaña de “Tijeras No”  fue una reacción contra los recortes de I+D en la que afloraron el barrio de blogs vinculados a la Ciencia. La movilización a favor de la Ciencia y la rápida propagación de la campaña despertó mi curiosidad asaltándome una serie de preguntas que han sido la motivación que me ha llevado a recoger los datos de los participantes en la campaña para analizarlos.

Con este experimento se intentará responder a las preguntas:

1. ¿Qué relación existe entre los blogs que han participado en la campaña de la campaña?
2. ¿Cómo fue la propagación?
3. ¿Influyó Twitter en la propagación?

¿Qué relación existe entre los blogs que han participado en la campaña de la campaña?

Capture your screen in seconds

En el siguiente vídeo contiene una animación de la red que forman los blogs que no amaban los recortes en la ciencia. El código de color es:

• Verde los adheridos antes del día D (7 de octubre)
• Rojo los adheridos el día D,
• Azul los adheridos después del día D

El tamaño de los nodos es directamente proporcional al número de enlaces entrantes, por tanto los de mayor tamaño son los hubs.

La red tiene 1012 nodos y un núcleo pequeño bien conectado (36%) y una extensa periferia sin conectar (64%). El número de enlaces entrantes de cada blog desde los blogs que participaron en la campaña sigue, una power law, como se puede ver en esta visualización que se ha generado en manyeyes. El 20% de los blogs tiene más del 80% de los enlaces.

En el grafo destacan como hubs los siguientes blogs:

aldea-irreductible.blogspot.com (65),  escolar.net (45),  paleofreak.blogalia.com (37), cienciakanija.com (35), fogonazos.blogspot.com (32), eumafeag.blogspot.com (28),  fisicacf.blogspot.com (27), malaciencia.info (21),  danielmarin.blogspot.com (17). biogeocarlos.blogspot.com (17),

Metodología:

• Data set: se obtuvo de los comentarios del post de la convocatoria de La aldea irreductible. Consta de 1012 urls de los blogs adheridos a la campaña con su timestamp.
  Estos datos se han transformado con la herramienta lestat para calcular los enlaces entre los blogs. Este es el dataset en formato textual separado por tabulaciones.
• Recursos gráficos: se usa la visualización de un grafo en el que los nodos son los blogs y sus enlaces los arcos. Se realizarán distintos layauts según la necesidad de análisis y se establece una simbología basada en:

• El color: se utiliza el color para clasificar los distintos nodos. Por ejemplo se aplica el color para distinguir con que celeridad se han apuntado los blogs a la campaña o qué blogs tienen usuario Twitter y cuales no.
• Tamaño: se aplican distintos tamaños a los nodos según su importancia dentro del grafo. Uno de los criterios de importancia es el número de enlaces entrantes que tiene cada blog, lo que permite identificar visualmente cuales son los hubs de esta red.

• Herramientas: se utilizan Pajek, SoNIA y Gephi.

En este caso se ha usado la herramienta java Gephi, que es muy adecuada por sus features para visualizar redes de cierto tamaño. El formato de entrada a la herramienta es gexf que incluye el tiempo como atributo para poder realizar visualizaciones dinámicas, aunque aún no han liberado esa funcionalidad.  ¡¡¡¡Estoy expectante de que lo hagan!!!!

Para los más curiosos dejo los datos de entrada para Gephi para que puedan ver con sus propios ojos cómo funciona la herramienta:

Se han generado dos visualizaciones

• Genérico: con sólo los nombres de los hubs para facilitar una visualización en pequeño tamaño. Fichero con los datos gexf y proyecto para cargar en gephi
• Detallado: con los nombres de todos los blogs para poder navegar el grafo haciendo zoom y viendo todos los detalles de los nodos. Fichero con los datos gexf y proyecto para cargar en gephi

El zoom en Gephi se controla con la rueda del ratón.

Experimento completo en BarriBlog Wiki

El 10 de noviembre Twitter me activó la nueva función Re-Tweet (RT) que está probando con algunos usuarios. Tengo por costumbre hacer RT de los tweets que considero interesantes así que no tardé mucho en probarlo.

La verdad es que me defraudó la implementación de RT ya que no sigue el mismo criterio con el que se esta usando actualmente y se desvirtúa su función

El RT embebido en el texto del tweet tiene las siguientes características:

• Es abierto: aparece en la cadena de RTs todos los que han participado tengan o no conexión entre ellos.
• Es trazable: se puede ver quienes forman parte de la cadena de propagación.
• Es sociable: es una vía para conocer a nuevos Twitteres a los que aún no seguimos o que los que han participado en la cadena del RT te conozcan.
• No es filtrable: al ser un tweet normal no se filtra en en las listas.

El RT que está actualmente en versión beta:

• No es abierto: solo se distribuye a los followers y se presenta como un tweet que tú aconsejas leer.
• No es trazable: no aparece en la cadena de RTs todos los que han participado, sólo el autor original del tweet.
• No es sociable: se reduce el número de twetteres que podemos conocer por los RTs.
• Es filtrable: al ser un tweet especial se filtra de las listas como se hace con los @replay.

Y como bien dice @LeoBorj, el RT de twitter cuece pero no enriquece : no te deja comentar la jugada

El mayor problema del RT en el texto del tweet era el límite de los 140 caracteres. El RT del Twitter lo soluciona pero con un coste social muy alto.

Al final, cada uno podrá decidir si utilizar el RT de Twitter o el RT embebido en el texto. Los usuarios tienen la palabra porque ellos mandan

Actualización de 14-11-2009: Twitter considera que el RT puede ser spam e implementa un botón para filtar RT de otros twitteres.

Me ha sorprendido esta nueva funcionalidad de Twitter que posibilita la creación de listas tanto públicas como privadas. Las listas vienen a suplir la precariedad del hashtag para seguir temas de interés pero además abren un abanico de nuevas posibilidades como la de proporcionar una imagen más precisa del usuario. Muchos habrán observado que existen usuarios que tienen miles de followers/followings con apenas dos tweets. Yo me pregunto ¿cómo es esto posible? Probablemente sean spam y ahora con las listas tendrán que mejorar sus programas para simular ser usuarios reales.

Creo que esta nueva feature puede cambiar a corto plazo la forma de escuchar las conversaciones en Twitter. En una primera impresión estas son las facilidades que veo:

1. Organizarán el barullo de las conversaciones cuando se escucha a demasiados usuarios.
2. Facilitarán la segmentación de las conversaciones por grupos de interés.
3. Permitirán conocer a usuarios con similares intereses.
4. Se autorregulará la calidad de las listas: las listas mejores serán las más seguidas.
5. Se detectarán a los “headhunter” que saben hacer una buena selección por tema.
6. Se descubrirán a los “gurús” que están en todas las listas de un tema.
7. Se identificará el “focus” de cada usuario.
8. Se podrán detectar los Hubs, Authorities y Bridges más fácilmente.

Pero tantas ventajas siempre tienen un efecto colateral: se me ha quedado obsoleta la especificación de requisitos del PFC (Proyecto fin de carrera) sobre Twitter.

Qué se habla sobre las listas Twitter:

• Listas en Twitter: relevancia, utilidad y ego
• Directorio de listas Listorious
• En ocasiones veo listas en Twitter
• Ventajas y desventajas de las listas en Twitter
• Listas de Twitter ¿quién soy yo?
• Dime en qué listas estás y te diré quién dicen que eres
• Listas de Twitter ¿Qué son y Cómo Funcionan?
• El revuelo de las listas en twitter, la reputación digital y aquello del ego
• Las listas de Twitter, ¿competencia para los lectores de RSS?
• Las listas de Twitter y la reputación online

Proverbios y dichos twitteros:

• Dime en qué listas estás y te diré como eres (@Congosto)
• Por sus listas los conoceréis (@Congosto)

La siguiente imagen es el tag cloud de los títulos de los 794 795 posts que se escribieron para la campaña en la que participaron 898 899 blogs, entre ellos el mío.

Para buscar este barrio de blogs tuve que realizar algunas tareas automáticas y otras manuales. Siempre luchado contra el paso del tiempo que entierra los post en el subsuelo de las homepages y complica la búsqueda. Estos son las pasos que seguí para descubrir los blogs.

1. Fuentes  existentes de la información

1. Comentarios del post de la convocatoria: La forma de apuntarse a la iniciativa era dejar un comentario en el post de la convocatoria indicando el blog que se adhería.
2. Lista de los primeros 650 blogs:  El blog que lanzó la campaña confeccionó la primera lista con 650 Blogs.
3. Web Cienciastijeras:  Después de esta primera recopilación se siguieron apuntando más blogs y se pidieron colaboradores para seguir anotándolos, esta web recogió todos los blogs que apoyaban la campaña.

2. Fuentes usadas

• Para la lista de los posts publicados

• Lista de los primeros 650 blogs: se obtuvieron fácilmente las urls de esta lista.

• Comentarios del post de la convocatoria: se extrajeron las urls de los blogs que no estaban en la lista anterior

• Fuentes usadas para las visualizaciones

• Comentarios del post de la convocatoria: se extrajeron las 1012 urls de los blogs que dejaron su comentario junto con su fecha y hora para poder realizar timelines. En las visualizaciones están excluidos los blogs que no dejaron comentario en el post de la convocatoria aunque estuvieran en la lista de La Aldea Irreductible por no tener certeza de su timestamp.

3. Verificación de la información y filtrado de errores

• Corrección de errores de sintaxis de las urls
• Conversión de urls cortas a su nombre real.
• Normalización de la url de la página principal.
• Eliminación de urls repetidas
• Descarte de  las urls que no eran blogs: fickr, youtube, linkedin,etc..

4. Herramientas de obtención del Barrios de blogs

• Lestat: Se utilizó una versión reducida para analizar solo la página principal obteniendo de cada blog:

• Lista de los enlaces internos y externos clasificados según el contexto del blog: Cabecera, lateral, post, pié de post, archivo de históricos y pie de blog.e
• Lista de las  urls de los feeds
• Lista de las urls que podrían pertenecer al blogroll
• Lista de las urls de usuarios twitter

• Posproceso de la información generada por lestat

• Obtención de los enlaces salientes pertenecientes al conjunto de blogs estudiado
• Obtención del post escrito para la campaña.  Al no estar familiarizada con una herramienta de parseo de feeds, por razones de tiempo los post se obtuvieron analizando las urls del código html. Para los siguientes experimentos se considera imprescindible poder analizar feeds.

5. Revisión de los resultados y corrección manual de los errores

• Resolver problemas con los caracteres de más de 7 bits ( acentos, ñ, etc..)
• Completar las urls de los posts que no habían sido encontradas por:

• No estar ya en la página principal
• No haberse publicado. Algunos blogs pusieron el logo de la campaña pero no escribieron el post
• No contener en la url el título del post. Los blogs de Blogia y algunos WordPress codifican el enlace de las entradas con un código numérico.
• No estar accesibles por: ser privados, tener control de acceso para adultos o  estar temporalmente fuera de servicio.

Resultados de esta primera fase:

• Lista de blogs con el enlace al post publicado para la campaña, accesible en esta página.
• Data set obtenido en formato xls.

Siguientes pasos a seguir:

• Visualizar las relaciones de los blogs que han participado en la campaña, a ser posible de forma dinámica para ver como se ha propagado la iniciativa.
• Obtención de la correspondencia blog-twitter para visualizar las relaciones de estos blogs en twitter
• Obtención de conclusiones sobre la propagación de la campaña.

Como llegó el artículo a mis manos

Este verano mi excolega Paloma Granado me hizo un obsequio que le agradecí mucho: una fotocopia de un artículo de la revista ByN sobre unas predicciones futuristas de Arthur C. Clarke. El artículo, titulado Las comunicaciones del futuro, era interesantísimo y pensé en escribir algo sobre él. Como no aparecía la fecha me dispuse a averiguarla y de paso buscar una edición digital para poder referenciarlo.

Pedí ayuda en Twitter para buscar los artículos de la revista ByN y @ebrito me intentó ayudar muy caballerosamente y @alalga, que escuchó la conversación, se interesó también por el artículo. Aquí queda para la historia lo hablado.

Agotada la opción de Twitter, recurrí a mi hija la erudita que trabajaba en una Biblioteca para que me buscase por las hemerotecas que tuviese a su alcance. Tampoco pudo ser por esa vía pero gracias a ese fantástico proyecto de digitalización de la hemeroteca de El ABC al fin mi hija me pudo enviar el ansiado enlace.

El artículo data del 5 de junio de 1977, es decir, de hace treinta y dos años. Aunque parece una fecha muy remota en aquel entonces ya se había inventado el email e Internet aunque solo estaba al alcance de unos pocos iniciados.

La foto que ilustra el post es la que aparece en el artículo y, si me permiten la broma, se podría decir que Sir Arthur leía el futuro en los posos del café.

Revisando las predicciones 32 años después….

Esta revisión tiene como objetivo estimular la curiosidad del lector y conducirle a la lectura del artículo original que consta de seis páginas (126, 127 128, 129, 130 y 131) y que tendrá que bajarse de la hemeroteca digital página a página o hacerse un dossier. No he querido componer el documento y subirlo a mi hosting por respetar las condiciones de uso establecidas por ABC.

Estas son las predicciones a las que pasaré revista:

	Los nativos digitales: La facilidad con que los niños aceptan como un hecho natural la presencia de las máquinas y utilizan los ordenadores como si fueran juguetes, nos permite adivinar que muy pronto el cerebro electrónico será común en los hogares como la batidora o el tocadiscos (pag. 128). Sí, acertó.
	Ecología: No viajes, ¡comunicaros! Además de los ahorros de tiempo, habrá economías astronómicas de energía y materias primas (pag. 128). No consiguió adivinar que las compañías de low cost nos harían viajar más que nunca.
	Teletrabajo: Se acerca el día en que los empleados de oficina y los intelectuales harán su trabajo sin salir de sus viviendas (pag. 128). Sí, aunque no está tan extendido como la tecnología lo permite.
	Periódicos digitales: El periódico electrónico, además de sus otros méritos, tendrá dos ventajas ecológicas. Guardará bosques enteros para la posteridad y reducirá a la mitad el coste de recogida de desperdicios. Esto solo bastaría para justificarlo y para pagarlo (pag. 128). No, aunque propone un modelo de negocio los periódicos de papel se resisten a morir.
	Infomanía: El hombre podrá vivir más tiempo sin agua que sin información (pag. 126). Pueden preverse la aparición de formas virulentas de adicción a las noticias, que dará lugar al nacimiento de de un tipo de personas incapaces de perderse nada de lo que esté pasando en alguna parte y que pasarán todas las horas de su vigilia adheridas al computador. He acuñado un nombre para ellos “Infomaníacos” (pag. 129). Sí, ese tipo de persona existe. Los infomaníacos (Infoaddict según el fabuloso glosario de términos informáticos Tugurium), primero fueron Bloggers y ahora son Twitteros.
	Los teléfonos móviles: El teléfono-reloj-pulsera individual, con el cual podréis establecer contacto con cualquier persona que se halle en cualquier parte, será una ventaja que pocos podrán rechazar (pag. 130). No, no han ido por ese camino los móviles, aunque se venden estos teléfonos en la gama alta de móviles.
	Los smartphones: Nos veremos obligados a combinar en una unidad portátil no solo el equipo de comunicaciones sino algo similar a las actuales calculadoras de bolsillo, más banco de datos y circuitos de proceso. Serán una compañía constante que cumplirá la misma funcionalidad que una secretaria humana (pag. 130). Sí, mucho más atinado en este punto.
	La brecha digital: A medida que evolucionemos hacia una sociedad orientada a la información y nos apartamos de otra basada en la fabricación y transporte, habrá millones de personas que no consigan adaptarse al cambio (pag. 130). Sí, aunque su previsión de automatización del trabajo es muy optimista, y aún hay mucha actividad laboral manual, no cabe duda que la supervivencia laboral en estos tiempos de crisis será más fácil para los que se hayan adaptado al cambio digital.

Conclusiones

En líneas generales las predicciones son muy acertadas y sobre todo me ha llamado la atención su preocupación por el medio ambiente muy superior a la de los actuales Padres (más bien padrastros) de la Patria. Si en algo fue optimista Sir Arthur C. Clarke fue en la inteligencia  y honestidad de los políticos.