Inria Chile / Open News Scrapatón: Extraer y Visualizar Datos

Seguimos con la serie de actividades para potenciar nuestras habilidades tecnológicas y de investigación para hacer mejor periodismo y desarrollo de aplicaciones, visualizaciones y proyectos digitales de datos abiertos.

Tras la Datatón que organizamos con la participación de Michael Bauer, líder de School of Data (www.schoolofdata.org) para aprender a encontrar, extraer y analizar datos públicos para contar mejores historias periodísticas, ahora estamos muy contentos de invitarte a la primera Scrapatón de extracción y visualización de datos, un encuentro organizado junto a la Fundación Inria ChileFundación Poderomedia y que cuenta con el apoyo de Mozilla Open News y la Escuela de Periodismo de la Universidad Diego Portales.

OBJETIVO
El propósito de esta primera Scrapatón es obtener los mejores datos
relacionados a Educación, Dinero, Política y otros temas de interés público, para desarrollar aplicaciones de noticias, visualizaciones de datos y sitios de participación cívica que ayudarán a mejorar el ecosistema del periodismo de datos y los datos abiertos.

La idea es acercar a comunicadores y desarrolladores a la práctica de extracción y visualización de datos, detectar e incentivar el uso de librerías como D3.js (ver http://bost.ocks.org/mike/) y terminar la jornada con varias aplicaciones funcionando para que rápidamente lleguen a los medios.

SUBE TU IDEA Y ARMA TU EQUIPO
Para ello te pedimos que en los días previos subas tu idea http://scrapaton.hackdash.org/ y armes tu equipo con antelación. No es obligatorio, pero te sugerirmos que ojalá incluyas a lo menos un periodista, un
programador y un diseñador.

US$ 1.000 AL MEJOR PROYECTO
El mejor proyecto - seleccionado por un jurado (ver abajo)- recibirá un microgrant de US$ 1.000 de Knight Mozilla Open News, para terminar la aplicación y convertirla en un producto real que será difundido a través de Source, la creciente comunidad del programa Knight Mozilla Open News, que apuesta por la web abierta.

El equipo ganador también será
invitado a presentar su proyecto en el próximo DataTuesday del martes 23 de julio, 2013.

El Jurado estará compuesto por: 
-Tomás Barros, CTO de Inria Chile, ex director ejecutivo de Nic Chile Research Labs
-Mariano Blejman, ICFJ Knight International Fellow, y organizador de Hacks/Hackers Buenos Aires. Ex editor en Página/12. 
-Mónica Ventura, responsable de OpenDataLatinoamerica.org para Chile
-Javier Pájaro, CTO de Junar.com
-Mariana Santos, ICFJ Knight International Fellow, diseñadora especializada en motion graphics de The Guardian, creadora de Chicas Poderosas
-Andrés Azócar, director de medios digitales de La Tercera
-Miguel Paz, ICFJ Knight International Fellow y organizador de Hacks/Hackers Chile. 

PROGRAMA
Tendremos un espacio muy grande en la Escuela de Periodismo de la UDP para trabajar y queremos que esta primera Scrapatón de Extracción y Visualización de Datos sea una fiesta.

10:00 - 11:00 Taller de Scraping:Al comienzo del Scrapatón tendremos un taller de 1 hora de scraping con la asistencia de un equipo de programadores de Inria Chile. También puedes adelantarte y revisar el Tutorial de scraping del Datatón.

11:00 - 13:30 Hackeo productivo de extraer datos y construir prototipos.

13:30 - 14:30 Almuerzo

14:30 - 18:00 Hackeo productivo de extraer datos y construir prototipos.

18:00 - 19:00 Demos: Cada equipo presentará su proyecto en cinco minutos 

REQUISITOS
-Computador: Necesitas traer tu propio laptop.
-Publica tu idea y equipo: Para darle seguimiento a los proyectos y equipos que se conformen, te pedimos que subas tu idea al dashboard que preparamos especialmente para ello: http://scrapaton.hackdash.org e invites a quienes quieran sumarse a tu equipo allí.

SETS DE DATOS
Tendremos datos publicados en OpenDataLatinoamerica.org para que puedas usar la API y alimentar tu proyecto, usando el repositorio de datos como servicio web. Además todos los datos que se extraigan y limpien en la Scrapatón serán subidos al OpenDataLatinoamerica.org.

A continuación una lista de sets de datos. Por favor agrega los tuyos en los comentarios.

Elecciones, votaciones Congreso, proyectos de ley
-Resultados Electorales de Chile http://sitio.servel.cl/controls/neochannels/neo_ch44/neochn44.aspx 
-Ingresos y Gastos Electorales de Candidatos en Chile (2004 en adelante) http://sitio.servel.cl/controls/neochannels/neo_ch144/neochn144.aspx?appinstanceid=379&pubid=737
-Ingresos y Gastos Electorales de Partidos en Chile (2004 en adelante)
http://sitio.servel.cl/controls/neochannels/neo_ch144/neochn144.aspx?appinstanceid=381&pubid=819
-Votaciones en la Cámara de Diputados http://camara.cl/trabajamos/sala_votaciones.aspx
-Votaciones en el Senado http://www.senado.cl/appsenado/index.php?mo=sesionessala&ac=votacionSala&legiini=462
-Tramitación de Proyectos de Ley en el Congreso http://sil.congreso.cl/pags/index.html
-Reseñas Parlamentarias http://historiapolitica.bcn.cl/resenas_parlamentarias
-Historia Política Legislativa http://historiapolitica.bcn.cl/
-Datasets de Normas Jurídicas y Cargos Públicos http://datos.bcn.cl/es/documentacion/conjunto-de-datos

División Territorial
-División Político Administrativa http://siit2.bcn.cl/siit/nuestropais/div_pol-adm.htm
-División Político Electoral http://siit2.bcn.cl/divisionelectoral/index.htm
-Sistema de Información Territorial de la Biblioteca del Congreso Nacional
http://siit.bcn.cl/siit/ui/pages/Mapa.aspx?home=home 
-Datos estadísticos por comuna de Chile (Censo) http://siit.bcn.cl/siit/ui/pages/Statistics.aspx
-Datasets de Normas Jurídicas, Localidades y Cargos Públicos http://datos.bcn.cl/es/documentacion/conjunto-de-datos

Educación
-Educación Superior
http://www.mifuturo.cl/index.php/bases-de-datos
-Educación en general http://datos.gob.cl/categorias/ver/5
-Georeferenciacion de escuelas y liceos http://datos.gob.cl/datasets/ver/448 I http://www.mineduc.cl/index1_int.php?id_portal=1&id_seccion=3260&id_contenido=13262
-Presupuesto Nacional en Educación http://www.dipres.gob.cl/595/w3-propertyvalue-14437.html
-Subvenciones a Colegios Particulares Subvencionados http://www.mineduc.cl/transparencia/otras_transferencias.html
-Estadísticas Universitarias de Pregrado http://www.cned.cl/public/Secciones/SeccionIndicesEstadisticas/indices_estadisticas_sistema.aspx
-Estadísticas Universitarias Posgrado http://www.cned.cl/public/Secciones/SeccionIndicesEstadisticas/indices_estadisticas_posgrado.aspx 
-Universidades en Chile http://www.cned.cl/public/Secciones/SeccionIndicesEstadisticas/indices_estadisticas_instituciones.aspx?opcBusquedaCSE=9_3_3
-Centros de Formación Técnica en Chile http://www.cned.cl/public/Secciones/SeccionIndicesEstadisticas/indices_estadisticas_instituciones.aspx?opcBusquedaCSE=9_3_2

Compras Públicas y Sueldos de Gobierno
-Licitaciones Adjudicadas http://www.analiza.cl/web/Modulos/Reportes/ReporteDiarios.aspx
-Ordenes de Compra Adjudicadas http://www.analiza.cl/web/Modulos/Reportes/ReporteOC.aspx
http://www.analiza.cl/web/Informacion_del_Mercado/Informes_de_gestion/Informe_gestion_febrero_2013.pdf
-Data de sueldos de Gobierno Transparente Chile www.gobiernotransparentechile.cl

Presupuesto de la Nación
-Presupuesto 2013 (en ejecución) http://www.dipres.gob.cl/594/w3-propertyvalue-21754.html
-Presupuesto por Entidad de Gobierno http://www.dipres.gob.cl/595/w3-propertyname-557.html

Exportaciones de Chile
-Estadísticas de Exportaciones Aduanas http://www.aduana.cl/exportaciones/aduana/2007-04-16/165951.html

Banco Central
-Estadísticas Económicas http://www.bcentral.cl/estadisticas-economicas/index.htm

Contraloría General de la República
-Dictámenes relevantes http://www.contraloria.cl/NewPortal2/portal2/appmanager/portalCGR/v3ESP?_nfpb=true&_pageLabel=P18200239681286226265111
-Últimas Auditorías http://www.contraloria.cl/NewPortal2/portal2/appmanager/portalCGR/v3ESP?_nfpb=true&_pageLabel=P18200239681286226265111


Telecomunicaciones
-Data de telecomunicaciones Subtel
http://www.subtel.gob.cl/index.php?option=com_content&view=article&id=2486:informacion-estadistica&catid=133:informacion-estadistica-actualizada-e-historica&Itemid=337

Transportes
-Estadísticas mensuales de tráfico aéreo, puntualidad y regularidad http://www.jac-chile.cl/estadisticas/15-informes-estadisticos-mensuales-del-trafico-aereo.html
-Estadísticas mensuales de transporte de pasajeros de Metro, Ferrocarriles,
Plazas de Peaje, Pórticos y Movimiento Internacional de pasajeros.
http://www.ine.cl/canales/chile_estadistico/estadisticas_economicas/transporte_y_comunicaciones/transporte_y_comunicaciones.php

Vivienda
-Generador de datos de vivienda (permite usar filtros y genera archivo Excel) 
http://www.observatoriohabitacional.cl/opensite_20080314092954.aspx
-Mercado inmobiliario http://www.observatoriohabitacional.cl/opensite_20080122171157.aspx
-Información georeferenciada de inversión y programas de subsidios de Vivienda http://www.observatoriourbano.cl/inversiones/info_georref.asp
-Déficit habitacional por Quintil y Región http://www.observatoriohabitacional.cl/opensite_20080122171214.aspx


Minería
-Data de mineras en Chile
http://datos.gob.cl/datasets/ver/2740
-Estadísticas de Producción Minera, Concesiones Mineras, Accidentabilidad Minera http://www.sernageomin.cl/sminera-estadisticas.php

Pesca
-Indicadores Sector Pesquero http://siit2.bcn.cl/indicadores/pesca

Recursos Naturales
-Indicadores sector Recursos Naturales http://siit2.bcn.cl/indicadores/natural

Banca
-Lista de bancos que operan en Chile y sus fichas 
http://www.sbif.cl/sbifweb/servlet/ConozcaSBIF?indice=7.5.1.1&idContenido=483

Valores y Seguros
-Principales Grupos Económicos de Chile http://www.svs.cl/sitio/mercados/grupos.php

Salud
-Ranking de Isapres http://ranking.supersalud.gob.cl/574/w3-channel.html
Energía
-Cifras mensuales de generación y distribución de la energía eléctrica
http://www.ine.cl/canales/chile_estadistico/estadisticas_economicas/energia/series_estadisticas/series_estadisticas.php

Calidad del Aire

-http://sinca.mma.gob.cl/

-http://macam.mma.gob.cl/calidaddeaire/

Terremoto 27/F
-Estado Infraestructura Habitacional y Hospitalaria http://siit2.bcn.cl/actualidad-territorial/terremoto_chile-infraestructura_hospitalaria

OCDE 
-Estadísticas comparadas de Chile y otros países OCDE http://www.oecd-ilibrary.org/statistics

WorldBank Open Data Catalog
-Estadísticas y sets de datos de Chile http://data.worldbank.org/country/chilehttp://databank.bancomundial.org/data/views/reports/tableview.aspx



Join or login to comment.

  • Mariano B.

    Hola a todos, desde Hacks/Hackers Buenos Aires queremos invitarlos a la Media Party (mediaparty.info) tres alucinantes días de conferencias, talleres, demos y hackaton. Periodistas, editores, diseñadores y desarrolladores de software trabajando juntos por el futuro de los medios, para contar historias, generar visualizaciones, mapas y extraer datos. Más de 30 expertos internacionales, 40 talleres, 15 conferencias, 30 iniciativas en Media Feria y un gran HACKATHON 29-31 Agosto en Buenos Aires! Saludos

    July 31, 2013

  • Miguel P.

    Ya tenemos la votación del jurado lista. Debido a la hora, será publicada y anunciada mañana a primera hora. Gracias a todas y todos por su paciencia!

    July 8, 2013

    • Miguel P.

      Nicolás: Significa que será publicada en tiempo y momento adecuado ya que como el equipo de HH es voluntario también debe atender asuntos familiares después de las 19 horas. ¿O es muy tonto lo que digo?

      July 9, 2013

    • Nicolas L.

      Ok! Muchas gracias por sacar adelante la scrapaton!

      July 9, 2013

  • rudighert

    Hola.... cuando salen los resultados?? sino me equivoco hoy era el último plazo. Saludos

    July 8, 2013

  • Miguel P.

    Anunciamos proyecto de la @Scrapaton que recibirá el microgrant de US$ 1.000.- de Mozilla Open News @source. Conoce los detalles aquí: https://docs.google.com/document...­ …

    July 9, 2013

  • Mario De La C.

    Hola:
    Acabo de crear el proyecto: Análisis de Fondos AFP y Fondos Mutuos http://scrapaton.hackdash.org/p...­
    Soy nuevo en esto, es decir, no tengo idea de los alcances del scraping y como se hace. Sin embargo, intuyo que el proyecto presentado calza en el próximo evento. Por favor, comenten mi proyecto, si les parece interesante o no, y además si alguien está interesado en formar equipo o en ayudarme sería excelente.

    2 · June 27, 2013

    • Mario De La C.

      Gracias javier por lo enlaces

      June 29, 2013

    • Miguel P.

      Hola Mario, fue buenísimo que asistieras. Como verás todos estamos aprendiendo desde distintos ángulos. Trae tu proyecto al próximo meetup!

      July 1, 2013

  • rudighert

    Me encantó la iniciativa y el ambiente de generado por las personas, sólo faltó un poco de calefacción , por lo demás todo muy bien

    June 29, 2013

  • Rodrigo G.

    Muy bueno: ambiente ameno, lugar agradable (concuerdo, un poco frío) y salvadoras las ensaladas y el queso de los puestos de la puerta del Santa Isabel

    June 29, 2013

    • Miguel P.

      Para la próxima tendremos comida especial sin glutén estimado!

      July 1, 2013

  • Miguel P.

    Gracias a todos y todas los/las asistentes. Estuvo buenísimo. En breve estamos enviando un update. Y ya están las fotos!

    July 1, 2013

  • José E.

    Estuvo bueno, pero me resfrié.
    Ánimo a los grupos, sigan trabajando en sus proyectos respectivos. Felicitaciones por los resultados obtenidos en tan poco tiempo.

    June 30, 2013

  • sue

    Estuvo buenísimo!, intensivo; con clima frío y calidez de los asistentes, quedé impresionada con las propuestas y me encantó el entusiasmo. Conseguí algun@s voluntari@s para que me den una mano con mi proyecto, aunque no siguió en carrera.
    Felicitaciones al equipo.

    June 30, 2013

  • Mario De La C.

    Excelente los asesores. Falta mejorar más el taller de scraping. Ls polera de tamaño M debió tener un 1 cm mas de largo en cada hombro.

    1 · June 30, 2013

  • César Baeza H.

    Celebro esta iniciativa. Los espacios que fomentan el espíritu colaborativo son esperanzadoras, dado que demuestran que la unión de saberes, y de voluntades, permiten construir grandes cosas.

    June 30, 2013

  • Lionel B.

    Excelente, buen ambiente, buenos proyectos, ricas pizzas ;)

    June 30, 2013

  • Héctor S.

    Hola! Soy sociologo y trabajo en www.bottomapp.org una herramienta pa visualizar necesidades de barrios. Quien se anima?

    2 · June 23, 2013

    • Mariela F.

      A mí me interesa pero no reservé para ir. No sé si pueda entrar... si puedo te contacto.

      1 · June 28, 2013

    • Héctor S.

      Estimados

      Gracias por su interés en nuestro proyecto (www.bottomapp.org), pero por razones de fuerza mayor finalmente no podremos asistir al evento. Los interesados en la aplicación por favor escribirnos a [masked].

      ¡¡Mucho éxito!!

      June 29, 2013

  • Mariela F.

    Quedan cupos? Soy periodista, y hay un par de proyectos al que me gustaría unirme, funciona así o para inscribirme debo llevar mi propia idea? Los proyectos son ideas o están en vías de concretarse? Para saber en qué medida se puede ser un verdadero aporte. Si no se puede en la mañana, vale la pena ir sólo en la tarde, para efectos de construir el proyecto? Gracias!

    June 28, 2013

    • Roberto M.

      asiste mejor y ve si puedes entrar

      June 29, 2013

  • Nicolás Monge I.

    Estimados

    Gracias por su interés en nuestro proyecto (www.bottomapp.org), pero por razones de fuerza mayor finalmente no podremos asistir al evento. Los interesados en la aplicación por favor escribirnos a [masked].

    ¡¡Mucho éxito!!

    1 · June 29, 2013

  • A former member
    A former member

    Buscamos periodista buena onda para complementar nuestro equipo! Dos de los participantes ganamos la categoría ALMA del Space Apps Challenge pasado, desafío 100% informático. En esta ocasión sabemos que se necesita de todas las áreas y ya tenemos diseñador solo faltas tu!

    1 · June 25, 2013

  • Roberto M.

    Preguntas logísticas: ¿Hay estacionamientos? ¿Existira alguna limitante para conectarse a SSH, FTP, etc. ¿Lugares cercanos para almorzar BBB?

    June 28, 2013

    • Rodrigo G.

      (sino, veo de llevarme algo para comer)

      June 28, 2013

    • A former member
      A former member

      Estacionamiento para bici?

      June 28, 2013

  • Eduardo H.

    Tengo la idea de mapear a los directores de Sociedades Anónimas de las Principales Empresas en Chile (entre ellas las empresas CORFO, CODELCO, EFE, etc), las relaciones entre ellos, y sus sueldos brutos y a partir de eso generar distintas visualizaciones. Quienes se repiten, cuantos se conocen y si sus multiples participaciones en directorios tienen algun patrón que podamos detectar.

    1 · June 28, 2013

  • A former member
    A former member

    Un amigo me dijo que hay que pagar para participar. Me pueden aclarar esto por favor!

    June 28, 2013

  • sue

    Tengo una idea : programa en radio on lin o web radio;, en el programa entrevistamos a personas que nos pueden dar opiniones y están conectados, por ejemplo a conflictos ambientales y sociales, por ejemplo: Pascualama- Hidroaysen, la idea es que nos cuenten como lo viven las comunidades y nosotros dar la información que falta sobre datos de los inversores y su biografía. Le interesa,participe en el equipo. Necesito equipo;opiniones?..
    subi la idea
    http://scrapaton.hackdash.org/p...­

    June 28, 2013

  • César Baeza H.

    ¿Y es posible reservar un espacio para exponer nuestro proyecto?

    June 28, 2013

  • Roberto M.

    ¿Quienes necesitan equipo?

    June 21, 2013

    • Miguel P.

      Roberto: Con este tremendo equipo ya tienen idea y equipo. Súbanla al http://scrapaton.hack...­

      June 26, 2013

    • Lionel B.

      Gracias Miguel, el proyecto está subido. Ojalá se animen a comentar o a aportar ideas para ir puliéndolo. He contactado a la superintendencia de educación para ver si a través de ellos podemos conseguir denuncias de bullying, cero respuesta aún. Es lo que aún veo más complejo, de dónde extraer los datos....

      June 28, 2013

  • Miguel P.

    Algun/a especialista en visualizaciones con D3 y otras librerías? Estaría genial visualizar el tráfico mensual de vuelos y/o de transportes de pasajeros de metro.
    Data de Transportes acá:
    -Estadísticas mensuales de tráfico aéreo, puntualidad y regularidad http://www.jac-chile.cl/estadis...­
    -Estadísticas mensuales de transporte de pasajeros de Metro, Ferrocarriles, Plazas de Peaje, Pórticos y Movimiento Internacional de pasajeros.
    http://www.ine.cl/canales/chile...­

    June 26, 2013

  • Fernando M.

    python por acà

    June 23, 2013

  • Rodrigo T.

    Me gustaria participar en los proximos eventos ya que ahora no estoy en Chile (pronto estaré por alla). Igual los apoyo desde la distancia. Saludos.

    June 23, 2013

    • Miguel P.

      Te esperamos cuando puedas Rodrigo

      June 23, 2013

  • Proyecto A.

    saben si hay datos sobre discapacidad disponibles?

    June 21, 2013

  • Fernando M.

    Hola, puedo ir este evento si no he ido a los anteriores?

    gracias

    June 21, 2013

  • Henry A.

    Si, muy interesante

    June 20, 2013

  • Roger R.

    Interesante propuesta, me encantaria participar

    June 5, 2013

Our Sponsors

People in this
Meetup are also in:

Create your own Meetup Group

Get started Learn more
Katie

I'm surprised by the level of growth I've seen since becoming an organizer, it's given me more confidence in my abilities.

Katie, started NYC ICO

Start your Meetup today

Act now and get 50% off.
Until February 1.

Sign up

Meetup members, Log in

By clicking "Sign up" or "Sign up using Facebook", you confirm that you accept our Terms of Service & Privacy Policy