Web Scraping para la obtención de información actualizada de Internet con push notifications para smartphone

Abstract

Web Scraping (raspado web o extracción de datos web) es el proceso de extracción de datos de sitios web, preferiblemente usando un programa que simula la exploración humana mediante el envío de peticiones HTTP simples o emulando un navegador web completo. Web Scraping, Content Scraping, Screen Scraping, Web Harvesting o Web Data Extraction son todos términos análogos. En general, cualquier cosa que se puede ver en Internet puede ser extraído y este proceso puede ser automatizado. Web Scraping se utiliza normalmente por diferentes motivos, como la detección de cambio, la investigación de mercado, seguimiento de datos y en algunos casos hasta el robo de datos.

Web Scraping está muy relacionado con la indexación de la web, la cual indexa información de la web utilizando un agente web automatizado y es una técnica global adoptada por la mayoría de los motores de búsqueda. Pero, Web Scraping se enfoca más en la transformación de datos sin estructura en la web, en datos estructurados que pueden ser almacenados y analizados en una base de datos central, en una hoja de cálculo o en alguna otra fuente de almacenamiento.

Existe una polémica con aspectos legales por la obtención de los datos, no tanto por la forma, si no de lo que se va hacer después con los datos, por ejemplo, no sería legal si muestra datos privados o con copyright.

Push Notifications también llamado Server Push Notifications (servidor push de notificaciones), es la entrega de información de una aplicación de software para dispositivos informáticos sin una solicitud específica del cliente. La notificación procede de un servidor, el usuario final debe optar por recibir alertas.

Push Notifications permite a una aplicación de un Smartphone notificar de nuevos mensajes o eventos sin la necesidad de abrir realmente la aplicación, de forma similar a un mensaje de texto hará un sonido y/o aparecerá en la pantalla. Esta es una manera para que las aplicaciones puedan interactuar con los usuarios.

En la actualidad existe la necesidad de obtener información de forma automatizada, de acuerdo a los intereses que cada persona tiene, es decir, hacer un seguimiento a las actualizaciones de la información.

La dificultad de buscar o revisar si hay noticias de último momento o nuevos artículos, a veces resulta una pérdida de tiempo ya que estas en ocasiones no se actualizan, y si tomamos en cuenta el volumen de estos, es casi imposible de ver todos.

Es por eso que se vio la necesidad de implementar una aplicación para automatizar y alertar por medio de un Smartphone, si existen noticias nuevas en los sitios de interés de una persona.