Underc0de

Foros Generales => Dudas y pedidos generales => Mensaje iniciado por: lemos.ema en Julio 01, 2019, 04:52:09 AM

Título: Scrapy
Publicado por: lemos.ema en Julio 01, 2019, 04:52:09 AM
Hola que tal todos como estan?
estoy a full con el tema del scrapy y queria saber que tan real puede ser crean un scraper que capte info en el momento con ayuda de machine learning ?
por ahi con un ejemplo queda mas claro, imaginen poder crear un algoritmo de machine learning que permita detectar todas las personas que estan hablando de tal tema (ejemplo futbol) en la red. Y que por ejemplo si un usuario lo publica en facebook me llegue una notificacion con su nombre. Se me ocurre que podria ser con Selenium... pero el change de pagina tardaria mucho por lo que no me avisaria en el momento.
gracias
Título: Re:Scrapy
Publicado por: DtxdF en Julio 02, 2019, 07:29:55 AM
Hola, @lemos.ema, como te lo explican en "https://underc0de.org/foro/dudas-generales-121/ayuda-con-mi-scrapy-por-favor/", es mejor utilizar "BeautifulSoup", no solo porque sea mucho más eficiente sino porque puedes comprender "desde cero" como hacer un scraper

Sobre el algoritmo que deseas crear:

Citar
Hola que tal todos como estan?
estoy a full con el tema del scrapy y queria saber que tan real puede ser crean un scraper que capte info en el momento con ayuda de machine learning ?
por ahi con un ejemplo queda mas claro, imaginen poder crear un algoritmo de machine learning que permita detectar todas las personas que estan hablando de tal tema (ejemplo futbol) en la red. Y que por ejemplo si un usuario lo publica en facebook me llegue una notificacion con su nombre. Se me ocurre que podria ser con Selenium... pero el change de pagina tardaria mucho por lo que no me avisaria en el momento.
gracias

Lo que deseas crear es un "shodan" solo que para saber que hacen las personas en la red de redes, puedes hacerlo solo estudia esos temas y escucha las oportunidades que te están dando las personas (Me refiero al anterior POST)