網路世代中，多數的資訊都可以在網路上找到。除了透過我們人自己閱讀網路上的資訊以外，透過程式將網路上的資訊擷取下來並進行處理，已是非常熱門的應用，這樣透過程式將網頁上的資訊擷取下來的行為，就稱作「爬蟲」
今天，我們會分享如何透過實作爬蟲，取得常見媒體網頁中的新聞資訊！
使用網路爬蟲
程式不像我們人的眼睛看見網頁的呈現，而是看見程式碼。所以在使用爬蟲的時候，我們需要告訴爬蟲要讀取網頁中哪些資料的時候，就是透過尋找網頁程式語言（HTML、CSS）的位置。
而在Python中，最常被大家使用的爬蟲模組就是「BeautifulSoup」
首先，我們需要透過pip安裝模組
pip install beautifulsoup4
BeautifulSoup只負責解析網頁程式語言的內容，但不包含將網頁擷取下來的功能，所以我們還需要另一個模組「requests」，將網頁擷取下來。
爬蟲實作
我們以擷取「聯合新聞網」為示範。首先，我們需要知道網頁上的新聞資訊，是寫在怎樣的HTML與CSS的架構中。所以我們可以在網頁上對新聞內容點擊「右鍵」>「檢查」 。找到這個資訊放在哪一個程式碼段落中。
從上圖中可以看見，新聞的標題放在「story-list__text」這個div class中底下的「h2」標籤內。所以我們可以寫爬蟲擷取這個程式段落中的內容。
import requestsfrom bs4 import BeautifulSoup
web = requests.get( “https://udn.com/news/breaknews/1” )
content = BeautifulSoup( web.text, “html.parser” )
allTitle = content.select( “.story-list__text h2” )
for i in allTitle[3:]:
print( “標題：” + i.text[1:-1] )
執行成果：
練習擷取更多的新聞網站
擷取TVBS新聞網站
import requestsfrom bs4 import BeautifulSoup
web = requests.get( “https://news.tvbs.com.tw/hot” )
content = BeautifulSoup( web.text, “html.parser” )
allTitle = content.select( “.content_center_contxt_box_news .txt” )
for i in allTitle[47:]:
print( “標題：” + i.text )
執行成果：
擷取三立新聞網站
import requestsfrom bs4 import BeautifulSoup
web = requests.get( “https://www.setn.com/ViewAll.aspx” )
content = BeautifulSoup( web.text, “html.parser” )
allTitle = content.select( “.view-li-title a” )
for i in allTitle:
print( “標題：” + i.text )
執行成果：
擷取自由時報網站
import requestsfrom bs4 import BeautifulSoup
web = requests.get( “https://news.ltn.com.tw/” )
content = BeautifulSoup( web.text, “html.parser” )
allTitle = content.select( “.tit .title” )
for i in allTitle:
print( “標題：” + i.text )
執行成果：
Financieras De Prestamos Personales Gente Que Presta Dinero Minicreditos Rapidos Online Todo Prestamos Simulador
https://prestamosenestadosunidos.space/oxnard-ca/
Prestamos Personales Baratos Prestamos De Dinero Rapido Por Internet Mini Prestamos Online Nuevos Prestamos De Dinero Rapido Y Facil
https://prestamosenestadosunidos.space/westminster-co/
Tipos De Interes Para Prestamos Personales Credito Facil Donde Me Pueden Prestar Dinero Facil Y Rapido
https://prestamosenestadosunidos.space/burbank-ca/
Solicitar Dinero Urgente Minicreditos Rapidos Personas Que Dan Prestamos De Dinero Micro Prestamos Online
Calculadora Para Prestamos Personales Donde Puedo Pedir Un Prestamo Rapido Interes Prestamo Personal
https://prestamosenestadosunidos.space/carlsbad-ca/
Prestamos Personales Rapidos En Linea Prestamos De Dinero Online Como Solicitar Un Credito Comparador De Prestamos Personales Solicitar Prestamo En Linea
https://prestamosenestadosunidos.space/el-cajon-ca/
Donde Pedir Un Prestamo Que Interes Tiene Un Prestamo Personal Prestamos Faciles Por Internet Que Es Un Prestamo Personal
https://prestamosenestadosunidos.space/bryan-tx/
Te Presto Dinero Para Lo Que Quieras Calculo Interes Prestamo Personal Credito Facil Y Rapido
Solo Credito Calculo De Intereses Prestamo Personal A Banca Prestamos Personales
https://prestamosenestadosunidos.space/avondale-az/
Donde Hacer Un Prestamo Personal Como Adquirir Un Prestamo Personal Cooperativas De Credito
https://prestamosenestadosunidos.space/newark-nj/
Prestamo Facil Online Donde Pedir Un Credito Rapido Pedir Dinero Rapido Paginas De Prestamos Online Creditos Y Prestamos Rapidos
https://prestamosenestadosunidos.space/lubbock-tx/
Prestamos Personales Online Prestamos Individuales Creditos Online 24 Horas Credito Y Mas Quien Me Presta Dinero Urgente
Paginas De Prestamos Rapidos Cotizador De Creditos Personales Pedir Prestamo
https://prestamosurgente.space/cape-coral-fl/
Donde Puedo Adquirir Un Prestamo Personal Precio Prestamos Personales Solicitar Prestamo Donde Puedo Conseguir Prestamos De Dinero Prestamos Faciles En Linea
https://prestamosurgente.space/toms-river-nj/
Creditos Urgentes Rapidos Consultar Credito Personal Prestamos Personales Pequenos Calcular Prestamo Personal Prestamos Grandes Y Rapidos
https://prestamosurgente.space/port-arthur-tx/
Prestamos De Dinero Rapido Por Internet Prestamo Linea Personal Prestamistas Online
Prestamos En Linea Buscar Prestamos Rapidos Prestamos Via Internet Busco Prestamistas De Dinero El Credito Financiero
https://prestamosurgente.space/fernley-nv/
Prestamos Pequenos Prestamos Personales Simulador Prestamos En Linea En 24 Horas Como Saber Tu Credito Personal Dinero Credit
https://prestamosurgente.space/warner-robins-ga/
Como Pedir Prestamo A Personal Lugar De Prestamos De Dinero Quien Me Puede Prestar Dinero Prestamos Con Dinero Quien Presta Dinero Urgente
https://prestamosurgente.space/cedar-park-tx/
Creditos Nuevos Online Casas De Prestamos Rapidos Intereses De Prestamos Personales Donde Es Mejor Pedir Un Prestamo Personal
Tasa De Interes Prestamos Personales Hacer Prestamos Por Internet Quiero Un Prestamo Personal Te Presto Dinero Para Lo Que Quieras Prestamos Personales Simulador De Cuotas
https://creditosrapidosenusa.space/miramar-fl/
Como Pedir Un Prestamo Quiero Un Prestamo Tipo De Interes Actual Para Prestamos Personales Prestamos Personales Baratos
https://creditosrapidosenusa.space/goodyear-az/
Calculadora Para Prestamos Personales Presta Mas Creditos Personales En Linea Prestamos Rapidos Y Sencillos Tipos De Prestamos
https://creditosrapidosenusa.space/irvington-nj/
Bancos De Prestamos Rapidos Mini Prestamos Conseguir Prestamo
Al Credito Lugares Donde Hacen Prestamos Personales Como Solicitar Un Credito Personal
https://prestamosurgente.space/conroe-tx/
Quien Presta Plata Empresas De Prestamos Te Presto Dinero Para Lo Que Quieras Prestamos De Dinero Con Bajo Interes
https://prestamosurgente.space/grand-prairie-tx/
Prestamista De Dinero Urgente Como Aplicar Para Un Prestamo Personal Donde Prestan Dinero Urgente Prestamos Por Linea Para Solicitar Un Prestamo Rapido
https://prestamosurgente.space/santa-ana-ca/
Credito 24 Horas Prestamos De Dinero En Linea Urgentes Prestamos De Dinero Rapido Por Internet Prestamos De Dinero Con Bajo Interes Pedir Prestamo Online
Prestamos Rapidos Hoy Es Confiable Ver Prestamos Rapidos Prestamos Con Tarjeta De Credito Online Prestamos Rapidos Y Faciles En Linea
https://prestamosenestadosunidos.space/roseville-ca/
Mini Prestamos Urgentes Online Personas Que Prestan Dinero A Redito Quien Presta Dinero Facil
https://prestamosenestadosunidos.space/boulder-co/
Credito Internet Credito Para Empresas Credito Rapido On Line Prestamos Para Autonomos
https://prestamosenestadosunidos.space/chaparral-nm/
Creditos Super Rapidos Necesito Un Credito Donde Puedo Pedir Un Prestamo De Dinero Prestamo De Dinero Urgente Solicitud De Prestamos Online
Simulador De Prestamos Online Pedir Prestamo Por Internet Pedir Prestamo Personal Por Mensaje
https://prestamosenestadosunidos.space/downey-ca/
Pedir Prestamo Online Rapido Mini Creditos On Line Donde Puedo Pedir Un Prestamo Facil Y Rapido
https://prestamosenestadosunidos.space/peoria-az/
Como Pedir Prestamo A Personal Prestamos Pequenos Calcular Cuota Prestamo
https://prestamosenestadosunidos.space/vineland-nj/
Comparador Prestamos Personales Buscar Prestamos De Dinero Intereses De Creditos Personales Prestamos Bancos Online Como Hacer Un Prestamo
Prestar Dinero Por Internet Solicito Prestamo De Dinero Prestamos Con Recibo De Sueldo Creditos Y Prestamos Personales Rapidos
https://elprestamista.space/houston-tx/
Prestamos Personales Por Nomina Prestamo 300 Prestamos Para Pagar A Plazos
https://elprestamista.space/hackensack-nj/
Creditos Rapidos Online Credito Personal Que Cuenta Es Prestamos Para Emprendimientos Como Conseguir Un Prestamo Rapido Y Facil Prestamos A Pagar En Cuotas
https://elprestamista.space/spring-valley-nv/
Prestamos A Pagar Por Mes Donde Pedir Un Prestamo Buscar Creditos Rapidos Ofertas De Prestamos Personales