Junior — Middle
Van tapasztalata webforrásokból származó adatok gyűjtésére szolgáló szkriptek vagy programok fejlesztésében?
sobes.tech MI
Válasz az MI-től
Igen, az adatok gyűjtéséhez webes forrásokból gyakran használják a Python-t a requests könyvtárral az oldalak letöltéséhez és a BeautifulSoup vagy lxml könyvtárakat az HTML elemzéséhez. Például írhatunk egy szkriptet, amely letölti az oldalt és kinyeri a hírcímeket:
import requests
from bs4 import BeautifulSoup
url = 'https://example.com/news'
response = requests.get(url)
soup = BeautifulSoup(response.text, 'html.parser')
for headline in soup.find_all('h2', class_='news-title'):
print(headline.text.strip())
Ez a megközelítés lehetővé teszi az információk automatikus gyűjtését weboldalakról, ha ez nem ütközik az erőforrás szabályaiba.