In linea di massima si. Si chiama 'web scraping'. Però non tutti i siti si lasciano leggere da un 'bot'. I dati che lo scraper legge devi poi filtrarli per trovare quello che ti serve.
Ci sono librerie apposite per fare scraping, la più semplice è quella usata da 'curl', oppure wget.