Innanzi a tutto devi vedere se la pagina carica i contenuti tramite AJAX, se così fosse devi utilizzare un browser headless ed estrapolarti l'HTML "finale". Altrimenti ti basta leggere la risposta alla richiesta POST.
Tutto questo, ovviamente, a patto di avere accordi con il sito che fornisce i dati: una cosa infatti è effettuare lo scraping di un sito, un'altra invece è sfruttare un sito per generare dati da "rivendere" come propri.