Как правильно парсить страницу, что бы брать с нее информацию?
Есть задача брать с определенной страницы информацию и загонять ее общую базу: количество и цену товара. В виду своей неопытности в парсинге сайтов, при просмотре кода страницы через браузер нужных цены и количества нет, но при исследовании элемента страницы эта информация есть. При парсинге я же буду получать весь код страницы где нет нужной мне информации.
Подскажите пожалуйста, о чем я не знаю или что не понимаю?
Парсер хочу писать на C#
Парсить сайт буду не часто - раз в 4 часа, так что проверку в виде капчи получить не должен.
@bazar люблю базарчика, объясняю по-человечески:
1. это паста - комар упивается своим ОПЫТОМ и смеётся над потугами начинающих
2. проблема ОПа в том, что нужные данные отсутствуют в исходной странице, а добавляются на неё динамически через жс - твой beautifullSoup не поможет, нужно либо разобраться откуда подтягиваются эти данные и тянуть их самостоятельно, либо, если надо быстро-грязно, использовать какой-нибудь движок для жс (фантомжс/селениум/самописная залупа)