Google Search API +CSE

Da li netko zna je li moguće napraviti da preko CSE i API od googla dobijem iste rezultate kao kad se pretražuje preko preglednika.

U Custom Search Engine-u sam postavio da pretrazuje cijeli web, no funkcija mi u JSON vraca puno manje rezultata nego preko preglednika i to osjetno manje.

Druga ideja mi je bila da scrape-am sa BeautifulSoup, ali tu mi vraca rezultat None kad trazim preko hrml.parser i id-a elementa, to pretpostavljam da Google kuzi da je bot.

Procitao sam na google forumu da je sto se tice CSE situacija takva. Ima li netko ideju kako bi mogao dobiti rezultate kao sa preglednika? S time da bi rade isao legalnim putem.

1 Like

Neki headless browser kao headless Chrome (puppeteer).

1 Like