Shellsec

Fuld version: python requests update browser
Du ser lige nu en skrabet udgave af vores indhold. Se den fulde version med ordentlig formatering.
Sider: 1 2
Jeg anvender denne kode, for at få source til en hjemme side, siden svare tilbage med at jeg skal opdatere min browser.
Jeg har prøvet med urllib2 og urllib hvor jeg får lign. svar tilbage
Kode:
import requests
url = "https://sit2play.com"
response = requests.get(url)
print response.content


tilbage svar (dette er en snippet af noget af svaret)
Kode:
<h3 class="ielte9">
The browser you're using is not supported. Please use a different browser like <a href="http://www.chrome.com">Chrome</a> or <a href="http://www.firefox.com">Firefox</a>.
Or if you're really attached to Internet Explorer, you can <a href="https://support.microsoft.com/help/17621">upgrade it</a>.
</h3>
Nogle der har en løsning?
siden ser ud til at tjekke om javascript er slaaet til, saa det bliver svaert med requests eller urllib. :)

edit: tjek eventuelt her https://stackoverflow.com/questions/3293...utifulsoup
Ja, selenium er selvfølgelig en mulighed, håbede blot jeg kunne lave det som requests, i stedet for at åbne et browser vindue
Du burde nok sætte en user agent, tror ikke det har noget med javascript at gøre.

https://stackoverflow.com/questions/8021...b2-urlopen
Det er prøvet, det virker ikke
du kan sagtens koere selenium uden at skulle aabne et browservindue. enten koer chrome headless eller brug phantomJS.
PhatnomJS er lige præcis selenium bare uden at browser vinduet er synligt.
Ville helst have undgået den løsning, da det er noget der kommer til at kører på en raspberry pi. Men okay, det bliver nok den løsning så :) Tak for hjælpen
Hvis jeg var dig, ville jeg bestemt bruge BeautifulSoup eller PhantomJS, for at gøre dit liv lidt nemmere. Begge understøtter user agents, JavaScript osv.
Det bliver selenium jeg vil anvende, det kender jeg fra arbejde :)
Sider: 1 2