Finaler Content aus scriptgenerierter Webseite auslesen

Hallo Community,

ich soll für meinen Chef eine automatisierte Auswertung erstellen. Als Datenquelle ist mir nur ein intranetseitig verfügbares Webdokument gegeben, welches auf KIBANA basiert.

Idealerweise sollte dies mittels Linux-Shell als Script realisiert werden, aber es muss nicht zwangsweise per Shell realisiert werden.

Leider aber erhalte ich bsi jetzt nicht, wie gewünscht, den HTML Code zuurück, der die Ergebnisseite produziert. Viel mehr sehe ich wie im HTML Code Scripts aufgerufen werden, die wohl den finalen Content erzeugen.

Allerdings würde ich eben gerne diesen finalen Content in eine Variable ziehen und nicht die content-generierenden Scriptaufrufe.

Bis jetzt habe ich folgendes vergeblich versucht:




Den eigentlichen HTML Code, der den sichtbaren Inhalt erzeugt, konnte ich bis jetzt nur mit dem FireFox PlugIn "Webdeveloper" sehen. Allerdings ist es keine Lösung diesen manuell abzukopieren. Man müsste diese Ansicht des Firefox per Befehl auslesen können, was wohl kaum möglich ist....

Da dies auf einer Windowsmaschine entwickelt wird (Linux Bash ist nur via CYGwin vorhanden), wäre zB auch Excel oder Powerscript eine mögliche Basis zur Umsetzung.

Vielleicht hat ja jemand einen Tip für mich.

# Neuen IE-Prozess erzeugen
$i = New-Object -Com InternetExplorer.Application
# Fenster sichtbar machen (kein Muss kann später unsichtbar laufen)
$i.Visible = $true
# Webseite aufrufen
$i.Navigate("http://site.de")  
while($i.Busy){sleep .3}
# Zusätzlichen sleep einbauen damit dynmaischer Content nachgeladen werden kann
sleep 1
# irgendein DOM-Object auslesen
$i.document.getElementById('global-login-field').value  
# Browser beenden
$i.Quit()
# COM ressourcen freigeben
[System.Runtime.InteropServices.Marshal]::ReleaseComObject($i)