Daten aus den Netz ziehen?

Diskutiere Daten aus den Netz ziehen? im Developer Network Forum im Bereich Hardware & Software Forum; Hi Ich weiss es gibt ja fertige Programme auf Unix Basis die es einen erlauben Daten aus Webseiten zb. die komplette HTML, XML,... Seite oder nur...
  • Daten aus den Netz ziehen? Beitrag #1
B

Bitte gib deinen gewünsch

Bekanntes Mitglied
Dabei seit
27.11.2014
Beiträge
68
Reaktionspunkte
0
Hi
Ich weiss es gibt ja fertige Programme auf Unix Basis die es einen erlauben Daten aus Webseiten zb. die komplette HTML, XML,... Seite oder nur teile daraus raus zu ziehen und archivieren.
Mein Problem ist halt das es diverse Seiten gibt wo die Leute so deppert sind und eine .csv als "Api" benutzen. :aufsmaul: echt... :mecker: Jetzt müsste man die .csv immer runter laden wenn sie sich aktualisiert hat und die Daten aus der .csv müssen in einer SQL Datenbank auf einen Server wo sie dann auf einer Homepage eingebunden werden können.
:goil: Simple nicht?
 
  • Daten aus den Netz ziehen? Beitrag #2
fox99

fox99

Bekanntes Mitglied
Dabei seit
27.11.1999
Beiträge
3.948
Reaktionspunkte
27
Ort
Omicron Persei 8
Klingt jetzt nicht so kompliziert.

Herunterladen könnte man so machen: https://stackoverflow.com/a/35371451


Das Eintragen in eine Datenbank hängt von der Tabellenstruktur ab...
 
  • Daten aus den Netz ziehen? Beitrag #3
B

Bitte gib deinen gewünsch

Bekanntes Mitglied
Dabei seit
27.11.2014
Beiträge
68
Reaktionspunkte
0
  • Daten aus den Netz ziehen? Beitrag #4
fox99

fox99

Bekanntes Mitglied
Dabei seit
27.11.1999
Beiträge
3.948
Reaktionspunkte
27
Ort
Omicron Persei 8
Was soll das machen?
Eine URL Herunterladen, als CSV parsen und dann Zeilenweise auf der Konsole ausgeben.

Ideal wäre es wenn es der Webserver direkt intern verarbeiten könnte.
Welche möglichkeiten hast du auf deinem Server?

Phu keine Ahnung wie das funktioniert hast du eine idee wie, wo Ich nachschauen kann wie und was der Server verwendet?
Sollte in dem Vertrag drin stehen, den du mit deinem Serverhoster hast.
 
  • Daten aus den Netz ziehen? Beitrag #5
B

Bitte gib deinen gewünsch

Bekanntes Mitglied
Dabei seit
27.11.2014
Beiträge
68
Reaktionspunkte
0
auf der Konsole ausgeben.
Ich spiele doch nicht am Server?!
Welche möglichkeiten hast du auf deinem Server?
nicht viele ist halt ein Standard Angebot vom Webserver. Nen Crownjob mehr oder weniger.
Sollte in dem Vertrag drin stehen, den du mit deinem Serverhoster hast.
hmm gute frage wo der ist. der bucht immer die 50€ ab und gut ist es.
 
Thema:

Daten aus den Netz ziehen?

ANGEBOTE & SPONSOREN

https://www.mofapower.de/

Statistik des Forums

Themen
213.179
Beiträge
1.579.171
Mitglieder
55.876
Neuestes Mitglied
RamiroGarn
Oben