Top-Themen

Aktuelle Themen (A bis Z)

Administrator.de FeedbackApache ServerAppleAssemblerAudioAusbildungAuslandBackupBasicBatch & ShellBenchmarksBibliotheken & ToolkitsBlogsCloud-DiensteClusterCMSCPU, RAM, MainboardsCSSC und C++DatenbankenDatenschutzDebianDigitiales FernsehenDNSDrucker und ScannerDSL, VDSLE-BooksE-BusinessE-MailEntwicklungErkennung und -AbwehrExchange ServerFestplatten, SSD, RaidFirewallFlatratesGoogle AndroidGrafikGrafikkarten & MonitoreGroupwareHardwareHosting & HousingHTMLHumor (lol)Hyper-VIconsIDE & EditorenInformationsdiensteInstallationInstant MessagingInternetInternet DomäneniOSISDN & AnaloganschlüsseiTunesJavaJavaScriptKiXtartKVMLAN, WAN, WirelessLinuxLinux DesktopLinux NetzwerkLinux ToolsLinux UserverwaltungLizenzierungMac OS XMicrosoftMicrosoft OfficeMikroTik RouterOSMonitoringMultimediaMultimedia & ZubehörNetzwerkeNetzwerkgrundlagenNetzwerkmanagementNetzwerkprotokolleNotebook & ZubehörNovell NetwareOff TopicOpenOffice, LibreOfficeOutlook & MailPapierkorbPascal und DelphiPeripheriegerätePerlPHPPythonRechtliche FragenRedHat, CentOS, FedoraRouter & RoutingSambaSAN, NAS, DASSchriftartenSchulung & TrainingSEOServerServer-HardwareSicherheitSicherheits-ToolsSicherheitsgrundlagenSolarisSonstige SystemeSoziale NetzwerkeSpeicherkartenStudentenjobs & PraktikumSuche ProjektpartnerSuseSwitche und HubsTipps & TricksTK-Netze & GeräteUbuntuUMTS, EDGE & GPRSUtilitiesVB for ApplicationsVerschlüsselung & ZertifikateVideo & StreamingViren und TrojanerVirtualisierungVisual StudioVmwareVoice over IPWebbrowserWebentwicklungWeiterbildungWindows 7Windows 8Windows 10Windows InstallationWindows MobileWindows NetzwerkWindows ServerWindows SystemdateienWindows ToolsWindows UpdateWindows UserverwaltungWindows VistaWindows XPXenserverXMLZusammenarbeit

Daten aus HTML-Seite in MySQL importieren

Mitglied: Seelbreaker

Seelbreaker (Level 1) - Jetzt verbinden

27.03.2009, aktualisiert 11:43 Uhr, 4900 Aufrufe, 1 Kommentar

Da diese Frage sowohl HTML als auch DBs behandelt war ich mir nicht sicher wohin es genau gehört, da es aber meiner Meinung nach mehr in Richtung DB gehört habe ich es in diesen Bereich getan. Sollte es falsch sein, verzeiht mir ^^ Zudem möchte ich noch erwähnen, dass das meine Kentnisse sich nur auf html beschränken aber mir klar ist, dass ich für diese Sache wohl was dazulernen werde Aber jeder hat ja von vorn angefangen und eine Starthilfe ist immer nett

Nun aber zum eigentlichen Thema. Ich möchte Daten aus einer html Datei welche auf einem Game-Server eines MMORPG liegt in eine MySQL Datenbank importieren. Diese Daten sollen dann auch durch MySQL (soweit es geplante Tasks kann) automatisch aktualisiert werden. Der Knackpunkt ist aber, dass man sich sozusagen erstmal einloggen muss um auf die echten Daten zuzugreifen. Hierfür habe ich die folgenden Links gesnifft:

Die 2 nötigen Schritte zum abrufen der Daten:

Login
http:
nguild.cabalonline.com/CabalGuild/SecureLogin.aspx?EncVal=h296vtT3KwAc%2Bu2ehxYtNdHAwaK%2FbKT6wKs68XYUisp6%2B3IETvHau3GGYKIBFENEmOWSd5U9%2BiqQ%2BYWf2ssbctNP42UdP%2B2af2WvoTKDGCk%3D&isreal=y

Memberinfo
http:
nguild.cabalonline.com/CabalGuild/Board/GetMember.aspx?guildno=1949&serverno=4&sort=lev&direction=DESC&_=


Sobald der 1. Link aufgerufen wurde, kann man beliebig oft den 2. Link aufrufen, auch wenn der 1. geschlossen ist (da der wohl ein cookie oder irgendwas speichert). Nach dem löschen der temporären Daten geht es jedenfalls nicht mehr.

Die Memberinfo an sich besteht wie man im Quelltext sehen kann aus mehreren Tabellen.

Daher eben die folgende Problemstellung:
Ist es möglich eine Abfrage zu erstellen, welche die Daten aus der Memberinfo rausnimmt und in eine MySQL Datenbank reinkopiert?
Die Memberinfo beispielsweise viertelstündlich oder stündlich je nachdem was möglich ist aktualisiert?

Die MySQL Datenbank liegt auf ohost.de. Wenn es bei denen nicht möglich ist, aber bei anderen SQL Hostern die 24/7 erreichbar und kostenlos sind bin ich auch bereit es da zu realisieren. Da ich dann später aufbauend auf diese Datenbank eine Art "Wer ist gerade ingame Online" Übersicht machen will und dann noch einen Abgleich der IngameNamen mit dem Forennickname machen möchte. Dann soll noch eine Art aktivitätsübersicht hinzukommen. Aber erstmal geht es um das Grundgerüst, die HTML Daten in eine DB zu packen um diese für später Abfragen wieder nutzen zu können.

Vielen Dank im Voraus für das Lesen des Beitrages und mögliche Hilfen!

Gruß
Seelbreaker
Mitglied: scan5416
28.04.2009 um 01:23 Uhr
Hi,

So einfach ist das nicht.

Da benötigst du schon ein bischen programmier Erfahrung. Und zwar würde ich das als PHP "Programmierer" in PHP lösen.
Es kommt mir jetzt gerade nur eine aufwendige Methode in den Sinn:

1. Du rufst über Cron Job die erste Seite auf. Musst ausprobieren ob dies mit dem Cookie Funktionert
2. Du speicherst von der zweiten Seite den Quellcode in dem du die seite als Textformat herunterlädst (http://www.selfphp.de/forum/showthread.php?t=14322 sollte ein beispiel script stehen)
3. Durch ein PHP Script welches auch wieder von CronJob ausgeführt wird, lädst du die zuvor gespeicherte Datei ein und durchvorstet den Quellcode nach gewissen Abschnitten und schneidest dir dann die gewünschten Daten dur str_substring heraus.
4. Die substring mit einer SQL Query in die DB schreiben

Selbstverständlich kannst du dies auch mit asp oder so programmieren. Da kann ich dir aber nicht weiterhelfen.

So einfach mal schnell durch den Kopf gelassen sollte das mit einigen Umwegen und schwirigkeiten funktionieren.

Ohne Garantie!

Gruss

Scan
Bitte warten ..
Ähnliche Inhalte
Batch & Shell

Kann man mit Power Schell auch Daten von HTML Seiten auslesen?

gelöst Frage von Maik007Batch & Shell4 Kommentare

Hi, nachdem ich nun schon hier sehr professionell gute Hilfe bekommen habe, frage ich mich ob man ggfs. eine ...

Batch & Shell

HTML-Seiten öffnen und bestimmte Daten auslesen

gelöst Frage von makroll10Batch & Shell1 Kommentar

Hallo, ich möchte hintereinander verschiedene HTML-Seiten hintereinander per IP-Adresse aufrufen, bestimmte Daten daraus auslesen und diese Daten dann lokal ...

Datenbanken

MySQL Datenbank in MSSQL importieren

Frage von MaffiDatenbanken6 Kommentare

Hallo, ich habe eine MySQL Datenbank und würde Sie gerne in MSSQL EXPRESS importieren, ich nutze das "Microsoft SQL ...

PHP

HTML PHP MySQL Webanwendung

Frage von hahaxd3PHP12 Kommentare

Hallo Leute, Ich möchte gerne Meine Datenbank auf einer webseite darstellen. Dabei sollte diese Als normale Tabelle dargestellt sein. ...

Neue Wissensbeiträge
Humor (lol)
IoT-Gefahr: Smartes Aquarium leckt!
Information von Lochkartenstanzer vor 1 TagHumor (lol)3 Kommentare

Moin, Die IoT-Manie hat weitere Opfer gefunden. Ein Casino-Leck durch ein smartes Aquarium: Allerdings haben sie kein Wasser, sondern ...

Router & Routing

Alte Fritzbox 7270 mit VPN und SIP-Telefonie hinter O2 Homebox 6641 als "Modem"

Erfahrungsbericht von the-buccaneer vor 1 TagRouter & Routing3 Kommentare

Nun war es soweit: Auch O2 hat mich mit VOIP zwangsbeglückt. Heute am Privatanschluss, in 2 Wochen ist das ...

Sicherheit

Ungepatchte Remote Code Execution-Lücke in LG NAS

Information von kgborn vor 2 TagenSicherheit

Nutzt wer LG NAS-Einheiten? In den NAS-Einheiten der LG Network Storage-Einheiten gibt es eine sehr unschöne Schwachstelle, die einen ...

Windows Update

Neue Version KB4099950 NIC Einstellungen gehen verloren

Information von sabines vor 2 TagenWindows Update2 Kommentare

Es ist eine neue Version des KB4099950 verfügbar, die das Problem mit den verlorenen Netzwerkeinstellungen lösen soll. Das Datum ...

Heiß diskutierte Inhalte
Router & Routing
Mikrotik: Routing zwischen Interfaces mit Geräten ohne Gateway
Frage von TonLichtVideoRouter & Routing18 Kommentare

Hallo zusammen, ich komme aus dem Veranstaltungstechnik Bereich und habe zwei Netze um verschiedene Hardware zu Remoten. CONTROL1 192.168.1.0/24 ...

Linux Netzwerk
Raspberry Pi 3: WLAN Power save deaktivieren
Frage von nordie92Linux Netzwerk14 Kommentare

Moin moin, mein Raspberry Pi 3 Model B benötigt eine dauerhaft aktive WLAN-Verbindung. Leider bricht die WLAN-Verbindung nach einigen ...

SAN, NAS, DAS
Entscheidung SAN Dell oder HP
Frage von VincorSAN, NAS, DAS13 Kommentare

Hallo, wir wollen uns für unsere Hyper V Umgebung eine neue SAN Anschaffen. Es laufen 30 VM's darunter, DC; ...

Vmware
Server 2008 r2 vmware terminalserver
Frage von MasterCVmware10 Kommentare

Guten Abend zusammen, ich hoffe , dass einer von euch mir weiterhelfen kann ,bei meinem kack Problem ! Ist ...