Top-Themen

Aktuelle Themen (A bis Z)

Administrator.de FeedbackApache ServerAppleAssemblerAudioAusbildungAuslandBackupBasicBatch & ShellBenchmarksBibliotheken & ToolkitsBlogsCloud-DiensteClusterCMSCPU, RAM, MainboardsCSSC und C++DatenbankenDatenschutzDebianDigitiales FernsehenDNSDrucker und ScannerDSL, VDSLE-BooksE-BusinessE-MailEntwicklungErkennung und -AbwehrExchange ServerFestplatten, SSD, RaidFirewallFlatratesGoogle AndroidGrafikGrafikkarten & MonitoreGroupwareHardwareHosting & HousingHTMLHumor (lol)Hyper-VIconsIDE & EditorenInformationsdiensteInstallationInstant MessagingInternetInternet DomäneniOSISDN & AnaloganschlüsseiTunesJavaJavaScriptKiXtartKVMLAN, WAN, WirelessLinuxLinux DesktopLinux NetzwerkLinux ToolsLinux UserverwaltungLizenzierungMac OS XMicrosoftMicrosoft OfficeMikroTik RouterOSMonitoringMultimediaMultimedia & ZubehörNetzwerkeNetzwerkgrundlagenNetzwerkmanagementNetzwerkprotokolleNotebook & ZubehörNovell NetwareOff TopicOpenOffice, LibreOfficeOutlook & MailPapierkorbPascal und DelphiPeripheriegerätePerlPHPPythonRechtliche FragenRedHat, CentOS, FedoraRouter & RoutingSambaSAN, NAS, DASSchriftartenSchulung & TrainingSEOServerServer-HardwareSicherheitSicherheits-ToolsSicherheitsgrundlagenSolarisSonstige SystemeSoziale NetzwerkeSpeicherkartenStudentenjobs & PraktikumSuche ProjektpartnerSuseSwitche und HubsTipps & TricksTK-Netze & GeräteUbuntuUMTS, EDGE & GPRSUtilitiesVB for ApplicationsVerschlüsselung & ZertifikateVideo & StreamingViren und TrojanerVirtualisierungVisual StudioVmwareVoice over IPWebbrowserWebentwicklungWeiterbildungWindows 7Windows 8Windows 10Windows InstallationWindows MobileWindows NetzwerkWindows ServerWindows SystemdateienWindows ToolsWindows UpdateWindows UserverwaltungWindows VistaWindows XPXenserverXMLZusammenarbeit

PHP-Spider startet sich selbst und läuft über Timeout und Browserabbruch

Mitglied: jm23

jm23 (Level 1) - Jetzt verbinden

21.06.2007 um 14:24 Uhr, 2741 Aufrufe

Hallo,

ich entwickle zur Zeit einen Spider, der ca. 40000 Inserate (auf jeweils einer Seite dargestellt) in eine Datenbank einliest. Leider macht PHP, was es will...

Während des Einlesens der Seite mit fsockopen (nicht fopen, da POST-Daten verschickt werden müssen) schreibe ich in ein Logfile. Wenn ich das Script im Browser starte, wird zwar nur ein Ladebalken gezeigt, aber das Logfile wird geschrieben. Soweit so gut. Da aber mein Script ziemlich lange dauert, bis alles eingelesen ist (bei 4000 Inseraten ca. 20 min), zeigt der Firefox nach ein paar Minuten eine leere Seite an und ladet nicht mehr. Das Script läuft aber weiter (da ich das am Logfile sehe). Das ist schon nur daran komisch, weil das Timeout von PHP in der Konfiguration auf 30s (Standard) gesetzt ist. Was noch verrückter ist: nach dem Start des Scripts startet etwa im Intervall von 2 Minuten 3-4 mal eine neue Instanz des selben Scripts...

Hat irgend jemand eine Ahnung was da los ist?

Gruss
jm
Ähnliche Inhalte
PHP
PHP läuft auf Sparflamme
gelöst Frage von AndroxinPHP

Moin, moin. Ich möchte die 64 Bit Version der php5ts.dll direkt aus einer (64 Bit) Software (MBS Plugin im ...

Apache Server

Nach PHP7-Installation - PHP läuft nicht im Browsser

gelöst Frage von bolshiApache Server2 Kommentare

Hallo, Beim Laden der phpinfo() im Browser wird PHP nur als Text ausgegeben. Bislang lief PHP5.6 unter Ubuntu 14.04. ...

Datenbanken

ODBC Timeout bei Datensatz löschen bzw. SQL MStudio läuft sich tot

Frage von greatmgmDatenbanken2 Kommentare

Hallo zusammen, stehe vor einem Rätsel Access greift via ODBC auf eine SQL 2008 R2 Datenbank zu. In einer ...

Netzwerkmanagement

Lantronix Spider Duo überträgt keine Maus-Tastatur

Frage von fnbaluNetzwerkmanagement1 Kommentar

Hallo zusammen, ich habe mir einen Lantronix Spider Duo gegönnt. Wenn ich an den lokalen Ports eine Tastatur/Maus hänge, ...

Neue Wissensbeiträge
Sicherheit
Sicherheitsrisiko: Die Krux mit 7-Zip
Information von kgborn vor 4 StundenSicherheit

Bei vielen Anwendern ist das Tool 7-Zip zum Entpacken von Archivdateien im Einsatz. Die Software ist kostenlos und steht ...

Internet

Datendealing im WWW Tracking Methoden immer brutaler

Information von sabines vor 14 StundenInternet

Interessanter Artikel zum Thema Tracking im WWW und die immer "besseren" Methoden des Trackings. Professor Arvind Narayanan (Princeton-Universität) betreibt ...

Erkennung und -Abwehr

Ups: Einfaches Nullzeichen hebelte den Anti-Malware-Schutzt in Windows 10 aus

Information von kgborn vor 1 TagErkennung und -Abwehr

Windows 10 ist das sicherste Windows aller Zeiten, wie Microsoft betont. Insidern ist aber klar, das es da Lücken, ...

Windows 10

Windows 10 on ARM: von Microsoft entfernte Info - Klartext, was nicht geht

Information von kgborn vor 1 TagWindows 10

Windows 10 on ARM ist ja eine neue Variante, die Microsoft im Verbund mit Geräteherstellern am Markt etablieren will. ...

Heiß diskutierte Inhalte
Server
Route-Befehl Unterstützung (unter CMD)
gelöst Frage von FKRR56Server36 Kommentare

Guten Tag , i.M. habe ich Probleme über den CMD-Route-Befehl ein Routing auf einen entfernten Server zuzulassen. Der Server ...

Windows 10
Windows 10 (1709) Tastur und Maus wieder einschalten?
Frage von LochkartenstanzerWindows 1028 Kommentare

Moin, Ich habe von einem Kunden einen Win10-Rechner bekommen, bei dem weder Tastatur noch Maus geht. Die Hardware funktioniert ...

Microsoft
TV-Tipp: Das Microsoft-Dilemma
Information von kgbornMicrosoft17 Kommentare

Aktuell gibt es in Behörden und in Firmen eine fatale Abhängigkeit von Microsoft und dessen Produkten. Planlos agieren die ...

Webbrowser
Welcher Browser ist der Beste?
Frage von justtinWebbrowser15 Kommentare

Hallo Leute Ich habe eine interessante Frage. Mich wurde mal interessieren welcher Browser ist eure meinung nach der beste? ...