Top-Themen

AppleEntwicklungHardwareInternetLinuxMicrosoftMultimediaNetzwerkeOff TopicSicherheitSonstige SystemeVirtualisierungWeiterbildungZusammenarbeit

Aktuelle Themen

Administrator.de FeedbackApache ServerAppleAssemblerAudioAusbildungAuslandBackupBasicBatch & ShellBenchmarksBibliotheken & ToolkitsBlogsCloud-DiensteClusterCMSCPU, RAM, MainboardsCSSC und C++DatenbankenDatenschutzDebianDigitiales FernsehenDNSDrucker und ScannerDSL, VDSLE-BooksE-BusinessE-MailEntwicklungErkennung und -AbwehrExchange ServerFestplatten, SSD, RaidFirewallFlatratesGoogle AndroidGrafikGrafikkarten & MonitoreGroupwareHardwareHosting & HousingHTMLHumor (lol)Hyper-VIconsIDE & EditorenInformationsdiensteInstallationInstant MessagingInternetInternet DomäneniOSISDN & AnaloganschlüsseiTunesJavaJavaScriptKiXtartKVMLAN, WAN, WirelessLinuxLinux DesktopLinux NetzwerkLinux ToolsLinux UserverwaltungLizenzierungMac OS XMicrosoftMicrosoft OfficeMikroTik RouterOSMonitoringMultimediaMultimedia & ZubehörNetzwerkeNetzwerkgrundlagenNetzwerkmanagementNetzwerkprotokolleNotebook & ZubehörNovell NetwareOff TopicOpenOffice, LibreOfficeOutlook & MailPapierkorbPascal und DelphiPeripheriegerätePerlPHPPythonRechtliche FragenRedHat, CentOS, FedoraRouter & RoutingSambaSAN, NAS, DASSchriftartenSchulung & TrainingSEOServerServer-HardwareSicherheitSicherheits-ToolsSicherheitsgrundlagenSolarisSonstige SystemeSoziale NetzwerkeSpeicherkartenStudentenjobs & PraktikumSuche ProjektpartnerSuseSwitche und HubsTipps & TricksTK-Netze & GeräteUbuntuUMTS, EDGE & GPRSUtilitiesVB for ApplicationsVerschlüsselung & ZertifikateVideo & StreamingViren und TrojanerVirtualisierungVisual StudioVmwareVoice over IPWebbrowserWebentwicklungWeiterbildungWindows 7Windows 8Windows 10Windows InstallationWindows MobileWindows NetzwerkWindows ServerWindows SystemdateienWindows ToolsWindows UpdateWindows UserverwaltungWindows VistaWindows XPXenserverXMLZusammenarbeit

PHP-Spider startet sich selbst und läuft über Timeout und Browserabbruch

Frage Entwicklung PHP

Mitglied: jm23

jm23 (Level 1) - Jetzt verbinden

21.06.2007 um 14:24 Uhr, 2730 Aufrufe

Hallo,

ich entwickle zur Zeit einen Spider, der ca. 40000 Inserate (auf jeweils einer Seite dargestellt) in eine Datenbank einliest. Leider macht PHP, was es will...

Während des Einlesens der Seite mit fsockopen (nicht fopen, da POST-Daten verschickt werden müssen) schreibe ich in ein Logfile. Wenn ich das Script im Browser starte, wird zwar nur ein Ladebalken gezeigt, aber das Logfile wird geschrieben. Soweit so gut. Da aber mein Script ziemlich lange dauert, bis alles eingelesen ist (bei 4000 Inseraten ca. 20 min), zeigt der Firefox nach ein paar Minuten eine leere Seite an und ladet nicht mehr. Das Script läuft aber weiter (da ich das am Logfile sehe). Das ist schon nur daran komisch, weil das Timeout von PHP in der Konfiguration auf 30s (Standard) gesetzt ist. Was noch verrückter ist: nach dem Start des Scripts startet etwa im Intervall von 2 Minuten 3-4 mal eine neue Instanz des selben Scripts...

Hat irgend jemand eine Ahnung was da los ist?

Gruss
jm
Ähnliche Inhalte
Apache Server
gelöst Nach PHP7-Installation - PHP läuft nicht im Browsser (2)

Frage von bolshi zum Thema Apache Server ...

LAN, WAN, Wireless
Periodischer Timeout in VPN (7)

Frage von lupi102 zum Thema LAN, WAN, Wireless ...

Windows Server
gelöst WSUS-Cleanup timeout (8)

Frage von DerWoWusste zum Thema Windows Server ...

Neue Wissensbeiträge
Windows Server

Umstellung SHA 1 auf SHA 2 - Migration der CA von CSP auf KSP

Tipp von Badger zum Thema Windows Server ...

Windows 10

Quato DTP94 unter Windows 10 x64 installieren und verwenden

Anleitung von anteNope zum Thema Windows 10 ...

Windows 10

Win10 1703 und Nutzerkennwörter bei Ersteinrichtung - erstaunliche Erkenntnis

(15)

Erfahrungsbericht von DerWoWusste zum Thema Windows 10 ...

Heiß diskutierte Inhalte
Windows 7
Bluesreens unternehmensweit (18)

Frage von SYS64738 zum Thema Windows 7 ...

Server-Hardware
HP DL380 G7: Booten vom USB via USB 3.1-PCI-e Karte möglich? (17)

Frage von Paderman zum Thema Server-Hardware ...

LAN, WAN, Wireless
IP Adressen - Modem - Switch - Accesspoint (17)

Frage von teuferl82 zum Thema LAN, WAN, Wireless ...

Festplatten, SSD, Raid
gelöst Raid-Controller (Areca) Datenverlust trotz R5 (16)

Frage von sebastian2608 zum Thema Festplatten, SSD, Raid ...