Top-Themen

Aktuelle Themen (A bis Z)

Administrator.de FeedbackApache ServerAppleAssemblerAudioAusbildungAuslandBackupBasicBatch & ShellBenchmarksBibliotheken & ToolkitsBlogsCloud-DiensteClusterCMSCPU, RAM, MainboardsCSSC und C++DatenbankenDatenschutzDebianDigitiales FernsehenDNSDrucker und ScannerDSL, VDSLE-BooksE-BusinessE-MailEntwicklungErkennung und -AbwehrExchange ServerFestplatten, SSD, RaidFirewallFlatratesGoogle AndroidGrafikGrafikkarten & MonitoreGroupwareHardwareHosting & HousingHTMLHumor (lol)Hyper-VIconsIDE & EditorenInformationsdiensteInstallationInstant MessagingInternetInternet DomäneniOSISDN & AnaloganschlüsseiTunesJavaJavaScriptKiXtartKVMLAN, WAN, WirelessLinuxLinux DesktopLinux NetzwerkLinux ToolsLinux UserverwaltungLizenzierungMac OS XMicrosoftMicrosoft OfficeMikroTik RouterOSMonitoringMultimediaMultimedia & ZubehörNetzwerkeNetzwerkgrundlagenNetzwerkmanagementNetzwerkprotokolleNotebook & ZubehörNovell NetwareOff TopicOpenOffice, LibreOfficeOutlook & MailPapierkorbPascal und DelphiPeripheriegerätePerlPHPPythonRechtliche FragenRedHat, CentOS, FedoraRouter & RoutingSambaSAN, NAS, DASSchriftartenSchulung & TrainingSEOServerServer-HardwareSicherheitSicherheits-ToolsSicherheitsgrundlagenSolarisSonstige SystemeSoziale NetzwerkeSpeicherkartenStudentenjobs & PraktikumSuche ProjektpartnerSuseSwitche und HubsTipps & TricksTK-Netze & GeräteUbuntuUMTS, EDGE & GPRSUtilitiesVB for ApplicationsVerschlüsselung & ZertifikateVideo & StreamingViren und TrojanerVirtualisierungVisual StudioVmwareVoice over IPWebbrowserWebentwicklungWeiterbildungWindows 7Windows 8Windows 10Windows InstallationWindows MobileWindows NetzwerkWindows ServerWindows SystemdateienWindows ToolsWindows UpdateWindows UserverwaltungWindows VistaWindows XPXenserverXMLZusammenarbeit

gelöst Erste und letzte Zeile in großen Dateien schnell löschen

Mitglied: StefanK007

StefanK007 (Level 1) - Jetzt verbinden

26.01.2012 um 11:51 Uhr, 5626 Aufrufe, 7 Kommentare

Hallo,

ich bekomme täglich mehrere Dateien welche importiert werden sollen.
In allen Dateien muss die erste und letzte Zeile gelöscht werden.
Nach dem Inhalt kann man nicht suchen, da er keine Schlagwörter oder ähnliches beinhaltet.

Eine fast perfekte Lösung habe ich hier gefunden: https://www.administrator.de/index.php?content=51400
Allerdings bricht der Befehl "More +1 TEST.DAT >..\TEMP\TEST.DAT" ab, falls die Datei mehr als 65535 Zeilen beinhaltet.

Der erste Beitrag (siehe Link!) funktioniert zwar bei den großen Dateien, ist aber zu langsam für die vielen Dateien.

Gibt es eine Möglichkeit "more" mit mehr als 65.535 Zeilen zu nutzen?
Oder gibt es eine gute Alternative?

Viele Grüße
Stefan
Mitglied: bastla
26.01.2012 um 12:33 Uhr
Hallo StefanK007!

Ob die folgende Alternative gut ist, müsstest Du testen :
01.
@echo off & setlocal 
02.
set "Ein=D:\Viele Zeilen.txt" 
03.
set "Aus=D:\Etwas weniger Zeilen.txt" 
04.
 
05.
set R=%temp%\Reduziere.vbs 
06.
 >%R% echo Set fso=CreateObject("Scripting.FileSystemObject"):T=Split(fso.OpenTextFile("%Ein%").ReadAll,vbCrLf):T(0)="" 
07.
>>%R% echo L=UBound(T):If T(L)="" Then T(L-1)="":Else:T(L)="":End If:TR=Join(T,vbCrLf):fso.CreateTextFile("%Aus%").Write Mid(TR,3,Len(TR)-4) 
08.
cscript //nologo %R%
Grüße
bastla
Bitte warten ..
Mitglied: StefanK007
26.01.2012 um 14:12 Uhr
Danke, werde es mal testen.
Habe nun ein VBS Script entwickelt bekommen, welches auch sehr fix ist.
Batch ist aber eigentlich einfacher zu handeln ;)
Bitte warten ..
Mitglied: bastla
26.01.2012 um 14:22 Uhr
Hallo StefanK007!
Habe nun ein VBS Script entwickelt bekommen
Ob Dir wohl in Zeile 5 etwas aufgefallen ist?

Grüße
bastla
Bitte warten ..
Mitglied: VooDoo4711
26.01.2012 um 16:29 Uhr
Hallo,

Du könntest auch in die Unix/Linux-Trickkiste greifen und den SED verwenden.
SED for Windows unter: http://gnuwin32.sourceforge.net/packages/sed.htm

Dann sollte ein

type TEST.DAT | sed "1d;\$d" > TEST2.DAT

reichen.
Bitte warten ..
Mitglied: icsat
26.01.2012 um 19:48 Uhr
Hallo StefanK007,

ich kann Dir aus meiner Erfahrung heraus nur empfehlen für (sehr) große Dateien die mit Bordmitteln verarbeitet werden sollen VBS zu verwenden. Der Unterschied kann schnell im Bereich von mehreren Minuten liegen.
Ich musste z.B. mal in einer Datei (ca. 1- 1,5 GB mit über 1 Mio. Datensätzen) täglich die erste Stelle in jedem Datensatz von 0 auf 2 ändern. Mein Batch lag bei ca. 30 Minuten und das entsprechende VBS bei ca. 30 Sekunden (oder drunter) wenn ich mich recht erinnere. Daher verwende das für Dich entwickelte VBS oder eben bastlas "Batch".


Gruß icsat
Bitte warten ..
Mitglied: pieh-ejdsch
30.01.2012 um 15:15 Uhr
moin,

in native Batch hmm eventuell so
01.
@echo off &setlocal 
02.
if "%~1" == "" echo Syntaxfehler. >&2 &echo Dateien zum Bearbeiten dem Batch uebergeben &pause &goto :eof 
03.
:nochmal 
04.
set "Zeile=" 
05.
findstr /n "^" %1>"%temp%\TMP1" 
06.
setlocal enabledelayedexpansion 
07.
08.
for /f "skip=1usebackq delims=" %%i in ("%temp%\TMP1") do (if defined Zeile echo(!Zeile:*:=! 
09.
	endlocal 
10.
	set "Zeile=%%i" 
11.
	setlocal enabledelayedexpansion 
12.
13.
)>"%~dpn1-Neu-%~x1" 
14.
endlocal 
15.
if "%~2" == "" goto :eof 
16.
shift 
17.
goto :nochmal


Gruß Phil
Bitte warten ..
Mitglied: StefanK007
03.02.2012 um 10:48 Uhr
Danke für eure Infos!
Ich werde es mir die Tage zu Gemüte führen.
Bitte warten ..
Ähnliche Inhalte
Batch & Shell

Batch um Zeichen aus erster und letzter Zeile einer TXT Datei zu löschen

Frage von Bobby0712Batch & Shell2 Kommentare

Hallo. Wie der Titel schon sagt suche ich eine möglichkeit wie ich aus einer TXT Datei aus der ersten ...

Batch & Shell

Mehrere txt Dateien einlesen und letzte Zeile löschen

gelöst Frage von THRILLERBatch & Shell1 Kommentar

Hallo Gemeinde, ich beschäftige mich mit folgendem Problem. Und zwar will ich aus einem Ordner mehrere Dateien einlesen und ...

Batch & Shell

Per Batch erste Zeile aus CSV Dateien löschen

gelöst Frage von sirOneBatch & Shell15 Kommentare

Hallo zusammen! Ich suche ein Batch Script, mit dem ich aus sämtlichen CSV Dateien in einem Unterordner die erste ...

Batch & Shell

Batch um erste Zeile einer CSV zu löschen

gelöst Frage von chris1987.1Batch & Shell6 Kommentare

Hallo, im Rahmen meiner Masterarbeit muss ich eine Vielzahl von csv Dateien untersuchen. Hierbei muss ich einige dieser Dateien ...

Neue Wissensbeiträge
Google Android

Googles "Android Enterprise Recommended" für Unternehmen

Information von kgborn vor 1 StundeGoogle Android

Hier eine Information, die für Administratoren und Verantwortliche in Unternehmen, die für die Beschaffung und das Rollout von Android-Geräten ...

Sicherheit

Intel gibt neue Spectre V2-Microcode-Updates frei (20.02.2018)

Information von kgborn vor 1 StundeSicherheit

Intel hat zum 20. Februar 2018 weitere Microcode-Updates für OEMs freigegeben, um Systeme mit neueren Prozessoren gegen die Spectre ...

Microsoft
ARD-Doku - Das Microsoft Dilemma
Tipp von Knorkator vor 4 StundenMicrosoft2 Kommentare

Hallo zusammen, vor einigen Tagen lief in der ARD u.a. Reportage. Das Youtube Video dazu dürfte länger verfügbar sein. ...

Windows 10

Neue Sicherheitslücke in Windows 10 (Version 1709) durch Google öffentlich geworden

Information von kgborn vor 22 StundenWindows 10

Vor ein paar Tagen haben Googles Sicherheitsforscher vom Projekt Zero eine Sicherheitslücke im Edge-Browser publiziert. Jetzt wurde eine weitere ...

Heiß diskutierte Inhalte
Windows Server
AD DS findet Domäne nicht, behebbar?
Frage von schapitzWindows Server35 Kommentare

Guten Tag, ich habe bei einem Kunden ein Problem mit den AD DS. Umgebung ist folgende: Windows Server 2016 ...

Router & Routing
LANCOM VPN CLIENT einrichten
Frage von Finchen961988Router & Routing27 Kommentare

Hallo, ich habe ein Problem und hoffe ihr könnt mir helfen, wir haben einen Kunden der hat einen Speedport ...

CPU, RAM, Mainboards
32 gb RAM zu wenig?
Frage von pcguyCPU, RAM, Mainboards13 Kommentare

Hallo zusammen, mein PC verfügt über 32GB Ram. Nun kriege ich bei grossen Dateien im Illustrator die Fehlermeldung das ...

Router & Routing
ISC DHCP 2 Subnetze
gelöst Frage von janosch12Router & Routing9 Kommentare

Hallo, ich betreibe bei mir im Netzwerk einen ISC DHCP Server auf Debian, der DHCP verwaltet aktuell ein /24 ...