Top-Themen

Aktuelle Themen (A bis Z)

Administrator.de FeedbackApache ServerAppleAssemblerAudioAusbildungAuslandBackupBasicBatch & ShellBenchmarksBibliotheken & ToolkitsBlogsCloud-DiensteClusterCMSCPU, RAM, MainboardsCSSC und C++DatenbankenDatenschutzDebianDigitiales FernsehenDNSDrucker und ScannerDSL, VDSLE-BooksE-BusinessE-MailEntwicklungErkennung und -AbwehrExchange ServerFestplatten, SSD, RaidFirewallFlatratesGoogle AndroidGrafikGrafikkarten & MonitoreGroupwareHardwareHosting & HousingHTMLHumor (lol)Hyper-VIconsIDE & EditorenInformationsdiensteInstallationInstant MessagingInternetInternet DomäneniOSISDN & AnaloganschlüsseiTunesJavaJavaScriptKiXtartKVMLAN, WAN, WirelessLinuxLinux DesktopLinux NetzwerkLinux ToolsLinux UserverwaltungLizenzierungMac OS XMicrosoftMicrosoft OfficeMikroTik RouterOSMonitoringMultimediaMultimedia & ZubehörNetzwerkeNetzwerkgrundlagenNetzwerkmanagementNetzwerkprotokolleNotebook & ZubehörNovell NetwareOff TopicOpenOffice, LibreOfficeOutlook & MailPapierkorbPascal und DelphiPeripheriegerätePerlPHPPythonRechtliche FragenRedHat, CentOS, FedoraRouter & RoutingSambaSAN, NAS, DASSchriftartenSchulung & TrainingSEOServerServer-HardwareSicherheitSicherheits-ToolsSicherheitsgrundlagenSolarisSonstige SystemeSoziale NetzwerkeSpeicherkartenStudentenjobs & PraktikumSuche ProjektpartnerSuseSwitche und HubsTipps & TricksTK-Netze & GeräteUbuntuUMTS, EDGE & GPRSUtilitiesVB for ApplicationsVerschlüsselung & ZertifikateVideo & StreamingViren und TrojanerVirtualisierungVisual StudioVmwareVoice over IPWebbrowserWebentwicklungWeiterbildungWindows 7Windows 8Windows 10Windows InstallationWindows MobileWindows NetzwerkWindows ServerWindows SystemdateienWindows ToolsWindows UpdateWindows UserverwaltungWindows VistaWindows XPXenserverXMLZusammenarbeit
GELÖST

Erste und letzte Zeile in großen Dateien schnell löschen

Frage Entwicklung Batch & Shell

Mitglied: StefanK007

StefanK007 (Level 1) - Jetzt verbinden

26.01.2012 um 11:51 Uhr, 5584 Aufrufe, 7 Kommentare

Hallo,

ich bekomme täglich mehrere Dateien welche importiert werden sollen.
In allen Dateien muss die erste und letzte Zeile gelöscht werden.
Nach dem Inhalt kann man nicht suchen, da er keine Schlagwörter oder ähnliches beinhaltet.

Eine fast perfekte Lösung habe ich hier gefunden: http://www.administrator.de/index.php?content=51400
Allerdings bricht der Befehl "More +1 TEST.DAT >..\TEMP\TEST.DAT" ab, falls die Datei mehr als 65535 Zeilen beinhaltet.

Der erste Beitrag (siehe Link!) funktioniert zwar bei den großen Dateien, ist aber zu langsam für die vielen Dateien.

Gibt es eine Möglichkeit "more" mit mehr als 65.535 Zeilen zu nutzen?
Oder gibt es eine gute Alternative?

Viele Grüße
Stefan
Mitglied: bastla
26.01.2012 um 12:33 Uhr
Hallo StefanK007!

Ob die folgende Alternative gut ist, müsstest Du testen :
01.
@echo off & setlocal 
02.
set "Ein=D:\Viele Zeilen.txt" 
03.
set "Aus=D:\Etwas weniger Zeilen.txt" 
04.
 
05.
set R=%temp%\Reduziere.vbs 
06.
 >%R% echo Set fso=CreateObject("Scripting.FileSystemObject"):T=Split(fso.OpenTextFile("%Ein%").ReadAll,vbCrLf):T(0)="" 
07.
>>%R% echo L=UBound(T):If T(L)="" Then T(L-1)="":Else:T(L)="":End If:TR=Join(T,vbCrLf):fso.CreateTextFile("%Aus%").Write Mid(TR,3,Len(TR)-4) 
08.
cscript //nologo %R%
Grüße
bastla
Bitte warten ..
Mitglied: StefanK007
26.01.2012 um 14:12 Uhr
Danke, werde es mal testen.
Habe nun ein VBS Script entwickelt bekommen, welches auch sehr fix ist.
Batch ist aber eigentlich einfacher zu handeln ;)
Bitte warten ..
Mitglied: bastla
26.01.2012 um 14:22 Uhr
Hallo StefanK007!
Habe nun ein VBS Script entwickelt bekommen
Ob Dir wohl in Zeile 5 etwas aufgefallen ist?

Grüße
bastla
Bitte warten ..
Mitglied: VooDoo4711
26.01.2012 um 16:29 Uhr
Hallo,

Du könntest auch in die Unix/Linux-Trickkiste greifen und den SED verwenden.
SED for Windows unter: http://gnuwin32.sourceforge.net/packages/sed.htm

Dann sollte ein

type TEST.DAT | sed "1d;\$d" > TEST2.DAT

reichen.
Bitte warten ..
Mitglied: icsat
26.01.2012 um 19:48 Uhr
Hallo StefanK007,

ich kann Dir aus meiner Erfahrung heraus nur empfehlen für (sehr) große Dateien die mit Bordmitteln verarbeitet werden sollen VBS zu verwenden. Der Unterschied kann schnell im Bereich von mehreren Minuten liegen.
Ich musste z.B. mal in einer Datei (ca. 1- 1,5 GB mit über 1 Mio. Datensätzen) täglich die erste Stelle in jedem Datensatz von 0 auf 2 ändern. Mein Batch lag bei ca. 30 Minuten und das entsprechende VBS bei ca. 30 Sekunden (oder drunter) wenn ich mich recht erinnere. Daher verwende das für Dich entwickelte VBS oder eben bastlas "Batch".


Gruß icsat
Bitte warten ..
Mitglied: pieh-ejdsch
30.01.2012 um 15:15 Uhr
moin,

in native Batch hmm eventuell so
01.
@echo off &setlocal 
02.
if "%~1" == "" echo Syntaxfehler. >&2 &echo Dateien zum Bearbeiten dem Batch uebergeben &pause &goto :eof 
03.
:nochmal 
04.
set "Zeile=" 
05.
findstr /n "^" %1>"%temp%\TMP1" 
06.
setlocal enabledelayedexpansion 
07.
08.
for /f "skip=1usebackq delims=" %%i in ("%temp%\TMP1") do (if defined Zeile echo(!Zeile:*:=! 
09.
	endlocal 
10.
	set "Zeile=%%i" 
11.
	setlocal enabledelayedexpansion 
12.
13.
)>"%~dpn1-Neu-%~x1" 
14.
endlocal 
15.
if "%~2" == "" goto :eof 
16.
shift 
17.
goto :nochmal


Gruß Phil
Bitte warten ..
Mitglied: StefanK007
03.02.2012 um 10:48 Uhr
Danke für eure Infos!
Ich werde es mir die Tage zu Gemüte führen.
Bitte warten ..
Ähnliche Inhalte
Batch & Shell
Batch um Zeichen aus erster und letzter Zeile einer TXT Datei zu löschen
Frage von Bobby0712Batch & Shell2 Kommentare

Hallo. Wie der Titel schon sagt suche ich eine möglichkeit wie ich aus einer TXT Datei aus der ersten ...

Batch & Shell
Mehrere txt Dateien einlesen und letzte Zeile löschen
gelöst Frage von THRILLERBatch & Shell1 Kommentar

Hallo Gemeinde, ich beschäftige mich mit folgendem Problem. Und zwar will ich aus einem Ordner mehrere Dateien einlesen und ...

Batch & Shell
Per Batch erste Zeile aus CSV Dateien löschen
gelöst Frage von sirOneBatch & Shell15 Kommentare

Hallo zusammen! Ich suche ein Batch Script, mit dem ich aus sämtlichen CSV Dateien in einem Unterordner die erste ...

Batch & Shell
Batch um erste Zeile einer CSV zu löschen
gelöst Frage von chris1987.1Batch & Shell6 Kommentare

Hallo, im Rahmen meiner Masterarbeit muss ich eine Vielzahl von csv Dateien untersuchen. Hierbei muss ich einige dieser Dateien ...

Neue Wissensbeiträge
Erkennung und -Abwehr

Necur-Botnet soll Erpressungstrojaner Scarab massenhaft verbreiten

Information von BassFishFox vor 57 MinutenErkennung und -Abwehr

12,5 Millionen Spam-Mails aus einem Bot-Netz mit 6 Millionen Computern? Eigentlich eine schwache Leistung. Die Erpresser setzen dabei auf ...

Microsoft

Nadeldrucker-Problem unter Windows - Microsoft liefert Updates

Information von BassFishFox vor 1 StundeMicrosoft

Hat ja nicht lange gedauert. Nachdem die November-Updates für Windows 7, 8.1 und 10 zahlreiche Nadeldrucker lahmgelegt hatten, stellt ...

Linux

Limux-Ende in München: Wie ein Linux Projekt unter Ausschluss der Öffentlichkeit zerstört wurde

Information von Frank vor 9 StundenLinux14 Kommentare

Mein persönlicher Kommentar zum Thema "Limux-Ende". Die SPD-Politikerin Anne Hübner hat die Richtung von München ganz klar definiert: "Wir ...

Batch & Shell

Open Object Rexx: Eine mittlerweile fast vergessene Skriptsprache aus dem Mainframebereich

Information von Penny.Cilin vor 1 TagBatch & Shell9 Kommentare

Ich kann mich noch sehr gut an diese Skriptsprache erinnern und nutze diese auch heute ab und an noch. ...

Heiß diskutierte Inhalte
Linux
Limux-Ende in München: Wie ein Linux Projekt unter Ausschluss der Öffentlichkeit zerstört wurde
Information von FrankLinux14 Kommentare

Mein persönlicher Kommentar zum Thema "Limux-Ende". Die SPD-Politikerin Anne Hübner hat die Richtung von München ganz klar definiert: "Wir ...

Router & Routing
Zwei Netzwerke erstellen
Frage von bunteblumeRouter & Routing14 Kommentare

Hallo Zusammen, Ich möchte gerne ein backup von einem bestimmten Folder welcher auf dem Server regelmässig synchronisiert wird auf ...

Off Topic
Fachkräftemangel in Deutschland? - Talentschmiede schreibt alle 2 Tage die gleichen Stellen aus
Frage von Penny.CilinOff Topic12 Kommentare

Hallo, haben wir in Deutschland Fachkräftemangel? Die Talentschmiede schreibt gefühlt alle zwei Tage dieselben Stellen aus. Und das schon ...

Windows 10
Alle Programme mit bestimmtem Namen automatisch (per GPO) deinstallieren
gelöst Frage von lordofremixesWindows 1012 Kommentare

Hallo zusammen, gibt es eine Möglichkeit, alle Programme beginnend mit z.B. "Dell" im Namen per Script und somit per ...