Top-Themen

Aktuelle Themen (A bis Z)

Administrator.de FeedbackApache ServerAppleAssemblerAudioAusbildungAuslandBackupBasicBatch & ShellBenchmarksBibliotheken & ToolkitsBlogsCloud-DiensteClusterCMSCPU, RAM, MainboardsCSSC und C++DatenbankenDatenschutzDebianDigitiales FernsehenDNSDrucker und ScannerDSL, VDSLE-BooksE-BusinessE-MailEntwicklungErkennung und -AbwehrExchange ServerFestplatten, SSD, RaidFirewallFlatratesGoogle AndroidGrafikGrafikkarten & MonitoreGroupwareHardwareHosting & HousingHTMLHumor (lol)Hyper-VIconsIDE & EditorenInformationsdiensteInstallationInstant MessagingInternetInternet DomäneniOSISDN & AnaloganschlüsseiTunesJavaJavaScriptKiXtartKVMLAN, WAN, WirelessLinuxLinux DesktopLinux NetzwerkLinux ToolsLinux UserverwaltungLizenzierungMac OS XMicrosoftMicrosoft OfficeMikroTik RouterOSMonitoringMultimediaMultimedia & ZubehörNetzwerkeNetzwerkgrundlagenNetzwerkmanagementNetzwerkprotokolleNotebook & ZubehörNovell NetwareOff TopicOpenOffice, LibreOfficeOutlook & MailPapierkorbPascal und DelphiPeripheriegerätePerlPHPPythonRechtliche FragenRedHat, CentOS, FedoraRouter & RoutingSambaSAN, NAS, DASSchriftartenSchulung & TrainingSEOServerServer-HardwareSicherheitSicherheits-ToolsSicherheitsgrundlagenSolarisSonstige SystemeSoziale NetzwerkeSpeicherkartenStudentenjobs & PraktikumSuche ProjektpartnerSuseSwitche und HubsTipps & TricksTK-Netze & GeräteUbuntuUMTS, EDGE & GPRSUtilitiesVB for ApplicationsVerschlüsselung & ZertifikateVideo & StreamingViren und TrojanerVirtualisierungVisual StudioVmwareVoice over IPWebbrowserWebentwicklungWeiterbildungWindows 7Windows 8Windows 10Windows InstallationWindows MobileWindows NetzwerkWindows ServerWindows SystemdateienWindows ToolsWindows UpdateWindows UserverwaltungWindows VistaWindows XPXenserverXMLZusammenarbeit

CSV-Datei überprüfen

Frage Entwicklung IDE & Editoren

Mitglied: cattas

cattas (Level 1) - Jetzt verbinden

25.01.2010 um 18:33 Uhr, 10941 Aufrufe, 10 Kommentare

CSV-Datei auf Feldtyp und Feldlänge prüfen.

Hallo,

ich bin auf der Suche nach einem Programm, mit dem ich eine csv-Datei überprüfen kann.
Z.B. möcht ich vorgeben, dass spalte1 ein String ist und maximal 25 zeichen haben darf. Spalte2 dann ein Integer, usw.
Außerdem möchte ich evtl. Sonderzeichen durch "Ersatz-Zeichen" austauschen oder eine überprüfung, ob alle Zeilen z.b. 30 Felder haben ...

Ich habe ein Programm, das mir Artikeldaten als csv-Datei exportiert. Diese werden für eine Webshop benötigt. Allerdings muss vorher sichergestellt werden das die Defintion für den Import stimmt. Ich hab aber weder beim Import noch beim Export die möglichkeit irgendwas zu beeinflussen.

Also ich benötige keinen Converter oder Exporter sondern einen Vergleich.

Ich hoffe jemand ist schonmal über so ein Programm "gestolpert". Ansonsten muss ich selber ran.

Schöne Grüße
cattas
Mitglied: Pjordorf
25.01.2010 um 18:48 Uhr
Hallo cattas,

ich bin auf der Suche nach einem Programm, mit dem ich eine csv-Datei überprüfen kann.
Z.B. möcht ich vorgeben, dass spalte1 ein String ist und maximal 25 zeichen haben darf. Spalte2 dann ein Integer, usw.
Außerdem möchte ich evtl. Sonderzeichen durch "Ersatz-Zeichen" austauschen oder eine überprüfung,
ob alle Zeilen z.b. 30 Felder haben ...
Innerhalb einer CSV Datei ist es völlig egal, ob du einen Wert als Text (String) oder Integer oder als Postleitzahl oder sonstwas haben willst.

Ich habe ein Programm, das mir Artikeldaten als csv-Datei exportiert. Diese werden für eine Webshop benötigt. Allerdings
muss vorher sichergestellt werden das die Defintion für den Import stimmt. Ich hab aber weder beim Import noch beim Export
die möglichkeit irgendwas zu beeinflussen.
Normal bei CSV

http://de.wikipedia.org/w/index.php?title=CSV_(Dateiformat)&oldid=6 ...

Du kannst dir die CSV in Excel importieren, um zu schauen ob die Werte passen.

Peter
Bitte warten ..
Mitglied: bastla
25.01.2010 um 19:21 Uhr
Hallo cattas und willkommen im Forum!

Ein passendes Programm kenne ich nicht, aber per VBScript sollte sich das lösen lassen - ich warte aber noch ein wenig (schließlich wolltest Du ja "selber ran" ) ...

@Pjodorf
Innerhalb einer CSV Datei ist es völlig egal, ob du einen Wert als Text (String) oder Integer oder als Postleitzahl oder sonstwas haben willst.
Innerhalb ja, aber beim Import spielt es dann vermutlich doch eine Rolle, ob etwa ein Integer-Feld mit einem (unpassenden) String gefüllt werden soll ...

Grüße
bastla
Bitte warten ..
Mitglied: Pjordorf
25.01.2010 um 19:43 Uhr
@bastla,
Innerhalb ja, aber beim Import spielt es dann vermutlich doch eine Rolle, ob etwa ein Integer-Feld mit einem (unpassenden) String
gefüllt werden soll ...
Selbstverständlich.

Aber warten wir doch mal ab was uns cattas noch verrät. Mit seinem "Allerdings muss vorher sichergestellt werden das die Defintion für den Import stimmt. Ich hab aber weder beim Import noch beim Export die möglichkeit irgendwas zu beeinflussen." kommen wir nicht weiter.

Ich vermute das sein "Programm, das mir Artikeldaten als csv-Datei exportiert" ein Warenwirtschaftssystem ist. Und sein Webshop, der die Importschinttstelle anbietet, hat sicherlich auch eine Dokumentation oder Feldbeschreibung wie seine (WWS?) dazu.

Aber, das wissen wir alles nicht.

Ausserdem, für 5 (?) Datensätze lohnt sich das eh nicht!

Peter
Bitte warten ..
Mitglied: bastla
25.01.2010 um 19:50 Uhr
@Pjodorf
Ausserdem, für 5 (?) Datensätze lohnt sich das eh nicht!
Wo Du recht hast, hast Du recht ...

Grüße
bastla
Bitte warten ..
Mitglied: cardraft
25.01.2010 um 19:53 Uhr

Ausserdem, für 5 (?) Datensätze lohnt sich das eh nicht!


Da hat er recht. Wenn nicht mach es mit PHP und programmier die schnell was zusammen.
PHP kann sehr gut mit CSV Daten umgehen
Einfach mal googeln gibts bestimmt was fertiges.

Aber bei 5 Datensätzen kannst das eben auch per Hand machen
Bitte warten ..
Mitglied: Biber
25.01.2010 um 19:58 Uhr
Moin cattas,

wenn ihr als Medium für den Datenaustausch das CSV-Format verwendet
  • und das Datenerfassungssystem zu blöd ist, irgendwelche noch so banalen Eingabevalidierungen zu machen
  • und das Export-Programm (oder der Export-Mausklick?) zu blöd ist, wenigstens nur die Datensätze zu exportieren, die nach welchen Kriterien auch immer "formal gültig" sind
  • und auch noch die Import-Schnittstelle zu blöd ist, beim Import Datensätze auf Gültigkeit/Verwertbarkeit zu prüfen und die restlichen abzulehnen

....dann hast du schon dreifachen Grund, da mal deine Stimme zu erheben und die Jungs und Mädels zu fragen, ob die noch ganz Birne sind.

In diesem Desasterszenario noch einen draufzusetzen und die Daten in der CSV zu prüfen und eventuell sogar in einem schwachen Moment zu manipulieren (oder zu "berichtigen"), so dass dann überhaupt keine Fehlerquelle mehr lokalisiert werden kann (denn gesendete Daten und empfangene Daten sind ja nicht mehr identisch)....

...damit machst du dich vom Opfer oder Helfer wirklich zum Täter.

Nutz deine Energie, um einen, zwei oder drei der oben angeführten Punkte auszuräumen -- die Gültigkeit der CSV-Datei anhand von eigenen Kriterien prüfen zu wollen (du weißt doch gar nicht alles, was an Programmlogik im WebShop hinterlegt sein mag) und das auch noch mit einem weiteren Werkzeug mit nochmal anderen Sprachelementen macht jedenfalls die letzten erkennbaren Spurenelemente eines dokumentierbaren Prozesses zunichte.

Und mag es auch handwerklich noch so "mal eben schnell machbar" sein.

Grüße
Biber
Bitte warten ..
Mitglied: cattas
25.01.2010 um 20:08 Uhr
hi,

leider handelt es sich nicht nur um 5 Datensätze, sondern um rund 10.000. Und das täglich. Das es bei einer CSV-Datei egal ist was drin steht weiß ich selbstverständlich. Allerdings ist es beim Import in den Webshop nicht egal. dieser benötigt z.b. in feld 3 die artikelnummer als integer. usw.

z.b. hatte ich letzte woche das problem, dass in einer artikelbeschreibung ein semikolon enthalten war. dadurch sind dann die felder verrutscht und es konnt nicht importiert werden. anderes beispiel. ein preisfeld mit drei nachkommastellen. Das dies nicht bei der eingabe direkt abgefangen wird ist natürlich schon mist. Kann aber kurzfristig nicht geändert werden.

eine feldbeschreibung für den import habe ich natürlich. es scheitert lediglich an der überprüfung. Ich habe ca. 1-2mal pro monat, dass "per hand" falsche daten eingegeben werden. und der komplette import fehlschlägt.
Bitte warten ..
Mitglied: Biber
25.01.2010 um 20:15 Uhr
Moin cattas,

Nachtrag zu meinem Kommentar oben:
Zitat von cattas:
Das dies nicht bei der eingabe direkt abgefangen wird ist natürlich schon mist.
Kann aber kurzfristig nicht geändert werden.

Ich habe ca. 1-2mal pro monat, dass "per hand" falsche daten eingegeben werden. und der komplette import fehlschlägt.
Das ist aber auch das einzige Druckmittel, dass du nutzen kannst, um eine Änderung voranzutreiben.
Nur wenn der 10000-Datensätze-Import 2x im Monat oder besser noch 2x die Woche auf die Bretter geht hast du überhaupt jemand, den du motivieren kannst.
Versuche nicht, diesen unhaltbaren Zustand zu kaschieren.... es wird dir NICHT der Dank des Vaterlands oder des Unternehmens dafür winken.

Grüße
Biber
Bitte warten ..
Mitglied: cattas
25.01.2010 um 20:34 Uhr
Hallo Biber,

das "Druckmittel" ist nicht das Problem. Der Import ist beim Shop-Betreiber in der To-Do-List wird wohl aber erst ende es jahres was,da noch ca 5 wichtigere sachen vorher anstehen. pobleme die nur zwei mal im monat auftreten sind da erstmal nicht besonders relevant, aber stören natürlich.

daher die idee zur einfachen überprüfung. schade das es anscheinend nichts gibt.

mfg
cattas
Bitte warten ..
Mitglied: cardraft
26.01.2010 um 01:14 Uhr
Lies die Daten als Werte ein ein Array mit PHP und überprüfe den Inhalt. Mit for to oder if Schleifen kannst du dann die Daten an deine Anforderungen anpassen.
Ganz einfach mit PHP. Da du das sowieso in einen Shop intergrierst gehe ich mal davon aus, dass du da mit php arbeiten kannst.
Nach dem überprüfen übergiebst du das Array an den SQL und gut.
Suche mal nach CSV und PHP sollte wirklich nicht schwierig sein.
Bitte warten ..
Ähnliche Inhalte
Batch & Shell
Batchdatei soll überprüfen, ob auf eine Log Datei
Frage von hoppalaBatch & Shell1 Kommentar

Hiho :) ! Ein Freund und ich haben eine Batchdatei erstellt, leider kommen wir bei einer Sache nicht weiter. ...

Windows 10
PowerShell mit LastWriteTime Dateien überprüfen
gelöst Frage von mr.kkevWindows 101 Kommentar

Hallo liebe Experten Momentan bin ich ein Skript am Schreiben, welches Erstellte PDFs auf ihr Datum überprüft. Leider habe ...

Batch & Shell
Batch: Ordner auf Datei überprüfen
gelöst Frage von donmanolitoBatch & Shell4 Kommentare

Hallo Ich suche eine Möglichkeit alle Ordnernamen eines Verzeichnisses in eine Variable zu schieben um dann per Schleife ein ...

Outlook & Mail
CSV Datei exportieren
gelöst Frage von 117109Outlook & Mail1 Kommentar

Hallo Leute, mal eine Frage. Und zwar aus einer Ecel Datei wurde eine CSV Datei mit Kontaktenerstellt. Diese wurde ...

Neue Wissensbeiträge
Windows 10

Autsch: Microsoft bündelt Windows 10 mit unsicherer Passwort-Manager-App

Tipp von kgborn vor 1 TagWindows 107 Kommentare

Unter Microsofts Windows 10 haben Endbenutzer keine Kontrolle mehr, was Microsoft an Apps auf dem Betriebssystem installiert (die Windows ...

Sicherheits-Tools

Achtung: Sicherheitslücke im FortiClient VPN-Client

Tipp von kgborn vor 1 TagSicherheits-Tools

Ich weiß nicht, wie häufig die NextGeneration Endpoint Protection-Lösung von Fortinet in deutschen Unternehmen eingesetzt wird. An dieser Stelle ...

Internet

USA: Die FCC schaff die Netzneutralität ab

Information von Frank vor 2 TagenInternet5 Kommentare

Jetzt beschädigt US-Präsident Donald Trump auch noch das Internet. Der neu eingesetzte FCC-Chef Ajit Pai ist bekannter Gegner einer ...

DSL, VDSL

ALL-BM200VDSL2V - Neues VDSL-Modem mit Vectoring von Allnet

Information von Lochkartenstanzer vor 2 TagenDSL, VDSL2 Kommentare

Moin, Falls jemand eine Alternative zu dem draytek sucht: Gruß lks

Heiß diskutierte Inhalte
Batch & Shell
Kann man mit einer .txt Datei eine .bat Datei öffnen?
gelöst Frage von HelloWorldBatch & Shell20 Kommentare

Wie schon im Titel beschrieben würde ich gerne durch einfaches klicken auf eine Text oder Word Datei eine Batch ...

Router & Routing
OpenWRT bzw. L.E.D.E auf Buffalo WZR-HP-AG300H - update
gelöst Frage von EpigeneseRouter & Routing11 Kommentare

Guten Tag, ich habe auf einem Buffalo WZR-HP-AG300H die alternative Firmware vom L.E.D.E Projekt geflasht. Ich bin es von ...

LAN, WAN, Wireless
WLAN Reichweite erhöhen mit neuer Antenne
gelöst Frage von gdconsultLAN, WAN, Wireless8 Kommentare

Hallo, ich besitze einen TL-WN722N USB-WLAN Dongle mit einer richtigen Antenne. Ich frage mich jetzt ob man die Reichweite ...

Windows 10
Autsch: Microsoft bündelt Windows 10 mit unsicherer Passwort-Manager-App
Tipp von kgbornWindows 107 Kommentare

Unter Microsofts Windows 10 haben Endbenutzer keine Kontrolle mehr, was Microsoft an Apps auf dem Betriebssystem installiert (die Windows ...