sql >> Database teknologi >  >> RDS >> Oracle

Hvordan finder man ud af, hvordan en DBF-fil eller en hvilken som helst fil er formateret?

Jeg havde et lignende problem, og sådan gjorde jeg det.

TL;DR:Du skal bruge Apache Tika at parse DBase-filer. Det konverterer indholdet til en XHTML-tabel og returnerer det som en java.lang.String , som du kan parse via en DOM eller en SAX-parser for at få dataene i det format, du har brug for. Her er nogle eksempler:https://tika.apache.org/1.20/examples.html

For at starte skal du tilføje følgende Maven-afhængighed til din POM:

<dependency>
  <groupId>org.apache.tika</groupId>
  <artifactId>tika-parsers</artifactId>
  <version>1.21</version>
</dependency>

Initialiser derefter parseren:

Parser parser =  new DBFParser(); //Alternatively, you can use AutoDetectParser
ContentHandler handler = new BodyContentHandler(new ToXMLContentHandler()); //This is tells the parser to produce an XHTML as an output.
parser.parse(dbaseInputStream, handler, new Metadata(), new ParseContext()); // Here, dbaseInputStream is a FileInputStream object for the DBase file.
String dbaseAsXhtml = handler.toString(); //This will have the content in XHTML format

Nu, for at konvertere dataene til et mere bekvemt format (i dette tilfælde CSV), gjorde jeg følgende:

Konverter først hele strengen til et DOM-objekt:

DocumentBuilder builder = DocumentBuilderFactory.newInstance().newDocumentBuilder();
Document xhtmlDoc= builder.parse(new InputSource(new StringReader(xmlString.trim().replaceAll("\t", "")))); //I'm trimming out the tabs and whitespaces here, so that I don't have to dealt with them later

For nu at hente overskrifterne:

XPath xPath = XPathFactory.newInstance().newXPath();
NodeList tableHeader = (NodeList)xPath.evaluate("//table/thead/th", xhtmlDoc, XPathConstants.NODESET);

String [] headers = new String[tableHeader.getLength()];
for(int i = 0; i < tableHeader.getLength(); i++) {
    headers[i] = tableHeader.item(i).getTextContent();
}

Derefter optegnelserne:

XPath xPath = XPathFactory.newInstance().newXPath();
NodeList tableRecords = (NodeList)xPath.evaluate("//table/tbody/tr", xhtmlDoc, XPathConstants.NODESET);

List<String[]> records = new ArrayList<String[]>(tableRecords.getLength());

for(int i = 0; i < tableRecords.getLength(); i++) {
    NodeList recordNodes = tableRecords.item(i).getChildNodes();
    String[] record = new String[recordNodes.getLength()];
    for(int j = 0; j < recordNodes.getLength(); j++)
        record[j] = recordNodes.item(j).getTextContent();
        records.add(record);
    }

Til sidst sætter vi dem sammen til en CSV:

StringBuilder dbaseCsvStringBuilder = new StringBuilder(String.join(",", headers) + "\n");
for(String[] record : records)
        dbaseCsvStringBuilder.append(String.join(",", record) + "\n");
String csvString = dbaseCsvStringBuilder.toString();

Her er den komplette kildekode:https://github.com/Debojit/DbaseTranslater/blob/master/src/main/java/nom/side/poc/file/dbf/DbaseReader.java




  1. Hvordan filtrerer man rækker på indlejrede værdier i en json-kolonne?

  2. Hvordan man designer en simpel database

  3. Dvaledialekt til Oracle 19

  4. Tilføj tabelnavn til hver kolonne i et resultatsæt i SQL? (Postgres specifikt)