Вопрос
Может ли кто-нибудь порекомендовать простой API, который позволит мне прочитать входной файл CSV, выполнить несколько простых преобразований, а затем записать его.
Быстрый гугл нашел http://flatpack.sourceforge.net/ что выглядит многообещающе.
Я просто хотел проверить, что используют другие, прежде чем подключаться к этому API.
Решение
CSV-файл Apache Commons
Проверить Общий CSV-файл Apache.
Эта библиотека читает и пишет несколько вариантов CSV, в том числе стандартный RFC 4180.Также читает/пишет с разделителями-табуляцией файлы.
- Эксель
- InformixВыгрузить
- InformixUnloadCsv
- MySQL
- Оракул
- PostgreSQLCsv
- PostgreSQLText
- RFC4180
- ИВС
Другие советы
я использовал OpenCSV в прошлом.
import au.com.bytecode.opencsv.CSVReader;
String fileName = "data.csv"; CSVReader reader = new CSVReader(new FileReader(fileName ));// Если первая строка является строкой заголовка [] header = reader.readnext ();
// Итерация через reader.readnext, пока не вернет null String [] line = reader.readnext ();
В ответах были и другие варианты Другой вопрос.
Обновлять: Код в этом ответе предназначен для Super CSV 1.52.Обновленные примеры кода для Super CSV 2.4.0 можно найти на сайте проекта:http://super-csv.github.io/super-csv/index.html
Проект SuperCSV напрямую поддерживает анализ и структурирование ячеек CSV.От http://super-csv.github.io/super-csv/examples_reading.html вы найдете, например.
дали класс
public class UserBean {
String username, password, street, town;
int zip;
public String getPassword() { return password; }
public String getStreet() { return street; }
public String getTown() { return town; }
public String getUsername() { return username; }
public int getZip() { return zip; }
public void setPassword(String password) { this.password = password; }
public void setStreet(String street) { this.street = street; }
public void setTown(String town) { this.town = town; }
public void setUsername(String username) { this.username = username; }
public void setZip(int zip) { this.zip = zip; }
}
и что у вас есть файл CSV с заголовком.Предположим следующее содержание
username, password, date, zip, town
Klaus, qwexyKiks, 17/1/2007, 1111, New York
Oufu, bobilop, 10/10/2007, 4555, New York
Затем вы можете создать экземпляр UserBean и заполнить его значениями из второй строки файла с помощью следующего кода:
class ReadingObjects {
public static void main(String[] args) throws Exception{
ICsvBeanReader inFile = new CsvBeanReader(new FileReader("foo.csv"), CsvPreference.EXCEL_PREFERENCE);
try {
final String[] header = inFile.getCSVHeader(true);
UserBean user;
while( (user = inFile.read(UserBean.class, header, processors)) != null) {
System.out.println(user.getZip());
}
} finally {
inFile.close();
}
}
}
используя следующую «спецификацию манипуляции»
final CellProcessor[] processors = new CellProcessor[] {
new Unique(new StrMinMax(5, 20)),
new StrMinMax(8, 35),
new ParseDate("dd/MM/yyyy"),
new Optional(new ParseInt()),
null
};
Прочитав описание формата CSV, я почувствовал, что использование сторонней библиотеки будет менее головной болью, чем написание ее самостоятельно:
В Википедии перечислено около 10 известных библиотек:
Я сравнил перечисленные библиотеки, используя какой-то контрольный список. OpenCSV оказался для меня победителем (YMMV) со следующими результатами:
+ maven
+ maven - release version // had some cryptic issues at _Hudson_ with snapshot references => prefer to be on a safe side
+ code examples
+ open source // as in "can hack myself if needed"
+ understandable javadoc // as opposed to eg javadocs of _genjava gj-csv_
+ compact API // YAGNI (note *flatpack* seems to have much richer API than OpenCSV)
- reference to specification used // I really like it when people can explain what they're doing
- reference to _RFC 4180_ support // would qualify as simplest form of specification to me
- releases changelog // absence is quite a pity, given how simple it'd be to get with maven-changes-plugin // _flatpack_, for comparison, has quite helpful changelog
+ bug tracking
+ active // as in "can submit a bug and expect a fixed release soon"
+ positive feedback // Recommended By 51 users at sourceforge (as of now)
Мы используем JavaCSV, это работает очень хорошо
Для последнего корпоративного приложения, над которым я работал и которое требовало обработки значительного объема CSV, пару месяцев назад, я использовал СуперCSV в sourceforge и нашел его простым, надежным и беспроблемным.
Вы можете использовать csvreader API и загрузить его из следующего места:
http://sourceforge.net/projects/javacsv/files/JavaCsv/JavaCsv%202.1/javacsv2.1.zip/download
или
http://sourceforge.net/projects/javacsv/
Используйте следующий код:
/ ************ For Reading ***************/
import java.io.FileNotFoundException;
import java.io.IOException;
import com.csvreader.CsvReader;
public class CsvReaderExample {
public static void main(String[] args) {
try {
CsvReader products = new CsvReader("products.csv");
products.readHeaders();
while (products.readRecord())
{
String productID = products.get("ProductID");
String productName = products.get("ProductName");
String supplierID = products.get("SupplierID");
String categoryID = products.get("CategoryID");
String quantityPerUnit = products.get("QuantityPerUnit");
String unitPrice = products.get("UnitPrice");
String unitsInStock = products.get("UnitsInStock");
String unitsOnOrder = products.get("UnitsOnOrder");
String reorderLevel = products.get("ReorderLevel");
String discontinued = products.get("Discontinued");
// perform program logic here
System.out.println(productID + ":" + productName);
}
products.close();
} catch (FileNotFoundException e) {
e.printStackTrace();
} catch (IOException e) {
e.printStackTrace();
}
}
}
Записать/добавить в файл CSV
Код:
/************* For Writing ***************************/
import java.io.File;
import java.io.FileWriter;
import java.io.IOException;
import com.csvreader.CsvWriter;
public class CsvWriterAppendExample {
public static void main(String[] args) {
String outputFile = "users.csv";
// before we open the file check to see if it already exists
boolean alreadyExists = new File(outputFile).exists();
try {
// use FileWriter constructor that specifies open for appending
CsvWriter csvOutput = new CsvWriter(new FileWriter(outputFile, true), ',');
// if the file didn't already exist then we need to write out the header line
if (!alreadyExists)
{
csvOutput.write("id");
csvOutput.write("name");
csvOutput.endRecord();
}
// else assume that the file already has the correct header line
// write out a few records
csvOutput.write("1");
csvOutput.write("Bruce");
csvOutput.endRecord();
csvOutput.write("2");
csvOutput.write("John");
csvOutput.endRecord();
csvOutput.close();
} catch (IOException e) {
e.printStackTrace();
}
}
}
А также есть Утилита CSV/Excel.Предполагается, что все эти данные имеют табличный вид, и доставляют данные от итераторов.
Формат CSV кажется достаточно простым для StringTokenizer, но он может стать более сложным.Здесь, в Германии, в качестве разделителя используется точка с запятой, а ячейки, содержащие разделители, необходимо экранировать.С помощью StringTokenizer с этим легко справиться не получится.
я бы пошел на http://sourceforge.net/projects/javacsv
Если вы собираетесь читать CSV из Excel, есть несколько интересных случаев.Я не могу вспомнить их все, но csv apache commons не смог правильно их обработать (например, с URL-адресами).
Обязательно проверьте вывод Excel с кавычками, запятыми и косыми чертами повсюду.