Формат CSV не верный?

Question

Я создаю CSV с EXPORT-CSV в Powershell, а затем загружаю его в Perl-скрипт. Но Perl не может импортировать файл.

Я проверил CSV-файл против рабочей версии (которая была экспортирована из одного и того же Perl-скрипта, а не powershell), и нет НИКАКОЙ разницы. Колуммы являются одинаковыми, и оба они имеют точку с запятой в качестве разделителя. Если я открою файл в Excel, то все будет в первой ячейке каждой строки (это значит, что мне нужно сделать текст-в-coloumns). Рабочий файл заканчивается в разных ячейках с самого начала.

Чтобы добавить к путанице: когда я открываю файл в блокноте и копирую/вставляю содержимое в новый файл, импорт работает!

Итак, что мне не хватает? Есть ли скрытые свойства, которые я не могу обнаружить с помощью Блокнота? Мне нужно изменить тип кодирования?

Пожалуйста, помогите :)

Answer 1

Чтобы лучше просмотреть файлы CSV, используйте Notepad++. Это скажет вам кодировку файла в строке состояния. Также включите скрытые символы (Вид> Показать символ> Показать все символы). Это покажет, есть ли только линейные каналы, или возврат каретки + линейные каналы, вкладки и пробелы и т. Д. Вы также можете изменить кодировку файла в меню «Кодирование». Это может помочь вам определить различия. Блокнот не отображает эту информацию.

Update - Вот как преобразовать текстовый файл из Windows, в формат Unix в коде:

$allText = [IO.File]::ReadAllText("C:\test.csv") -replace "`r`n?", "`n" 
$encoding = New-Object System.Text.ASCIIEncoding  
[IO.File]::WriteAllText("C:\test2.csv", $allText, $encoding) 

Или вы можете использовать Notepad ++ (Edit> EOL Conversion> Unix Format).

Answer 2

Excel, как правило, предполагается, что файлы, сохраненные в формате .csv, действительно, разделенных запятой. Однако, похоже, вы используете точки с запятой. Вы можете попробовать переключиться на запятую, или если это не вариант, попробуйте изменить расширение на .txt. Excel должен автоматически распознать его, если вы сделаете первый, тогда как последний проведет вас через мастер импорта при загрузке файла.

Answer 3

От CPAN Text::CSV:

use Text::CSV; 

my @rows; 
my $csv = Text::CSV->new ({ binary => 1 }) # should set binary attribute. 
      or die "Cannot use CSV: ".Text::CSV->error_diag(); 

open my $fh, "<:encoding(utf8)", "test.csv" or die "test.csv: $!"; 
while (my $row = $csv->getline($fh)) { 
    $row->[2] =~ m/pattern/ or next; # 3rd field should match 
    push @rows, $row; 
} 
$csv->eof or $csv->error_diag(); 
close $fh; 

Никогда не пытайтесь разобрать CSV самостоятельно, это кажется легким, на первый взгляд, но есть много глубоких ям, чтобы попасть в.

Answer 4

Это может быть проблемой кодирования при использовании export-csv

по умолчанию является ASCII, который должен быть в порядке, как правило, но попробуйте установить -Encoding UTF8 в команде Export-CSV.

Answer 5

Учитывая то, что было открыто через другие должности, я думаю, вам лучше всего, чтобы:

1. Преобразование в строку CSV (который использует Unix-й возврат каретки, а не Windows)
2. посылы, в файл, гарантируя, что кодировка не является ASCII.

---

$str = $object | convertto-csv -notypeinformation | foreach-object { $_ -replace "`"","" } # 

foreach-object хак, чтобы удалить лишние кавычки, которые convertto-csv добавляет. Если ваши данные могут иметь двойные кавычки, вам нужно посмотреть на альтернативы.

$str | out-file -filepath "path\to\newcsv" -encoding UTF8