Поле таблицы hive ограничено '¬' hive не принимает этот символ

Question

Данные, которые я имею, ограничены '¬', когда я пытаюсь использовать его в create table, я получаю ошибку как недопустимый символ. Я попытался использовать его в юникодной версии '\ U00AC', но не использовать всю запись, попадающую в первое поле. в unix этот символ «¬» отображается как �. Может ли кто-нибудь навестить меня в этом вопросе о том, что использовать в поле, завершенном секцией.

CREATE TABLE IF NOT EXISTS test 
(
CONTACT_RECORD_ID string, 
ACCOUNT string, 
CUST string, 
NUMBER string, 
NUMBER1 string, 
NUMBER2 string, 
NUMBER3 string, 
NUMBER4 string, 
NUMBER5 string, 
NUMBER6 string, 
NUMBER7 string, 
LIST string 
) 
ROW FORMAT DELIMITED 
FIELDS TERMINATED BY '¬'; 

Answer 1

Не могли бы вы попробовать с этим DDL.

CREATE TABLE IF NOT EXISTS test 
(
CONTACT_RECORD_ID string, 
ACCOUNT string, 
CUST string, 
NUMBER string, 
NUMBER1 string, 
NUMBER2 string, 
NUMBER3 string, 
NUMBER4 string, 
NUMBER5 string, 
NUMBER6 string, 
NUMBER7 string, 
LIST string 
) 
ROW FORMAT SERDE 'org.apache.hadoop.hive.serde2.lazy.LazySimpleSerDe' 
WITH SERDEPROPERTIES ('empty.string.null'='true','field.delim'='\0AC','serialization.format'='\0AC','serialization.null.format'='') 
STORED AS INPUTFORMAT 
    'org.apache.hadoop.mapred.TextInputFormat' 
OUTPUTFORMAT 
    'org.apache.hadoop.hive.ql.io.HiveIgnoreKeyTextOutputFormat'; 

Answer 2

если у вас есть данные в формате CSV, вы можете использовать этот инструмент, как и в Hadoop/Hive : Loading data from .csv on a local machine легко экспортировать данные в Hadoop.