1. дома
  2. Вопрос и ответ
  3. Извлечь XML в строки из поля Oracle CLOB

Извлечь XML в строки из поля Oracle CLOB

2015-09-24 3 views
0

Я пытаюсь извлечь xml в вывод таблицы, разделенный строками.Извлечь XML в строки из поля Oracle CLOB

Данные является CLOB поля в базе данных Oracle следующим образом:

<emailInfo> 
<recipientList> 
    <recipientName>ATS</recipientName> 
    <recipientEmailList> 
    <emailAddress>[email protected]</emailAddress> 
    <statusFlag>F1AC</statusFlag> 
    </recipientEmailList> 
    <contactEmailList> 
    <emailAddress>[email protected]</emailAddress> 
    <statusFlag>F1AC</statusFlag> 
    <contactEmailList> 
    <emailAddress>[email protected]</emailAddress> 
    <statusFlag>F1AC</statusFlag> 
    </contactEmailList> 
    <escalationEmailList> 
    <emailAddress>[email protected]</emailAddress> 
    <statusFlag>F1AC</statusFlag> 
    </escalationEmailList> 
</recipientList> 

<recipientList> 
    <recipientName>ERG</recipientName> 
    <recipientEmailList> 
    <emailAddress>[email protected]</emailAddress> 
    <statusFlag>F1AC</statusFlag> 
    </recipientEmailList> 
    <contactEmailList> 
    <emailAddress>[email protected]</emailAddress> 
    <statusFlag>F1AC</statusFlag> 
    </contactEmailList> 
    <escalationEmailList> 
    <emailAddress>[email protected]</emailAddress> 
    <statusFlag>F1AC</statusFlag> 
    </escalationEmailList> 
    <escalationEmailList> 
    <emailAddress>[email protected]</emailAddress> 
    <statusFlag>F1AC</statusFlag> 
    </escalationEmailList> 
</recipientList> 
</emailInfo>

EDIT2: Мой обновленный SQL-запрос выглядит следующим образом:

   SELECT t.*, m.*, p.*, l.* 
      FROM cisadm.F1_ext_lookup_val exval, 

        XMLTABLE ('/emailInfo/recipientList' 
        PASSING XMLTYPE (exval.bo_data_area) 
        COLUMNS recipient_name    VARCHAR2 (4000) PATH 'recipientName', 
          recipient_email_list   XMLTYPE   PATH '/recipientEmailList', 
          contact_email_list   XMLTYPE   PATH '/contactEmailList', 
          escalation_email_list   XMLTYPE   PATH '/escalationEmailList') t, 
        XMLTABLE ('/recipientEmailList' 
        PASSING (t.recipient_email_list) 
        COLUMNS recipient_email_address  VARCHAR2 (4000) PATH '/emailAddress', 
          rec_email_status_flg   VARCHAR2 (10) PATH '/statusFlag') m, 
        XMLTABLE ('/contactEmailList' 
        PASSING (t.contact_email_list) 
        COLUMNS contact_email_address   VARCHAR2 (4000) PATH 'contactEmailList/emailAddress', 
          contact_email_status_flg  VARCHAR2 (10) PATH 'contactEmailList/statusFlag' 
          ) p, 
        XMLTABLE('/escalationEmailList' 
        PASSING (t.escalation_email_list) 
        COLUMNS  esc_email_address   VARCHAR2(4000) PATH 'escalationEmailList/emailAddress', 
           esc_email_status_flg  VARCHAR2(10)  PATH 'escalationEmailList/statusFlag' 
        ) l

Я пытаюсь предоставление за то, что может быть несколько значений для каждого списка адресов получателей, списка контактов электронной почты и списка эскалации электронной почты.

вывод должен быть:

SampleOutput

Любая помощь будет так признателен!

источник

2015-09-24 Heisenberg

+0

пара ссылок может помочь вам https://community.oracle.com/thread/2239392?tstart=0 и http://stackoverflow.com/questions/18589276/xml-oracle-multiple-child-node -extract –

+0

Рассмотрите возможность использования языка общего назначения, такого как Python, PHP, C#, Java, который будет масштабируемым и поддерживаемым, поскольку SQL является языком специального назначения, а различные RDMS обрабатывают XML-данные по-разному. Несколько недель назад, также для вопроса Oracle, я изложил решения в обратном SQL-> XML, используя [open-source] (http://stackoverflow.com/questions/32424049/build-an-xml-with-xmlelement-oracle -SQL-11g-запрос/32425800 # 32425800). – Parfait

ответ

0

Этот запрос возвращает данные, как на скриншоте -

select 
    extractvalue(s.column_value, '/*/recipientName') as recipient_name, 
    extractvalue(s.column_value, '/*/recipientEmailList/emailAddress') as recipient_email_address, 
    extractvalue(s.column_value, '/*/recipientEmailList/statusFlag') as rec_email_status_flg, 
    extractvalue(s.column_value, '/*/contactEmailList/emailAddress') as contact_email_address, 
    extractvalue(s.column_value, '/*/contactEmailList/statusFlag') as contact_email_status_flg, 
    extractvalue(s.column_value, '/*/escalationEmailList/emailAddress') as esc_email_address, 
    extractvalue(s.column_value, '/*/escalationEmailList/statusFlag') as esc_email_status_flg 
from tmp, table(xmlsequence(EXTRACT(XMLTYPE(tmp.bo_data_area), '/emailInfo/recipientList'))) s

и этот запрос извлекать каждую электронную почту на отдельной строке -

select recipient_name, email_address, status_flag 
from 
(
    select 
      recipient_name, 
      extractvalue(x.column_value, '/*/emailAddress') as email_address, 
      extractvalue(x.column_value, '/*/statusFlag') as status_flag 
    from 
    (
     select 
      extractvalue(s.column_value, '/*/recipientName') as recipient_name, 
      EXTRACT(s.column_value, '/*') recipients 
     from tmp, table(xmlsequence(EXTRACT(XMLTYPE(tmp.bo_data_area), '/emailInfo/recipientList'))) s 
    ) v, table(xmlsequence(EXTRACT(v.recipients, '/*/*'))) x 
) 
where (email_address is not null or status_flag is not null)

источник

2015-09-24 06:41:58 Stawros

0

Вы можете попробовать XMLTABLE

SELECT * 
    FROM XMLTable('/emailInfo/recipientList' PASSING XMLTYPE('<emailInfo> 
<recipientList> 
    <recipientName>ATS</recipientName> 
    <recipientEmailList> 
    <emailAddress>[email protected]</emailAddress> 
    <statusFlag>F1AC</statusFlag> 
    </recipientEmailList> 
    <contactEmailList> 
    <emailAddress>[email protected]</emailAddress> 
    <statusFlag>F1AC</statusFlag> 
    </contactEmailList> 
    <escalationEmailList> 
    <emailAddress>[email protected]</emailAddress> 
    <statusFlag>F1AC</statusFlag> 
    </escalationEmailList> 
</recipientList> 

<recipientList> 
    <recipientName>ERG</recipientName> 
    <recipientEmailList> 
    <emailAddress>[email protected]</emailAddress> 
    <statusFlag>F1AC</statusFlag> 
    </recipientEmailList> 
    <contactEmailList> 
    <emailAddress>[email protected]</emailAddress> 
    <statusFlag>F1AC</statusFlag> 
    </contactEmailList> 
    <escalationEmailList> 
    <emailAddress>[email protected]</emailAddress> 
    <statusFlag>F1AC</statusFlag> 
    </escalationEmailList> 
</recipientList> 
</emailInfo>') 
        COLUMNS recipient_name   VARCHAR2(4000) PATH 'recipientName', 
          recipient_email_address VARCHAR2(4000) PATH 'recipientEmailList/emailAddress', 
          rec_email_status_flg  VARCHAR2(10)  PATH 'recipientEmailList/statusFlag', 
          contact_email_address  VARCHAR2(4000) PATH 'contactEmailList/emailAddress', 
          contact_email_status_flg VARCHAR2(10)  PATH 'contactEmailList/statusFlag', 
          esc_email_address   VARCHAR2(4000) PATH 'escalationEmailList/emailAddress', 
          esc_email_status_flg  VARCHAR2(10)  PATH 'escalationEmailList/statusFlag' 
) t

Same из таблицы

SELECT * 
    FROM tmp,XMLTable('/emailInfo/recipientList' PASSING XMLTYPE(tmp.bo_data_area) 
        COLUMNS recipient_name   VARCHAR2(4000) PATH 'recipientName', 
          recipient_email_address VARCHAR2(4000) PATH 'recipientEmailList/emailAddress', 
          rec_email_status_flg  VARCHAR2(10)  PATH 'recipientEmailList/statusFlag', 
          contact_email_address  VARCHAR2(4000) PATH 'contactEmailList/emailAddress', 
          contact_email_status_flg VARCHAR2(10)  PATH 'contactEmailList/statusFlag', 
          esc_email_address   VARCHAR2(4000) PATH 'escalationEmailList/emailAddress', 
          esc_email_status_flg  VARCHAR2(10)  PATH 'escalationEmailList/statusFlag' 
) t

источник

2015-09-24 06:50:55

+0

Это дает: ORA-19279: XPTY0004 - несоответствие динамического типа XQuery: ожидаемая последовательность однопользовательских последовательностей - получена последовательность нескольких элементов. Я предполагаю, что некоторые имена имеют несколько адресов электронной почты? Как решить эту проблему? – Heisenberg

+0

Пожалуйста, отправьте XML-пример, чтобы я мог посоветовать что-то конкретное. –

+0

Я обновил XML-пример, чтобы включить несколько адресов электронной почты для каждого получателя («Список эскалации электронной почты», «Список контактов электронной почты»). Спасибо! – Heisenberg

1

Для будущих читателей здесь представлены решения общего назначения в программировании с открытым исходным кодом для переноса данных XML из поля CLOB в табличный формат csv.

Используя потребности данных OP, эти подходы не зависят от какой-либо RDMS и, следовательно, могут использоваться в других соединениях с базой данных. Кроме того, ограничение SQL преодолевается как различные нюансы, как XPaths, массивы, можно использовать петлю:

Python (с использованием cx_Oracle):

#!/usr/bin/python 
import os 
import cx_Oracle 
import csv 
import lxml.etree as ET 

# SET DIRECTORY PATH 
cd = os.path.dirname(os.path.abspath(__file__)) 

# DB CONNECTION AND QUERY 
db = cx_Oracle.connect("uid/[email protected]")  
cur = db.cursor() 
clob = cur.execute("SELECT CLOBfield FROM OracleTable").fetchone() 

# CLOSE CURSOR AND DATABASE 
cur.close() 
db.close() 

# PARSE XML CONTENT 
dom = ET.fromstring(clob) 

# DEFINING COLUMNS 
columns = ['RECIPENT_NAME', 'RECIPIENT_EMAIL_ADDRESS', 'REC_EMAIL_STATUS_FLG', 
      'CONTACT_EMAIL_ADDRESS', 'CONTACT_EMAIL_STATUS_FLG', 
      'ESC_EMAIL_ADDRESS', 'ESC_EMAIL_STATUS_FLG'] 

emailnodes = ['recipientEmailList', 'contactEmailList', 'escalationEmailList'] 

# OPEN CSV FILE 
with open(os.path.join(cd,'CLOB_Py.csv'), 'w', newline='') as m: 
    writer = csv.writer(m)  
    writer.writerow(columns) 

    nodexpath = dom.xpath('//recipientList') 

    dataline = []  
    for j in range(1,len(nodexpath)+1): 

     dataline = []   
     dataline.append(dom.xpath('//recipientList[{0}]/recipientName'.format(j))[0].text) 

     for n in emailnodes: 
      # EMAILS 
      childxpath = dom.xpath('//recipientList[{0}]/{1}[1]/*[1]'.format(j, n))    

      # APPEND DATA LINES 
      for elem in childxpath: 
       dataline.append(elem.text) 

      if childxpath == []: 
       dataline.append('') 

      # FLAGS 
      childxpath = dom.xpath('//recipientList[{0}]/{1}[1]/*[2]'.format(j, n)) 

      # APPEND DATA LINES 
      for elem in childxpath: 
       dataline.append(elem.text) 

      if childxpath == []: 
       dataline.append('') 

     writer.writerow(dataline)

PHP (с использованием PDO Oracle OCI)

// Set Directory Path 
$cd = dirname(__FILE__); 

// Opening db connection 
$db_username = "your_username"; 
$db_password = "your_password"; 
$db = "oci:dbname=your_sid"; 

try { 
    $dbh = new PDO($db,$db_username,$db_password);   
    $dbh->setAttribute(PDO::ATTR_ERRMODE, PDO::ERRMODE_EXCEPTION); 

    $sql = "SELECT CLOBfield FROM OracleTable";  
    $STH = $dbh->query($sql);  
    $clob = $STH->fetch(); 
} 

catch(PDOException $e) { 
    echo $e->getMessage(); 
    exit; 
} 

# Closing db connection 
$dbh = null; 

// Loading XML source 
$xpath = simplexml_load_string($clob); 

// Writing column headers 
$columns = array('RECIPENT_NAME', 'RECIPIENT_EMAIL_ADDRESS', 'REC_EMAIL_STATUS_FLG', 
       'CONTACT_EMAIL_ADDRESS', 'CONTACT_EMAIL_STATUS_FLG', 
       'ESC_EMAIL_ADDRESS', 'ESC_EMAIL_STATUS_FLG'); 

$emailnodes = array('recipientEmailList', 'contactEmailList', 'escalationEmailList'); 

$fs = fopen($cd.'/CLOB_PHP.csv', 'w'); 
fputcsv($fs, $columns);  
fclose($fs);  

// Writing data lines 
$i = 1; 
$values = []; 
$node = $xpath->xpath('//recipientList');  

foreach ($node as $n){ 

    $child = $xpath->xpath('//recipientList['. $i .']/recipientName'); 
    foreach($child as $value) {    
      $values[] = $value;   
    } 

    foreach ($emailnodes as $e){ 

      // EMAILS  
      $child = $xpath->xpath('//recipientList['. $i .']/'. $e.'[1]/*[1]'); 

      if (count($child) > 0) { 
       foreach($child as $value) {   
       $values[] = $value;   
       } 
      } 
      else { 
       $values[] = ''; 
      } 

      // FLAGS 
      $child = $xpath->xpath('//recipientList['. $i .']/'. $e.'[1]/*[2]'); 

      if (count($child) > 0) { 
       foreach($child as $value) {   
       $values[] = $value;   
       } 
      } 
      else { 
       $values[] = ''; 
      } 
    } 

    $fs = fopen($cd.'/CLOB_PHP.csv', 'a'); 
    fputcsv($fs, $values);  
    fclose($fs); 

    $values = []; 
    $i++; 

}

R (с использованием ROracle):

library(XML) 
library(ROracle) 

setwd("C:\\Path\\To\\R\\Script") 

# OPEN DATABASE AND QUERY 
conn <-dbConnect(drv, username = "", password = "", dbname = "") 
clobdf <- dbGetQuery(conn, "SELECT CLOBfield FROM OracleTable;") 
dbDisconnect(conn) 

# READ IN EXTERNAL DATA FILE 
doc<-xmlParse(clobdf[[1,1]]) 

emailnodes <- c('recipientEmailList', 'contactEmailList', 'escalationEmailList') 

# EXTRACT NODE VALUES INTO LISTS 
recipientNamesList <- xpathSApply(doc, paste0("//recipientList/recipientName"), xmlValue) 

for (e in emailnodes){ 
    assign(e, xpathSApply(doc, paste0("//recipientList/", e, "[1]/*[1]"), xmlValue)) 
} 

for (e in emailnodes){ 
    assign(paste0(e, "flg"), xpathSApply(doc, paste0("//recipientList/", e, "[1]/*[2]"), xmlValue)) 
} 

# COMBINE LISTS TO DATA FRAME 
xmldf<- data.frame(RECIPENT_NAME = matrix(unlist(recipientNamesList), nrow=2, byrow=T), 
        RECIPIENT_EMAIL_ADDRESS = matrix(unlist(recipientEmailList), nrow=2, byrow=T), 
        REC_EMAIL_STATUS_FLG = matrix(unlist(recipientEmailListflg), nrow=2, byrow=T), 
        CONTACT_EMAIL_ADDRESS = matrix(unlist(contactEmailList), nrow=2, byrow=T),     
        CONTACT_EMAIL_STATUS_FLG = matrix(unlist(contactEmailListflg), nrow=2, byrow=T),     
        ESC_EMAIL_ADDRESS = matrix(unlist(escalationEmailList), nrow=2, byrow=T), 
        ESC_EMAIL_STATUS_FLG = matrix(unlist(escalationEmailListflg), nrow=2, byrow=T)) 

# OUTPUT TO CSV 
write.csv(xmldf, "CLOB_R.csv", na = "", row.names=FALSE)

источник

2015-09-26 05:05:08 Parfait

+0

+1 для efford, но вы могли бы поместить данные xml из clob в поле xmltype: UPDATE TABLE SET xmltypefield = XMLTYPE ((SELECT elefantclobxml from africa)) –

 Смежные вопросы

  • Нет связанных вопросов^_^