如何使用SQLPLUS后台处理到CSV格式的文件？

143

我想将一些查询提取为CSV输出格式。不幸的是，我无法使用任何高级SQL客户端或任何语言来执行此操作。我必须使用SQLPLUS。

我该怎么做？

sql  oracle  csv  sqlplus 
— 丹尼尔·C·索布拉尔
source
请将@BobC给出的答案标记为正确。它缺少用于打印文件的spool命令，但这是以csv格式导出数据的最简单解决方案。
— rlar

Answers:

28

如果您使用的是12.2，则可以简单地说

set markup csv on
spool myfile.csv
— 鲍勃
source
有谁知道你如何关闭回声，显然的“设置回声关闭”似乎与此不起作用？
— 四元论
假设这是因为您正在执行脚本并写入文件，则应“关闭termout”
— BobC
155

您也可以使用以下内容，尽管它确实在字段之间引入了空格。

set colsep ,     -- separate columns with a comma
set pagesize 0   -- No header rows
set trimspool on -- remove trailing blanks
set headsep off  -- this may or may not be useful...depends on your headings.
set linesize X   -- X should be the sum of the column widths
set numw X       -- X should be the length you want for numbers (avoid scientific notation on IDs)

spool myfile.csv

select table_name, tablespace_name 
  from all_tables
 where owner = 'SYS'
   and tablespace_name is not null;

输出将如下所示：

    TABLE_PRIVILEGE_MAP           ,SYSTEM                        
    SYSTEM_PRIVILEGE_MAP          ,SYSTEM                        
    STMT_AUDIT_OPTION_MAP         ,SYSTEM                        
    DUAL                          ,SYSTEM 
...

这比输入所有字段并用逗号将它们连接起来要麻烦得多。如果需要，您可以使用一个简单的sed脚本来删除逗号前出现的空格。

这样的事情可能会起作用...（我的sed技能非常生锈，所以这可能需要工作）

sed 's/\s+,/,/' myfile.csv
— 加布
source
在colsep行中缺少“，”。另外，先行关闭并调整X的大小可能很有用。编辑答案，我会接受。
— Daniel C. Sobral
5
sed命令是：cat myfile.csv | sed -e's / [\ t] * | / | / g; s / | [] * / | / g'> myfile.csv。无论如何，甲骨文真的很烂。
— 斯坦（Stan）
2
要获得带有列名的标头，请使用set pagesize 1000而不是0。在我之前的评论中，您无法重定向到同一文件：cat myfile.csv | sed -e 's/[ \t]*|/|/g ; s/|[ ]*/|/g' > my_other_file.csv。
— Stan
1
我过滤掉了空白和用于划线的破折号，grep并tr像这样grep -v -- ----- myfile.csv | tr -d [:blank:] > myfile.csv。
— ixe013
1
@slayernoah spool命令可以采用目录路径和文件名，以便您可以精确指定输出文件的放置位置。否则，这将取决于您执行脚本的位置。
— 加布2014年
35

我对脚本使用此命令，该脚本为维表（DW）提取数据。因此，我使用以下语法：

set colsep '|'
set echo off
set feedback off
set linesize 1000
set pagesize 0
set sqlprompt ''
set trimspool on
set headsep off

spool output.dat

select '|', <table>.*, '|'
  from <table>
where <conditions>

spool off

和工程。我不使用sed格式化输出文件。

— 哈里森·巴蒂斯塔
source
24

我看到类似的问题...

我需要从SQLPLUS后台处理CSV文件，但是输出有250列。

我为避免烦人的SQLPLUS输出格式所做的工作：

set linesize 9999
set pagesize 50000
spool myfile.csv
select x
from
(
select col1||';'||col2||';'||col3||';'||col4||';'||col5||';'||col6||';'||col7||';'||col8||';'||col9||';'||col10||';'||col11||';'||col12||';'||col13||';'||col14||';'||col15||';'||col16||';'||col17||';'||col18||';'||col19||';'||col20||';'||col21||';'||col22||';'||col23||';'||col24||';'||col25||';'||col26||';'||col27||';'||col28||';'||col29||';'||col30 as x
from (  
      ...  here is the "core" select
     )
);
spool off

问题是您将丢失列标题名称...

您可以添加以下内容：

set heading off
spool myfile.csv
select col1_name||';'||col2_name||';'||col3_name||';'||col4_name||';'||col5_name||';'||col6_name||';'||col7_name||';'||col8_name||';'||col9_name||';'||col10_name||';'||col11_name||';'||col12_name||';'||col13_name||';'||col14_name||';'||col15_name||';'||col16_name||';'||col17_name||';'||col18_name||';'||col19_name||';'||col20_name||';'||col21_name||';'||col22_name||';'||col23_name||';'||col24_name||';'||col25_name||';'||col26_name||';'||col27_name||';'||col28_name||';'||col29_name||';'||col30_name from dual;

select x
from
(
select col1||';'||col2||';'||col3||';'||col4||';'||col5||';'||col6||';'||col7||';'||col8||';'||col9||';'||col10||';'||col11||';'||col12||';'||col13||';'||col14||';'||col15||';'||col16||';'||col17||';'||col18||';'||col19||';'||col20||';'||col21||';'||col22||';'||col23||';'||col24||';'||col25||';'||col26||';'||col27||';'||col28||';'||col29||';'||col30 as x
from (  
      ...  here is the "core" select
     )
);
spool off

我知道它有点硬派，但对我有用。

— 卡洛斯
source
我们也需要||子查询吗？，我认为子查询不是必需的。但是是的，它是主要选择所必需的。
— davidb
什么是额外的外部select x？没有它应该可以工作。@davidb，您是对的，在主内部子查询中不需要并置，而是将所有列都别名为col1，col2等。在那里是必需的。
— 阿米特·奈杜
18

使用较新版本的客户端工具，可以使用多种选项来格式化查询输出。剩下的就是根据客户机工具将其假脱机到文件或将输出保存为文件。以下是几种方法：

  • SQL * Plus

使用SQL * Plus命令，您可以格式化以获取所需的输出。使用SPOOL将输出假脱机到文件。

例如，

SQL> SET colsep ,
SQL> SET pagesize 20
SQL> SET trimspool ON
SQL> SET linesize 200
SQL> SELECT * FROM scott.emp;

     EMPNO,ENAME     ,JOB      ,       MGR,HIREDATE ,       SAL,      COMM,    DEPTNO
----------,----------,---------,----------,---------,----------,----------,----------
      7369,SMITH     ,CLERK    ,      7902,17-DEC-80,       800,          ,        20
      7499,ALLEN     ,SALESMAN ,      7698,20-FEB-81,      1600,       300,        30
      7521,WARD      ,SALESMAN ,      7698,22-FEB-81,      1250,       500,        30
      7566,JONES     ,MANAGER  ,      7839,02-APR-81,      2975,          ,        20
      7654,MARTIN    ,SALESMAN ,      7698,28-SEP-81,      1250,      1400,        30
      7698,BLAKE     ,MANAGER  ,      7839,01-MAY-81,      2850,          ,        30
      7782,CLARK     ,MANAGER  ,      7839,09-JUN-81,      2450,          ,        10
      7788,SCOTT     ,ANALYST  ,      7566,09-DEC-82,      3000,          ,        20
      7839,KING      ,PRESIDENT,          ,17-NOV-81,      5000,          ,        10
      7844,TURNER    ,SALESMAN ,      7698,08-SEP-81,      1500,          ,        30
      7876,ADAMS     ,CLERK    ,      7788,12-JAN-83,      1100,          ,        20
      7900,JAMES     ,CLERK    ,      7698,03-DEC-81,       950,          ,        30
      7902,FORD      ,ANALYST  ,      7566,03-DEC-81,      3000,          ,        20
      7934,MILLER    ,CLERK    ,      7782,23-JAN-82,      1300,          ,        10

14 rows selected.

SQL>
  • SQL Developer 4.1之前的版本

或者，您可以使用新的提示在SQL开发人员。/*csv*/ 

/*csv*/

例如，在我的SQL Developer版本3.2.20.10中：

在此处输入图片说明

现在您可以将输出保存到文件中。

  • SQL Developer版本4.1

SQL Developer版本4.1中的新增功能，与sqlplus命令一样使用以下命令并作为脚本运行。不需要查询中的提示。

SET SQLFORMAT csv

现在您可以将输出保存到文件中。

— Lalit Kumar B
source
12

我知道这是一个旧线程，但是我注意到没有人提到下划线选项，该选项可以删除列标题下的下划线。

set pagesize 50000--50k is the max as of 12c
set linesize 10000   
set trimspool on  --remove trailing blankspaces
set underline off --remove the dashes/underlines under the col headers
set colsep ~

select * from DW_TMC_PROJECT_VW;
— 文件
source
下划线选项很好，需要那个。
— 坎丹多
如果您想要一个csv，且其顶行包含每一列的标题/标题，那将非常好。这将帮助任何可能想要查看csv文件，弄清楚他们在看什么的人，等等...
— Doc
10

这很粗糙，但是：

set pagesize 0 linesize 500 trimspool on feedback off echo off

select '"' || empno || '","' || ename || '","' || deptno || '"' as text
from emp

spool emp.csv
/
spool off
— 托尼·安德鲁斯
source
7

您可以显式格式化查询，以产生带有以下内容的分隔字符串：

select '"'||foo||'","'||bar||'"'
  from tab

并根据需要设置输出选项。作为一种选择，SQLPlus上的COLSEP变量将使您可以生成定界文件，而不必显式生成具有串联在一起的字段的字符串。但是，您必须在可能包含嵌入式逗号的任何列上的字符串两边加上引号。

— 关注TunbridgeWells
source
4

宁愿在sqlplus提示符中使用“ set colsep”，而不是一个一个地编辑col名称。使用sed编辑输出文件。

set colsep '","'     -- separate columns with a comma
sed 's/^/"/;s/$/"/;s/\s *"/"/g;s/"\s */"/g' $outfile > $outfile.csv
— CC。
source
2

您应注意，字段的值可能包含逗号和引号字符，因此某些建议的答案将不起作用，因为CSV输出文件将不正确。要替换字段中的引号并将其替换为双引号，可以使用oracle提供的REPLACE函数将单引号更改为双引号。

set echo off
set heading off
set feedback off
set linesize 1024   -- or some other value, big enough
set pagesize 50000
set verify off
set trimspool on

spool output.csv
select trim(
       '"'   || replace(col1, '"', '""') || 
       '","' || replace(col2, '"', '""') ||
       '","' || replace(coln, '"', '""') || '"' ) -- etc. for all the columns
from   yourtable
/
spool off

或者，如果您想要字段的单引号字符：

set echo off
set heading off
set feedback off
set linesize 1024   -- or some other value, big enough
set pagesize 50000
set verify off
set trimspool on

spool output.csv
select trim(
'"'   || replace(col1, '''', '''''') || 
'","' || replace(col2, '''', '''''') ||
'","' || replace(coln, '''', '''''') || '"' ) -- etc. for all the columns
from   yourtable
/
spool off
— 罗伯·休斯登斯
source
这trim()是不必要的。
— 阿米特·奈杜
1

使用vi或vim编写sql，将colsep与control-A一起使用（vi和vim在ctrl-A之前带有ctrl-v）。确保将行大小和页面大小设置为合理值，然后打开trimspool和trimout。

将其后台打印到文件中。然后...

sed -e 's/,/;/g' -e 's/ *{ctrl-a} */,/g'  {spooled file}  > output.csv

sed的东西可以变成脚本。ctrl-A前后的“ *”会挤出所有无用的空格。他们费心启用sqlplus的html输出但不是本机的csv，这不是很好吗？

我这样做是因为它处理数据中的逗号。我把它们变成分号。

— 查尔斯·斯蒂普
source
3
无法通过“我必须使用SQLPlus”测试。
— Daniel C. Sobral
0

使用sqlplus创建csv文件时出现问题。如果只希望列标题在输出中有一次并且有成千上万的行，则不能将pagesize设置得足够大而不能重复。解决方案是从pagesize = 50开始并解析标题，然后再次以pagesize = 0发出选择以获取数据。请参见下面的bash脚本：

#!/bin/bash
FOLDER="csvdata_mydb"
CONN="192.168.100.11:1521/mydb0023.world"
CNT=0376
ORD="0376"
TABLE="MY_ATTACHMENTS"

sqlplus -L logn/pswd@//${CONN}<<EOF >/dev/null
set pagesize 50;
set verify off;
set feedback off;
set long 99999;
set linesize 32767;
set trimspool on;
col object_ddl format A32000;
set colsep ,;
set underline off;
set headsep off;
spool ${ORD}${TABLE}.tmp;
select * from tblspc.${TABLE} where rownum < 2;
EOF
LINES=`wc -l ${ORD}${TABLE}.tmp | cut -f1 -d" "`
[ ${LINES} -le 3 ] && {
  echo "No Data Found in ${TABLE}."
}
[ ${LINES} -gt 3 ] && {
  cat ${ORD}${TABLE}.tmp | sed -e 's/ * / /g' -e 's/^ //' -e 's/ ,/,/g' -e 's/, /,/g' | tail -n +3 | head -n 1 > ./${ORD}${TABLE}.headers
}

sqlplus -L logn/pswd@//${CONN}<<EOF >/dev/null
set pagesize 0;
set verify off;
set feedback off;
set long 99999;
set linesize 32767;
set trimspool on;
col object_ddl format A32000;
set colsep ,;
set underline off;
set headsep off;
spool ${ORD}${TABLE}.tmp;
select * from tblspc.${TABLE};
EOF
LINES=`wc -l ${ORD}${TABLE}.tmp | cut -f1 -d" "`
[ ${LINES} -le 3 ] && {
  echo "No Data Found in ${TABLE}."
}
[ ${LINES} -gt 3 ] && {
  cat ${ORD}${TABLE}.headers > ${FOLDER}/${ORD}${TABLE}.csv
  cat ${ORD}${TABLE}.tmp | sed -e 's/ * / /g' -e 's/^ //' -e 's/ ,/,/g' -e 's/, /,/g' | tail -n +2 | head -n -1 >> ${FOLDER}/${ORD}${TABLE}.csv
}
— 拉里·R·欧文
source
-3

您可以使用csv提示。请参见以下示例：

select /*csv*/ table_name, tablespace_name
from all_tables
where owner = 'SYS'
and tablespace_name is not null;
— 阿迪尔森席尔瓦
source
By using our site, you acknowledge that you have read and understand our Cookie Policy and Privacy Policy.
Licensed under cc by-sa 3.0 with attribution required.