linux 下如何使用shell 把处理好的csv文件导入到数据库下

linux 下，可以使用cli程序把csv文件导入到数据库。具体代码如下：

$ORACLE_HOME/bin/sqlplus -S username/password@instanceName > /dev/null 2>&1  <<!!

#对sqlplus作一些设置，使之只输出我们需要的文本

set echo off

set pagesize 0

set verify off

set feedback off

set termout off

set linesize 3000

set trimspool on

#查询输出到临时文件

spool /tmp/some_tmpcsv 

#select语句

select column1||','||column2||','||column3 

from some_table where condition

spool off

#这里可以添加多个查询,且每个查询可输出到不同的文件,如下面注释

#spool /tmp/some_tmpcsv 

#select column1||','||column2||','||column3 

#from some_table where condition

#spool off

set markup HTML off

quit

!!

#计算记录总行数，如果是0则不发邮件

NUM=`cat /tmp/some_tmpcsv | wc -l`

if[ $NUM -gt 0 ]

then

#先写excel的每列的title

echo 'Title_Of_Column1, Title_Of_Column2, Title_Of_ColumnN' > /tmp/attachementcsv

#数据正文

cat /tmp/some_tmpcsv >> /tmp/attachementcsv

#发邮件

(

echo "From: user@somehostcom"

echo "To: user1@somehostcom"

echo "MIME-Version: 10"

echo "Content-Type: multipart/mixed;"

echo ' boundary="A_Boundary_Name_You_Can_Change_It"'

echo "Subject: Subject"

echo ""

echo ""

#附件分隔符，上面的boundary前面加--

echo "--A_Boundary_Name_You_Can_Change_It"

echo 'Content-Transfer-Encoding: x-uuencode'

echo 'Content-Type: text/csv;'

echo '        name="attachementcsv"'

echo 'Content-Disposition: attachment;'

echo '        filename="attachementcsv"'

echo ""

uuencode /tmp/attachementcsv attachementcsv

echo "--A_Boundary_Name_You_Can_Change_It"

#附件结束

) | mailx -t

fi

#删除临时文件

rm -f /tmp/csv

exit 0

1、运行Xshell客户端（事先安装好Xshell客户端）

2、连接远程服务器

3、在命令行输入框中输入数据库的连接口令如：mysql

-h

19216810100

-u

ju70_sql

-pwju70_sql

4、这个连接口令包含了，数据库的host，数据库用户名，以及密码，输入后点击回车,如下图就表示连接成功了

5、接着输入“use

数据库名称”的方式，告诉后台要使用这个数据库，输入后回车

6、如下图就可以使用正常的sql语句直接在Xshell中执行就可以查询得到想要的数据。

创建数据库

选择开始菜单中→程序→Management

SQL

Server

2008→SQL

Server

Management

Studio命令，打开SQL

Server

Management

Studio窗口，并使用Windows或

SQL

Server身份验证建立连接。

在对象资源管理器窗口中展开服务器，然后选择数据库节点

右键单击数据库节点，从d出来的快捷菜单中选择新建数据库命令。

执行上述 *** 作后，会d出新建数据库对话框。在对话框、左侧有3个选项，分别是常规、选项和文件组。完成这三个选项中的设置会后，就完成了数据库的创建工作，

在数据库名称文本框中输入要新建数据库的名称。例如，这里以“新建的数据库”。

在所有者文本框中输入新建数据库的所有者，如sa。根据数据库的使用情况，选择启用或者禁用使用全文索引复选框。

在数据库文件列表中包括两行，一行是数据库文件，而另一行是日记文件。通过单击下面的添加、删除按钮添加或删除数据库文件。

切换到选项页、在这里可以设置数据库的排序规则、恢复模式、兼容级别和其他属性。

切换到文件组页，在这里可以添加或删除文件组。

完成以上 *** 作后，单击确定按钮关闭新建数据库对话框。至此“新建的数据”数据库创建成功。新建的数据库可以再对象资源管理器窗口看到。

方式一

当然是windows电脑安装达梦管理工具，直接把脚本贴进去执行，但避免不了出现误 *** 作

在这里插入描述

方式二

使用shell脚本执行sql

1 先找到达梦数据库安装位置吧

[root@localhost ~]# ss -nlp |grep 5236

tcp LISTEN 0 128 [::]:5236 [::]: users:(("dmserver",pid=103380,fd=4))

[root@localhost ~]# ps -ef|grep dmserver

root 85093 66993 0 17:56 pts/6 00:00:00 grep --color=auto dmserver

dmdba 103380 1 8 13:36 00:23:18 /home/dmdba/dmdbms/bin/dmserver /home/dmdba/dmdbms/data/DAMENG_JW/dmini -noconsole

1

2

3

4

5

1

2

3

4

5

2 直接在linux上执行shell命令执行sql脚本

21 # disql username/password:port

使用这个命令可以进入sql控制台

[root@localhost sql]# /home/dmdba/dmdbms/bin/disql cpuser/cpuser123:5236

服务器[LOCALHOST:5236]:处于普通打开状态

登录使用时间 : 5524(ms)

disql V8

SQL>

进入SQL>后：

直接输入sql语句，使用英文分号结尾，回车执行。

使用“`sql文件路径”，可以执行sql脚本文件，注意前面有一个小撇（esc和tab中间的键）

使用“start sql文件路径”，可以执行sql脚本文件。

22 # disql username/password:port `sql文件位置

使用这个命令可以执行sql脚本

[root@localhost sql]# /home/dmdba/dmdbms/bin/disql cpuser/cpuser123:5236 \`sql/testsql

[root@localhost sql]#

1

2

1

2

但需注意

这个脚本执行完sql会停留在sql执行行，如需执行完返回到shell命令行，则需要在sql文件结尾添加：exit; 。

这个shell语句不能用start执行sql文件，只能使用“`”，并且前面需要添加转义字符“\”。

23 达梦sql脚本注意事项

目前发现-创建schema语句以及执行过程结尾，都需要添加“/”结束

例如执行以下语句，回车执行，一直在输出数字，直到输入“/”，再回车执行，才执行成功。

[root@localhost sql]# /home/dmdba/dmdbms/bin/disql cpuser/cpuser123:5236

服务器[LOCALHOST:5236]:处于普通打开状态

登录使用时间 : 6121(ms)

disql V8

SQL> create schema test;

2

3 /

*** 作已执行

已用时间: 26698(毫秒) 执行号:700604

SQL>

sql脚本示例：

-- 创建schema

CREATE SCHEMA DB_ZFBA_MOBILE;

/

-- 执行过程

begin

if exists(select 1 from DBA_TAB_COLUMNS where OWNER='DB_ZFBA_MOBILE' AND TABLE_NAME='T_ZJTQD') then

EXECUTE immediate 'drop table DB_ZFBA_MOBILET_ZJTQD';

end if;

end;

/

create table DB_ZFBA_MOBILET_ZJTQD

(

"C_BH" char(32) NOT NULL, -- 主键

"C_BH_AJ" varchar2(32) NULL, -- 案件编号

……

"DT_ZHXGSJ" datetime NULL, -- 最后修改时间

constraint PK_T_ZJTQD primary key( C_BH )

);

sql文件结尾添加exit;，保证多个sql文件执行不会中断

3 编写shell脚本

注意：shell脚本一定在linux中编写，windows编写的有些语句执行不成功（目前原因未知）

例如： a=a b=b c=$a$b echo $c 在windows下编写，linux中执行完会输出b

#!/bin/bash

# 请先配置数据库连接信息，再执行此脚本

DM_PATH=/home/dmdba/dmdbms #达梦数据库的安装位置

USERNAME=cpuser #达梦数据库连接用户名

PASSWORD=cpuser123 #达梦数据库连接密码

PORT=5236 #达梦数据库连接端口号

# 下面的信息请不要随意修改

CONNECT_INFO=$USERNAME/$PASSWORD:$PORT

echo "连接信息："$CONNECT_INFO

# STEP 1

echo "开始执行---- sql/02_创建数据库对象/00CS_GSYSsql"

$DM_PATH/bin/disql $CONNECT_INFO \`sql/02_创建数据库对象/00CS_GSYSsql >> DB_DMlog

echo "执行完成---- sql/02_创建数据库对象/00CS_GSYSsql"

# STEP 2

echo "开始执行---- sql/02_创建数据库对象/01CT_GSYSsql"

$DM_PATH/bin/disql $CONNECT_INFO \`sql/02_创建数据库对象/01CT_GSYSsql >> DB_DMlog

echo "执行完成---- sql/02_创建数据库对象/01CT_GSYSsql"

# STEP 3

echo "开始执行---- sql/02_创建数据库对象/02CC_GSYSsql"

$DM_PATH/bin/disql $CONNECT_INFO \`sql/02_创建数据库对象/02CC_GSYSsql >> DB_DMlog

echo "执行完成---- sql/02_创建数据库对象/02CC_GSYSsql"

# STEP 4

echo "开始执行---- sql/02_创建数据库对象/03CI_GSYSsql"

$DM_PATH/bin/disql $CONNECT_INFO \`sql/02_创建数据库对象/03CI_GSYSsql >> DB_DMlog

echo "执行完成---- sql/02_创建数据库对象/03CI_GSYSsql"

# STEP 5

echo "开始执行---- sql/03_初始化数据/02I_T_Aty_CodeType_GSYSsql"

$DM_PATH/bin/disql $CONNECT_INFO \`sql/03_初始化数据/02I_T_Aty_CodeType_GSYSsql >> DB_DMlog

echo "执行完成---- sql/03_初始化数据/02I_T_Aty_CodeType_GSYSsql"

# STEP 6

echo "开始执行---- sql/03_初始化数据/02I_T_Aty_Code_GSYSsql"

$DM_PATH/bin/disql $CONNECT_INFO \`sql/03_初始化数据/02I_T_Aty_Code_GSYSsql >> DB_DMlog

echo "执行完成---- sql/03_初始化数据/02I_T_Aty_Code_GSYSsql"

# Complete

echo "SQL全部执行完成---- 日志请查看DB_DMlog"

执行完成后，通过shell控制台和DB_DMlog日志可以分析sql脚本是否执行成功。

这个问题你可能通过查询oracle的系统表，例如all_all_tables，用这些对象的列表生成一批数据库删除对象的语句，然后将这些语句存到文件，用sqlplus的文件参数执行这一批语句。

思路如下:

首先把你的查询写成一个sql文件如xxxsql

然后在你的shell里运行isql 去执行这个sql, 把结果输出到一个文件里,如:

isql -Sserver_name -Uuser_name -Ppassword -ixxxsql > resultlog

假设你的查询最后只有一个数值, 那它在resultlog文件里的格式应该是很简单的,如:

column_name

------------------

100

你可以通过sed和cat命令从文件里获取'100'这个内容并赋给变量,如:

sed -e '1,2d' resultlog --删除文件前两行

VALUE=$(cat resultlog)--获取文件内容到变量

以上就是关于linux 下如何使用shell 把处理好的csv文件导入到数据库下全部的内容，包括:linux 下如何使用shell 把处理好的csv文件导入到数据库下、Xshell怎么连接数据库、shell脚本创建文件夹文件名称为数据库中表的一列等相关内容解答，如果想了解更多相关内容，可以关注我们，你们的支持是我们更新的动力！