如何把csv用plsql导入数据库

如何把CSV用PL/SQL导入数据库

要将CSV文件导入Oracle数据库，可以使用外部表、SQLLoader、PL/SQL程序等方法；其中外部表和SQLLoader方法是最常用和高效的。 在本文中，我们将详细讨论如何使用这些方法将CSV文件导入Oracle数据库，并对每种方法的优缺点进行分析。

一、外部表方法

外部表是Oracle提供的一种方便的工具，可以直接从CSV文件中读取数据，而不需要将数据实际导入数据库表中。这种方法非常适合处理只读的数据导入任务。

1、创建目录对象

首先，需要创建一个指向CSV文件所在目录的目录对象。

CREATE OR REPLACE DIRECTORY csv_dir AS '/path/to/csv';

2、授予权限

接下来，授予适当的权限以便访问该目录。

GRANT READ, WRITE ON DIRECTORY csv_dir TO your_username;

3、创建外部表

创建一个外部表来读取CSV文件中的数据。

CREATE TABLE external_table (
    column1 VARCHAR2(50),
    column2 VARCHAR2(50),
    column3 NUMBER
)
ORGANIZATION EXTERNAL
(
    TYPE ORACLE_LOADER
    DEFAULT DIRECTORY csv_dir
    ACCESS PARAMETERS
    (
        RECORDS DELIMITED BY NEWLINE
        FIELDS TERMINATED BY ',' OPTIONALLY ENCLOSED BY '"'
        MISSING FIELD VALUES ARE NULL
        (
            column1 CHAR(50),
            column2 CHAR(50),
            column3 CHAR(10)
        )
    )
    LOCATION ('yourfile.csv')
)
REJECT LIMIT UNLIMITED;

4、查询外部表

现在可以像查询普通表一样查询外部表。

SELECT * FROM external_table;

二、SQL*Loader方法

SQL*Loader是Oracle提供的一个实用程序，用于将外部文件中的数据加载到Oracle数据库表中。它适用于大批量数据导入。

1、创建控制文件

首先，创建一个控制文件（control_file.ctl），定义数据源、目标表及字段映射。

LOAD DATA INFILE 'yourfile.csv' INTO TABLE target_table FIELDS TERMINATED BY ',' OPTIONALLY ENCLOSED BY '"' ( column1, column2, column3 )

2、运行SQL*Loader命令

在命令行中运行SQL*Loader命令。

sqlldr userid=your_username/your_password control=control_file.ctl

三、PL/SQL程序方法

虽然外部表和SQL*Loader方法是最常用和高效的，但有时我们可能需要更多的控制和灵活性，这时可以考虑使用PL/SQL程序。

1、创建目标表

首先，创建目标表来接收CSV文件中的数据。

CREATE TABLE target_table (
    column1 VARCHAR2(50),
    column2 VARCHAR2(50),
    column3 NUMBER
);

2、编写PL/SQL程序

编写PL/SQL程序读取CSV文件并插入到目标表中。需要使用UTL_FILE包来读取文件。

DECLARE
    fileHandler UTL_FILE.FILE_TYPE;
    fileLine VARCHAR2(4000);
    column1 VARCHAR2(50);
    column2 VARCHAR2(50);
    column3 NUMBER;
BEGIN
    fileHandler := UTL_FILE.FOPEN('csv_dir', 'yourfile.csv', 'R');
    LOOP
        BEGIN
            UTL_FILE.GET_LINE(fileHandler, fileLine);
            -- 分割字段
            column1 := SUBSTR(fileLine, 1, INSTR(fileLine, ',') - 1);
            fileLine := SUBSTR(fileLine, INSTR(fileLine, ',') + 1);
            column2 := SUBSTR(fileLine, 1, INSTR(fileLine, ',') - 1);
            fileLine := SUBSTR(fileLine, INSTR(fileLine, ',') + 1);
            column3 := TO_NUMBER(fileLine);
            -- 插入数据
            INSERT INTO target_table (column1, column2, column3)
            VALUES (column1, column2, column3);
        EXCEPTION
            WHEN NO_DATA_FOUND THEN
                EXIT;
        END;
    END LOOP;
    UTL_FILE.FCLOSE(fileHandler);
END;

四、选择适合的方法

每种方法都有其优点和缺点，选择适合的方法取决于具体需求。

1、外部表方法

优点:

简单易用：无需编写复杂的程序。
高效：直接从文件读取数据。

缺点:

只读：无法修改外部表中的数据。

2、SQL*Loader方法

优点:

高效：适用于大批量数据导入。
灵活：支持多种数据格式和复杂的数据映射。

缺点:

学习曲线：需要学习SQL*Loader控制文件的语法。

3、PL/SQL程序方法

优点:

灵活：可以根据需要编写自定义逻辑。
控制：可以处理各种复杂的数据操作。

缺点:

繁琐：需要编写较多的代码。
性能：对于大批量数据，性能可能不如前两种方法。

五、实际使用案例

为了更好地理解这些方法，以下是一些实际使用案例。

1、使用外部表方法进行数据分析

假设我们有一个包含销售数据的CSV文件，需要对这些数据进行分析。我们可以使用外部表方法快速读取数据并进行查询分析。

CREATE TABLE sales_external (
    sale_id NUMBER,
    product VARCHAR2(50),
    amount NUMBER
)
ORGANIZATION EXTERNAL
(
    TYPE ORACLE_LOADER
    DEFAULT DIRECTORY csv_dir
    ACCESS PARAMETERS
    (
        RECORDS DELIMITED BY NEWLINE
        FIELDS TERMINATED BY ',' OPTIONALLY ENCLOSED BY '"'
        MISSING FIELD VALUES ARE NULL
        (
            sale_id CHAR(10),
            product CHAR(50),
            amount CHAR(10)
        )
    )
    LOCATION ('sales.csv')
)
REJECT LIMIT UNLIMITED;
-- 查询分析
SELECT product, SUM(amount) AS total_sales
FROM sales_external
GROUP BY product;

2、使用SQL*Loader方法进行批量数据导入

假设我们有一个包含客户信息的CSV文件，需要将这些数据批量导入数据库。我们可以使用SQL*Loader方法高效完成此任务。

-- control_file.ctl LOAD DATA INFILE 'customers.csv' INTO TABLE customers FIELDS TERMINATED BY ',' OPTIONALLY ENCLOSED BY '"' ( customer_id, customer_name, contact_number ) -- 命令行 sqlldr userid=your_username/your_password control=control_file.ctl

3、使用PL/SQL程序方法进行定制化数据处理

假设我们有一个包含订单信息的CSV文件，需要在导入数据的同时进行一些定制化处理。我们可以使用PL/SQL程序方法实现这一目标。

DECLARE
    fileHandler UTL_FILE.FILE_TYPE;
    fileLine VARCHAR2(4000);
    order_id NUMBER;
    customer_id NUMBER;
    order_date DATE;
BEGIN
    fileHandler := UTL_FILE.FOPEN('csv_dir', 'orders.csv', 'R');
    LOOP
        BEGIN
            UTL_FILE.GET_LINE(fileHandler, fileLine);
            -- 分割字段
            order_id := TO_NUMBER(SUBSTR(fileLine, 1, INSTR(fileLine, ',') - 1));
            fileLine := SUBSTR(fileLine, INSTR(fileLine, ',') + 1);
            customer_id := TO_NUMBER(SUBSTR(fileLine, 1, INSTR(fileLine, ',') - 1));
            fileLine := SUBSTR(fileLine, INSTR(fileLine, ',') + 1);
            order_date := TO_DATE(fileLine, 'YYYY-MM-DD');
            -- 插入数据并进行处理
            INSERT INTO orders (order_id, customer_id, order_date)
            VALUES (order_id, customer_id, order_date);
            -- 定制化处理
            UPDATE customers
            SET last_order_date = order_date
            WHERE customer_id = customer_id;
        EXCEPTION
            WHEN NO_DATA_FOUND THEN
                EXIT;
        END;
    END LOOP;
    UTL_FILE.FCLOSE(fileHandler);
END;

六、总结

将CSV文件导入Oracle数据库有多种方法，包括外部表、SQLLoader和PL/SQL程序方法。外部表方法适合只读数据导入任务，SQLLoader方法适合大批量数据导入，而PL/SQL程序方法适合需要定制化处理的数据导入任务。选择适合的方法可以提高数据导入的效率和准确性。

无论选择哪种方法，了解其优缺点，并根据具体需求进行选择，都是确保数据导入成功的关键。在实际使用中，可以根据不同的场景和需求，灵活应用这些方法，从而达到最佳的数据导入效果。

通过本文的介绍，相信你已经掌握了如何将CSV文件导入Oracle数据库的基本方法和技巧。希望这些内容对你在实际工作中有所帮助。