exceljs如何导入数据库

ExcelJS如何导入数据库

ExcelJS 是一个用于在 Node.js 中读写 Excel 文件的库，用 ExcelJS 导入数据库的步骤包括：读取 Excel 文件、解析数据、将数据插入到数据库中。 其中，读取 Excel 文件 是最关键的一步，因为它决定了数据的准确性和完整性。接下来，我们将详细介绍如何使用 ExcelJS 和数据库工具实现这一目标。

一、准备工作

1. 安装所需的库

要使用 ExcelJS 和一个数据库工具（如 MySQL），首先需要安装相关的 Node.js 包：

npm install exceljs mysql2

2. 配置数据库连接

在开始读取 Excel 文件之前，我们需要先配置数据库连接。以下是一个简单的 MySQL 数据库连接示例：

const mysql = require('mysql2');
const connection = mysql.createConnection({
  host: 'localhost',
  user: 'root',
  password: 'password',
  database: 'test'
});
connection.connect((err) => {
  if (err) {
    console.error('Error connecting to the database:', err);
    return;
  }
  console.log('Connected to the database.');
});

二、读取 Excel 文件

1. 初始化 ExcelJS

首先，我们需要初始化 ExcelJS 并读取 Excel 文件：

const ExcelJS = require('exceljs');
const workbook = new ExcelJS.Workbook();
workbook.xlsx.readFile('path/to/your/file.xlsx')
  .then(() => {
    // 读取成功后的处理逻辑
  })
  .catch((err) => {
    console.error('Error reading Excel file:', err);
  });

2. 解析数据

在读取文件成功后，我们需要解析数据。假设 Excel 文件的第一张表格包含我们需要的数据：

workbook.xlsx.readFile('path/to/your/file.xlsx')
  .then(() => {
    const worksheet = workbook.getWorksheet(1);
    worksheet.eachRow((row, rowNumber) => {
      console.log('Row ' + rowNumber + ' = ' + JSON.stringify(row.values));
    });
  })
  .catch((err) => {
    console.error('Error reading Excel file:', err);
  });

三、将数据插入数据库

1. 准备 SQL 语句

在解析数据后，我们需要将其插入到数据库中。首先，我们准备一个 SQL 语句模板：

const insertQuery = 'INSERT INTO your_table_name (column1, column2, column3) VALUES (?, ?, ?)';

2. 插入数据

接下来，我们遍历每一行并将数据插入到数据库中：

workbook.xlsx.readFile('path/to/your/file.xlsx')
  .then(() => {
    const worksheet = workbook.getWorksheet(1);
    worksheet.eachRow((row, rowNumber) => {
      if (rowNumber > 1) { // Assuming the first row is the header
        const values = row.values.slice(1); // Remove the first element which is empty
        connection.query(insertQuery, values, (err, results) => {
          if (err) {
            console.error('Error inserting data:', err);
          } else {
            console.log('Data inserted successfully:', results);
          }
        });
      }
    });
  })
  .catch((err) => {
    console.error('Error reading Excel file:', err);
  });

四、处理异常情况

1. 数据类型问题

在插入数据时，可能会遇到数据类型不匹配的问题。我们可以在插入之前进行数据类型检查和转换：

function convertDataType(value, type) {
  switch (type) {
    case 'string':
      return String(value);
    case 'number':
      return Number(value);
    case 'boolean':
      return Boolean(value);
    default:
      return value;
  }
}

2. 错误处理

在实际应用中，处理错误是至关重要的。我们可以通过捕获错误并记录日志来改进错误处理：

workbook.xlsx.readFile('path/to/your/file.xlsx')
  .then(() => {
    const worksheet = workbook.getWorksheet(1);
    worksheet.eachRow((row, rowNumber) => {
      if (rowNumber > 1) {
        const values = row.values.slice(1);
        connection.query(insertQuery, values, (err, results) => {
          if (err) {
            console.error('Error inserting data for row ' + rowNumber + ':', err);
          } else {
            console.log('Data inserted successfully for row ' + rowNumber + ':', results);
          }
        });
      }
    });
  })
  .catch((err) => {
    console.error('Error reading Excel file:', err);
  });

五、实战案例

1. 从 Excel 文件中导入用户数据到 MySQL

假设我们有一个 Excel 文件包含用户信息（姓名、邮箱、年龄），我们需要将这些数据导入到数据库中：

const ExcelJS = require('exceljs');
const mysql = require('mysql2');
const connection = mysql.createConnection({
  host: 'localhost',
  user: 'root',
  password: 'password',
  database: 'test'
});
connection.connect((err) => {
  if (err) {
    console.error('Error connecting to the database:', err);
    return;
  }
  console.log('Connected to the database.');
});
const workbook = new ExcelJS.Workbook();
workbook.xlsx.readFile('path/to/your/users.xlsx')
  .then(() => {
    const worksheet = workbook.getWorksheet(1);
    const insertQuery = 'INSERT INTO users (name, email, age) VALUES (?, ?, ?)';
    worksheet.eachRow((row, rowNumber) => {
      if (rowNumber > 1) {
        const values = row.values.slice(1);
        connection.query(insertQuery, values, (err, results) => {
          if (err) {
            console.error('Error inserting data for row ' + rowNumber + ':', err);
          } else {
            console.log('Data inserted successfully for row ' + rowNumber + ':', results);
          }
        });
      }
    });
  })
  .catch((err) => {
    console.error('Error reading Excel file:', err);
  });

2. 从 Excel 文件中导入产品数据到 MySQL

假设我们有一个 Excel 文件包含产品信息（产品名、价格、库存），我们需要将这些数据导入到数据库中：

const ExcelJS = require('exceljs');
const mysql = require('mysql2');
const connection = mysql.createConnection({
  host: 'localhost',
  user: 'root',
  password: 'password',
  database: 'test'
});
connection.connect((err) => {
  if (err) {
    console.error('Error connecting to the database:', err);
    return;
  }
  console.log('Connected to the database.');
});
const workbook = new ExcelJS.Workbook();
workbook.xlsx.readFile('path/to/your/products.xlsx')
  .then(() => {
    const worksheet = workbook.getWorksheet(1);
    const insertQuery = 'INSERT INTO products (product_name, price, stock) VALUES (?, ?, ?)';
    worksheet.eachRow((row, rowNumber) => {
      if (rowNumber > 1) {
        const values = row.values.slice(1);
        connection.query(insertQuery, values, (err, results) => {
          if (err) {
            console.error('Error inserting data for row ' + rowNumber + ':', err);
          } else {
            console.log('Data inserted successfully for row ' + rowNumber + ':', results);
          }
        });
      }
    });
  })
  .catch((err) => {
    console.error('Error reading Excel file:', err);
  });

六、优化性能

1. 批量插入

对于大量数据的插入，逐行插入可能效率低下。我们可以使用批量插入来提高性能：

const batchInsert = (data) => {
  const insertQuery = 'INSERT INTO your_table_name (column1, column2, column3) VALUES ?';
  connection.query(insertQuery, [data], (err, results) => {
    if (err) {
      console.error('Error inserting data:', err);
    } else {
      console.log('Data inserted successfully:', results);
    }
  });
};
const workbook = new ExcelJS.Workbook();
workbook.xlsx.readFile('path/to/your/file.xlsx')
  .then(() => {
    const worksheet = workbook.getWorksheet(1);
    const data = [];
    worksheet.eachRow((row, rowNumber) => {
      if (rowNumber > 1) {
        const values = row.values.slice(1);
        data.push(values);
      }
    });
    batchInsert(data);
  })
  .catch((err) => {
    console.error('Error reading Excel file:', err);
  });

2. 使用事务

为了确保数据的一致性和完整性，我们可以使用数据库事务：

const batchInsert = (data) => {
  connection.beginTransaction((err) => {
    if (err) {
      console.error('Error starting transaction:', err);
      return;
    }
    const insertQuery = 'INSERT INTO your_table_name (column1, column2, column3) VALUES ?';
    connection.query(insertQuery, [data], (err, results) => {
      if (err) {
        return connection.rollback(() => {
          console.error('Error inserting data:', err);
        });
      }
      connection.commit((err) => {
        if (err) {
          return connection.rollback(() => {
            console.error('Error committing transaction:', err);
          });
        }
        console.log('Data inserted successfully:', results);
      });
    });
  });
};
const workbook = new ExcelJS.Workbook();
workbook.xlsx.readFile('path/to/your/file.xlsx')
  .then(() => {
    const worksheet = workbook.getWorksheet(1);
    const data = [];
    worksheet.eachRow((row, rowNumber) => {
      if (rowNumber > 1) {
        const values = row.values.slice(1);
        data.push(values);
      }
    });
    batchInsert(data);
  })
  .catch((err) => {
    console.error('Error reading Excel file:', err);
  });

七、总结

使用 ExcelJS 导入数据库的过程包括：安装所需的库、配置数据库连接、读取 Excel 文件、解析数据、将数据插入数据库。在实际应用中，处理异常情况和优化性能是至关重要的。通过批量插入和使用事务，可以显著提高数据导入的效率和可靠性。希望本文能够帮助你更好地理解和使用 ExcelJS 导入数据库。

如果你需要管理团队项目，可以考虑使用研发项目管理系统PingCode，它能够提供强大的项目跟踪和管理功能；如果你需要更通用的项目协作软件，可以选择Worktile，它能够帮助团队更高效地协作和沟通。