首页 > 数据库 > mysql教程 > 如何在 PHP 中导入大型 MySQL 文件:采用拆分查询方法的内存高效解决方案?

如何在 PHP 中导入大型 MySQL 文件:采用拆分查询方法的内存高效解决方案?

Barbara Streisand
发布: 2024-10-31 04:50:30
原创
750 人浏览过

How to Import Large MySQL Files in PHP: A Memory-Efficient Solution with Split-Query Approach?

在 PHP 中导入大型 MySQL 文件:全面的拆分查询解决方案

将大型 MySQL 文件导入共享托管提供商网站可以这是一个挑战,特别是当使用 PHP 并且对 MySQL 的外部访问受到限制时。本文提供了一个全面的解决方案,通过可靠地将文件拆分为单独的查询进行导入来解决此问题。

需要考虑的挑战

解析和查询大型 MySQL 文件时在 PHP 中,出现了几个挑战:

  • 检测数据中的字段分隔符
  • 处理备注字段中的换行符
  • 避免由于文件大小太大而导致内存问题

可靠的拆分查询解决方案

为了克服这些挑战,本文介绍了一个名为 SplitSQL() 的内存友好函数。该函数逐行读取文件并累积各个查询,直到遇到查询分隔符(例如分号)。代码如下:

function SplitSQL($file, $delimiter = ';') {
  set_time_limit(0);
  if (is_file($file) && is_resource($file = fopen($file, 'r'))) {
    $query = array();
    while (!feof($file)) {
      $query[] = fgets($file);
      if (preg_match('~' . preg_quote($delimiter, '~') . '\s*$~iS', end($query))) {
        $query = trim(implode('', $query));
        if (mysql_query($query) === false) {
          echo 'ERROR: ' . $query . "\n";
        } else {
          echo 'SUCCESS: ' . $query . "\n";
          flush();
        }
        $query = array();
      }
    }
    fclose($file);
    return true;
  }
  return false;
}
登录后复制

内存友好且经过测试

此函数仅根据需要分配内存,避免内存问题。它已经在大型 phpMyAdmin SQL 转储上进行了测试,证明了其有效处理现实世界数据的能力。

测试数据和输出

使用示例数据及其各自的输出SplitSQL() 函数:

测试数据:

CREATE TABLE IF NOT EXISTS "test" (
  "id" INTEGER PRIMARY KEY AUTOINCREMENT,
  "name" TEXT,
  "description" TEXT
);

BEGIN;
INSERT INTO "test" ("name", "description")
VALUES (";;;", "something for you mind; body; soul");
COMMIT;

UPDATE "test"
SET "name" = "; "
WHERE "id" = 1;
登录后复制

输出:

SUCCESS: CREATE TABLE IF NOT EXISTS "test" ( "id" INTEGER PRIMARY KEY AUTOINCREMENT, "name" TEXT, "description" TEXT );
SUCCESS: BEGIN;
SUCCESS: INSERT INTO "test" ("name", "description") VALUES (";;;", "something for you mind; body; soul");
SUCCESS: COMMIT;
SUCCESS: UPDATE "test" SET "name" = "; " WHERE "id" = 1;
登录后复制

结论

SplitSQL() 函数提供了一个强大且可靠的解决方案,用于将大型 MySQL 文件拆分为单独的查询,从而允许在共享托管环境中高效且自动化地导入数据库。通过解决内存限制并考虑各种数据类型,该函数简化了在 PHP 中导入大型 MySQL 文件的复杂过程。

以上是如何在 PHP 中导入大型 MySQL 文件:采用拆分查询方法的内存高效解决方案?的详细内容。更多信息请关注PHP中文网其他相关文章!

来源:php.cn
本站声明
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn
作者最新文章
热门教程
更多>
最新下载
更多>
网站特效
网站源码
网站素材
前端模板