从SQLite迁移至MySQL

教程

MySQL SQLite

介绍SQLite

SQLite是一种开源关系数据库管理系统（RDBMS），与大多数基于客户端-服务器模型的数据库管理系统不同，因为它是一种无服务器的嵌入式数据库。这意味着SQLite数据库在访问数据的软件中运行，无需单独的服务器。由于这种架构，SQLite是一个高度可靠、高效的系统，能够在低内存环境中完美运行。

SQLite的主要优点之一是其跨平台兼容性，允许它在各种现代操作系统上运行。作为一个包含在C库中的RDBMS，SQLite可以被任何能够连接到用C编写的外部库的编程语言编写的应用程序使用。例如，它非常适合用于开发数字设备中的嵌入式软件，如手机、游戏机、相机和机顶盒。此外，SQLite可以作为应用程序处理数据的临时数据集。

此外，SQLite的简单性和多样性使其成为大多数处理低到中等流量HTTP请求的网站的优秀数据库引擎。由于其易于使用和设置，它也常用于教育机构进行培训和学习。

对于不需要全面用户管理功能的小型数据库，SQLite是一个合适的选择。然而，如果您需要与其他用户协作或需要可扩展性和定制化，它可能不是最佳选择。

MySQL另一方面可以支持多个用户并以表格的形式处理大量数据。随着您的业务增长和数据库扩展，SQLite可能不再满足您的需求。因此，如果您处理的是大量数据并寻找功能强大的数据库管理系统（DBMS）以及丰富的高级功能，那么从SQLite迁移到MySQL是合理的。

介绍MySQL

MySQL是一个非常流行的开源关系数据库管理系统，采用GNU许可证进行分发。它支持大多数用于定义、查询和更新数据库的标准结构化查询语言（SQL）。与其他流行的DBMS相比，MySQL速度更快，具有更高的可扩展性和更友好的用户体验。

它遵循客户端-服务器模型，其中数据库运行在服务器上，客户端和工作站通过网络访问数据。然后，服务器通过返回请求的输出响应来自客户端的图形用户界面请求。MySQL支持多种操作系统和多种编程语言，例如PHP、PERL、JAVA、C++、C等。

许多组织和公司广泛使用MySQL进行网页开发，因为它是LAMP堆栈的重要组成部分，支持PHP和Perl，从而便于构建网站和Web应用程序。

此外，MySQL的极大灵活性使数据库专业人员能够将数据库服务器配置为适应各种用途，从在线商店到商业智能和数据分析。凭借其高速加载能力、独特的内存缓存和其他性能增强功能，MySQL可以满足企业级数据仓库的所有性能要求。

我需要迁移到MySQL吗？

SQLite和MySQL各有优缺点，因此评估迁移的好处是否值得付出努力是很重要的。SQLite是小型或中型可移植软件（如移动应用程序或游戏）的优秀嵌入式数据库选择。然而，不建议将SQLite用于：

大量数据。SQLite的官方网站建议不使用超过1 TB的数据库。
同时数据访问。由于SQLite直接读取和写入数据到磁盘，它限制了并行读取，并且在任何时候仅允许一个写入操作。

另一方面，MySQL非常适合网站和Web应用程序，并通过支持复制和自动分片（在商业MySQL产品中可用）实现可扩展性。同时，MySQL并不完全符合SQL标准，这可能会成为需要至少接近完全SQL合规性的项目的障碍。

迁移策略：SQLite3 + MySQL

SQLite到MySQL迁移的最流行和直接的方法是基于SQLite3和MySQL命令行工具的组合：

1. 将SQLite数据库导出为创建表和复制数据的SQL语句。

Shell

sqlite3 {SQLite database} .dump > {output script file}

2. 如果需要，创建目标 MySQL 数据库。

Shell

echo "CREATE DATABASE {MySQL database}" | mysql -u {MySQL user} -p

3. 修改脚本文件以符合 MySQL 语法。

删除所有以PRAGMA、BEGIN TRANSACTION 和 COMMIT开头的行。
将可能包围数据库对象名称的引号、'[‘、’]’符号替换为 MySQL 相应的 ‘`’。
将AUTOINCREMENT替换为AUTO_INCREMENT。
将布尔值 ‘t’ 和 ‘f’ 转换为 1 和 0。
将未指定长度的VARCHAR类型转换为TEXT。

4. 将生成的脚本文件导入到 MySQL 数据库中。

Shell

mysql -u {MySQL user} -p {MySQL database} < {script file}

迁移策略：Python/Django 脚本

可以通过 Perl 或 Python 脚本从 SQLite 迁移到 MySQL 数据库。然而，这种方法相当复杂，可能需要 Perl 或 Python 编程技能。

以下是使用 Python/Django 迁移 SQLite 数据库到 MySQL 的示例：

1. 在settings.py配置文件中定义数据库，告诉Django将要使用的数据库服务器。

Python

DATABASES = {

    'sqlite': {

        'ENGINE': 'django.db.backends.sqlite3', 

        'NAME': 'sqlite3.db',

        'USER': '',

        'PASSWORD': '',

        'HOST': '',

        'PORT': '',

    },

    'mysql': {

        'NAME': 'mysql_database',

        'ENGINE': 'django.db.backends.mysql',

        'USER': 'mysql_user',

        'PASSWORD': 'mysql_password',

        'HOST': 'mysql_host',

        'PORT': '3306'

    }

}

2. 编写如下 Python 脚本：

Python

objlist = ModelObject.objects.using('sqlite').all()

for obj in objlist:

    obj.save(using='mysql')

提供的代码显然只是演示该方法的一部分，可能不足以完成完整的 SQLite 到 MySQL 数据库迁移。在这种情况下，可以考虑商业第三方解决方案来自动化和简化整个迁移过程。

迁移策略：专用转换器

有商业工具将用户友好的图形界面与强大的功能相结合，以完全自动化的模式将数据库从SQLite迁移到MySQL。用户无需具备任何数据库管理或开发技能即可使用此类软件进行迁移。高质量的SQLite到MySQL迁移工具必须提供的关键功能包括：

支持源数据库和目标数据库的适当版本
支持MySQL的DBaaS变体，例如Azure for MySQL和Amazon RDS，是额外的优势
迁移主要数据库条目——模式、数据、索引和表之间的关系（外键）
通过主键或唯一索引合并和同步目标数据库与SQLite数据
命令行支持是适合脚本编写和调度的额外优势

结论

本文介绍了SQLite和MySQL，这两种开源关系数据库管理系统，各自适合的使用范围。内容进一步探讨了从SQLite迁移到MySQL、MariaDB或Percona的三种方法，强调了每种方法的优缺点。

Source:
https://dzone.com/articles/migrate-from-sqlite-to-mysql