架构补丁实践

Question

我们在 Postgres 中有一个模式，并且我们希望建立一个好的方法来应用模式补丁。

目前，我们有一系列 DDL 文件，用于创建模式、表、序列、函数等。我们还有一个用于测试环境的填充脚本。这些文件都用于重新创建我们的数据库环境，用于开发、测试等。

我们还有许多与我们的系统版本相对应的“补丁”文件。IE。patch/1.0.0.sql、patches/1.0.1.sql 等这些文件用于更新我们的暂存和生产数据库。

到目前为止，这个过程对我们来说是有效的，但内部对于如何最好地修补架构存在一些争论。

我很好奇其他人有什么作为一个过程来修补暂存和生产模式以及如何管理数据库的版本。

谢谢！

Answer 1

在工作中，对于 SQL Server，我们编写架构更改脚本，首先回滚要进行的更改（幂等，因此即使尚未应用架构更改，回滚部分也可以正常运行），然后是应用更改的部分。在 TSQL 中，很容易查看系统目录或其他表以查看表/列/索引/行是否已存在，如果不存在则不执行任何操作。

在 PostgreSQL 中，您对可以简单地发送到服务器的命令有更多的限制——但另一方面，DDL 是事务性的，因此不应该发生半应用的模式更改。我已经很好地适应了我在工作中习惯的方案，以便在我自己的小项目中使用（过度杀伤？但即使在这里我也有一个开发/测试数据库和一个“真实”数据库），例如：

\echo Rolling back schema change #35

BEGIN;

DELETE FROM schema_version WHERE schema_id = 35;

DROP TABLE IF EXISTS location_coordinates;
DROP FUNCTION IF EXISTS location_coordinates_populate();

END;

\echo Applying schema change #35

BEGIN;

INSERT INTO schema_version(schema_id, description) VALUES(35, 'Add location_coordinates table');

CREATE TABLE location_coordinates(
 location_id INT PRIMARY KEY REFERENCES location(location_id),
 latitude FLOAT NOT NULL,
 longitude FLOAT NOT NULL,
 earth_coordinates earth NOT NULL,
 box_10miles cube NOT NULL
);

GRANT SELECT, INSERT, UPDATE, DELETE ON location_coordinates TO ui;

CREATE FUNCTION location_coordinates_populate() RETURNS TRIGGER LANGUAGE 'plpgsql' AS $$
BEGIN
  new.earth_coordinates := ll_to_earth(new.latitude, new.longitude);
  new.box_10miles := earth_box(new.earth_coordinates, 10 * 1609.344);
  RETURN new;
END
$$;

CREATE TRIGGER location_coordinates_populate BEFORE INSERT OR UPDATE ON location_coordinates
 FOR EACH ROW EXECUTE PROCEDURE location_coordinates_populate();

INSERT INTO location_coordinates(location_id, latitude, longitude)
 SELECT location_id, latitude, longitude FROM location WHERE latitude IS NOT NULL AND longitude IS NOT NULL;

CREATE INDEX location_coordinates_10miles ON location_coordinates USING gist (box_10miles);

END;

\echo Done

只需使用“psql -f schema-changes/35.sql”即可在数据库上运行该脚本。只需删除“正在应用...”消息，我就可以获得将其回滚的命令。正如您所看到的，更改维护了一个元数据表“schema_version”，以便我可以查看应用了哪些更改。整个更改以事务、数据迁移等方式完成。在这里，我使用了 DROP 命令的“IF EXISTS”功能来使回滚部分满意，即使未应用更改也是如此。我们在 Oracle 工作中所做的一件事是将模式更改写入 PL/SQL——您也许可以在 plpgsql 中使用一些函数来帮助进行更改？

请注意，在上面的更改中，我将“纬度”和“经度”列（可以为空）从“位置”迁移到单独的“位置坐标”关系（并添加地球距离内容），我没有'不要删除旧的列。我们必须注意的一件事是，如果可能的话，使模式更改向后兼容。所以我可以应用这个架构更改 前 更新应用程序以使用新表。我需要进行第二次更改以删除要应用的旧列 后 更新应用程序。在工作中，这些将在两个不同的发布周期中完成，因此在发布 X 期间，我们仍然可以选择回滚应用程序以发布 X-1，而不必先回滚所有架构更改；以及能够在应用程序之前的单独窗口中部署架构更改。（从技术上讲，我应该编写一个触发器，以便对旧表的更新同步到新表，但我没有，因为这太像工作了:)）

我们还有一个应用程序，可以抓取我们所有的数据库来查看数据库中的内容。 schema_version 表，并跟踪更改，因此人们甚至可以在无需连接的情况下查看所做的更改，并了解每个更改的历史记录（我们跟踪“在开发中回滚”、“在开发中应用”等）。在工作中，我们的 schema_version 表还包括作者信息等。从版本控制中应用版本信息的一种神奇方法会很酷 - 我们遇到的一个问题是，例如，如果 SC 应用于 QA，然后在 Perforce 中进行更改，可能没有人注意到。因此，跟踪应用的架构更改 35 修订版 #4 的方法会很好。

需要注意的一件事是，我们的架构更改的编号与应用程序版本无关。显然它们是相关的——这是蜘蛛应用程序允许人们进入的另一件事——但我们尝试做很多小的改变，而不是一个巨大的“这是发布 X 的所有内容”补丁。架构更改还用于添加新索引等操作，因此可能根本不是应用程序驱动的。一般来说，模式更改由开发人员“拥有”，而不是 DBA - 尽管在上面的“创建索引”示例中，DBA 基本上充当开发人员角色并拥有模式更改。是的，我们坚持要求开发人员具有高水平的 SQL 能力 - 尽管公司其他团队的工作方式略有不同，并为数据库团队提供了更多工作。