企业官网建设流程全解析

信誉好的做pc端网站,在哪个网站上面可以接项目做,做旅游的网站的需求,网站开发具体步骤文章目录文档用途详细信息文档用途 本文档用于提供几个提升瀚高数据库批量导入数据速度的方向#xff0c;需要根据实际情况具体分析及选择。 详细信息 关闭自动提交 在批量插入数据时#xff0c;如果每条数据都被自动提交#xff0c;当中途出现系统故障时#xff0c;不…文章目录文档用途详细信息文档用途本文档用于提供几个提升瀚高数据库批量导入数据速度的方向需要根据实际情况具体分析及选择。详细信息关闭自动提交在批量插入数据时如果每条数据都被自动提交当中途出现系统故障时不仅不能保障本次批量插入的数据一致性而且由于有多次提交操作的发生整个插入效率也会受到很大的打击。解决方法是关闭系统的自动提交(SET AUTOCOMMIT OFF)并且在插入开始之前显式的执行 BEGIN TRANSACTION 命令在全部插入操作完成之后再执行 COMMIT 命令提交所有的插入操作。使用 COPY 命令使用 COPY 在一条命令里装载所有记录而不是一系列的 INSERT 命令。COPY 命令是为装载数量巨大的数据行优化过的它不像 INSERT 命令那样灵活但是在装载大量数据时系统开销也要少很多。注因为 COPY 是单条命令因此在填充表的时候就没有必要关闭自动提交了。删除索引如果你正在装载一个新创建的表最快的方法是创建表用 COPY 批量装载然后创建表需要的任何索引。因为在已存在数据的表上创建索引比维护逐行增加要快。当然在缺少索引期间其它有关该表的查询操作的性能将会受到一定的影响唯一性约束也有可能遭到破坏。删除外键约束和索引一样批量地检查外键约束比一行行检查更加高效。因此我们可以先删除外键约束装载数据然后再重建约束。临时增大 MAINTENANCE_WORK_MEM在装载大量数据时临时增大 maintenance_work_mem 系统变量的值可以改进性能。这个系统参数可以提高CREATE INDEX 命令和 ALTER TABLE ADD FOREIGN KEY 命令的执行效率但是它不会对 COPY 操作本身产生多大的影响。临时增大 CHECKPOINT_SEGMENTS临时增大 checkpoint_segments 系统变量的值也可以提高大量数据装载的效率。这是因为在向 PostgreSQL 装载大量数据时将会导致检查点操作(由系统变量 checkpoint_timeout 声明)比平时更加频繁的发生。在每次检查点发生时所有的脏数据都必须 flush 到磁盘上。通过提高 checkpoint_segments 变量的值可以有效的减少检查点的数目。设置为 UNLOGGED 表PostgreSQL 的 unlogged table 是不记录 xlog 的因此批量导入的时候 unlogged 表速度比 logged 表性能要快上一倍。但是 unlogged 表不是异常安全的数据库崩溃或者异常关闭后 unlogged 表中的数据会被自动删减另外 unlogged 表中的数据也不会备份到从服务器。任何 unlogged 表上创建的索引也是 unlogged 的。对于批量数据导入我们可以临时设置表为 unlogged(ALTER TABLE tb SET UNLOGGED)之后再将表重新设置为 logged(ALTER TABLE tb SET LOGGED)。事后运行 VACUUM ANALYZE在增加或者更新了大量数据之后应该立即运行 VACUUM ANALYZE 命令这样可以保证规划器得到基于该表的最新数据统计。换句话说如果没有统计数据或者统计数据太过陈旧那么规划器很可能会选择一个较差的查询规划从而导致查询效率过于低下。