K60至尊版狂暴引擎2.0加持：超177萬跑分斬獲性能第一
Redmi的后性能時代戰略發布會今天下午如期舉辦，在本次發布會上，Redmi公布了多項關于和聯發科的深度合作，以及新機K60 Ultra在軟件和硬件方面的特性，例如：“K60 至尊版，雙芯旗艦
pg-online-schema-change (pg-osc) 是一個工具，用于以最小的鎖在 PostgreSQL 表中進行模式更改（任何ALTER語句），以幫助實現在生產環境工作負載下進行零停機的模式更改。
pg-osc使用了影子表的概念來執行模式更改。在較高級別上，它會創建一個在結構上與主表相同的影子表，對影子表執行模式更改，將內容從主表復制到影子表，并在最后交換表名稱，同時使用觸發器（通過審計表）保留對主表的所有更改。
pg-osc受到了pt-online-schema-change (MySQL) 和pg_repack等工具的設計和工作原理的啟發。可在下面閱讀更多內容，關于它是如何工作的、亮點特性、注意事項和示例。
pg-online-schema-change help performUsage: pg-online-schema-change perform -a,--alter-statement=ALTER_STATEMENT -d,--dbname=DBNAME -h,--host=HOST -p,--port=N -s,--schema=SCHEMA -u,--username=USERNAMEOptions:-a,--alter-statement=ALTER_STATEMENT # The ALTER statement to perform the schema change-s,--schema=SCHEMA # The schema in which the table is. Default: public-d,--dbname=DBNAME # Name of the database-h,--host=HOST # Server host where the Database is located-u,--username=USERNAME # Username for the Database-p,--port=N # Port for the Database. Default: 5432-w,[--password=PASSWORD] # DEPRECATED: Password for the Database. Please pass PGPASSWORD environment variable instead.-v,[--verbose],[--no-verbose] # Emit logs in debug mode-f,[--drop],[--no-drop] # Drop the original table in the end after the swap-k,[--kill-backends],[--no-kill-backends] # Kill other competing queries/backends when trying to acquire lock for the shadow table creation and swap. It will wait for --wait-time-for-lock duration before killing backends and try upto 3 times.-w,[--wait-time-for-lock=N] # Time to wait before killing backends to acquire lock and/or retrying upto 3 times. Default: 10. It will kill backends if --kill-backends is true, otherwise try upto 3 times and exit if it cannot acquire a lock.-c,[--copy-statement=COPY_STATEMENT] # Takes a .sql file location where you can provide a custom query to be played (ex: backfills) when pgosc copies data from the primary to the shadow table. More examples in README.-b,[--pull-batch-count=N] # Number of rows to be replayed on each iteration after copy. Default: 1000. This can be tuned for faster catch up and swap. Best used with delta-count.-e,[--delta-count=N] # Indicates how many rows should be remaining before a swap should be performed. Default: 20. This can be tuned for faster catch up and swap, especially on highly volume tables. Best used with pull-batch-count.-o,[--skip-foreign-key-validation],[--no-skip-foreign-key-validation] # Skip foreign key validation after swap. You shouldn't need this unless you have a very specific use case, like manually validating foreign key constraints after swap.Usage: pg-online-schema-change --version, -vprint the versionexport PGPASSWORD=""pg-online-schema-change perform / --alter-statement 'ALTER TABLE books RENAME COLUMN email TO new_email' / --dbname "postgres" / --host "localhost" / --username "jamesbond"export PGPASSWORD=""pg-online-schema-change perform / --alter-statement 'ALTER TABLE books ADD COLUMN "purchased" BOOLEAN DEFAULT FALSE; ALTER TABLE books RENAME COLUMN email TO new_email;' / --dbname "postgres" / --host "localhost" / --username "jamesbond" / --drop如果操作是在一個繁忙的表上執行的，則可以使用pg-osc的kill-backend功能，來終止可能與pg-osc操作競爭的其他后端，以便在短時間內獲取鎖。pg-osc獲得的ACCESS EXCLUSIVE鎖只持有一小段時間，然后就釋放了。您可以調整在殺死其他后端之前pg-osc應該等待多長時間（或者pg-osc是否應該在一開始就殺死后端）。
export PGPASSWORD=""pg-online-schema-change perform /--alter-statement 'ALTER TABLE books ADD COLUMN "purchased" BOOLEAN DEFAULT FALSE;' /--dbname "postgres" /--host "localhost" /--username "jamesbond" /--wait-time-for-lock5 /--kill-backends /--drop如果表的寫入吞吐量較高，則默認的重放速度可能不夠用。也就是說，您可能會看到pg-osc從審計表中一次性重放 1000 行（pull-batch-count）。pg-osc還會等到審計表中的剩余行數（delta-count）為 20 后再進行交換。您可以將這些值調整為更高的值，以便更快地趕上此類工作負載。
export PGPASSWORD=""pg-online-schema-change perform /--alter-statement 'ALTER TABLE books ADD COLUMN "purchased" BOOLEAN DEFAULT FALSE;' /--dbname "postgres" /--host "localhost" /--username "jamesbond" /--pull-batch-count 2000--delta-count 500--wait-time-for-lock5 /--kill-backends /--drop在將數據插入到影子表時，您可以傳入自定義 sql 文件，來執行復制和任何其他工作，而不僅僅是從主表復制所有列和行。例如：回填某些列。通過提供copy-statement，pg-osc將改為運行查詢以執行復制操作。
重要提示：
? 可能會意外違反約束或不復制數據，因此請謹慎操作。
? 在自定義 SQL 中連接時，必須使用 OUTER JOIN，否則會丟失與連接表不匹配的行。
? ALTER語句可能會更改表的結構，因此請謹慎操作。
? 保留%{shadow_table}，因為它會替換為影子表的目標。
? 強烈建議用戶在生產環境上使用之前，先測試和驗證結果！
-- file: /src/query.sqlINSERT INTO %{shadow_table}(foo, bar, baz, rental_id, tenant_id)SELECT a.foo,a.bar,a.baz,a.rental_id,r.tenant_id AS tenant_idFROM ONLY examples aLEFT OUTER JOIN rentals rON a.rental_id = r.idpg-online-schema-change perform / --alter-statement 'ALTER TABLE books ADD COLUMN "tenant_id" VARCHAR;' / --dbname "postgres" / --host "localhost" / --username "jamesbond" / --copy-statement "/src/query.sql" / --dropdocker run --network host -it --rm shayonj/pg-osc:latest / pg-online-schema-change perform / --alter-statement 'ALTER TABLE books ADD COLUMN "purchased" BOOLEAN DEFAULT FALSE; ALTER TABLE books RENAME COLUMN email TO new_email;' / --dbname "postgres" / --host "localhost" / --username "jamesbond" / --drop? 目前尚不支持分區表。歡迎提供 PR 請求和想法。
? 表上應存在主鍵；沒有的話，pg-osc會引發異常
? 這是因為，目前沒有其他方法可以在重放期間唯一標識行。
? pg-osc會在操作期間兩次獲取父表上的ACCESS EXCLUSIVE鎖。
? 第一次，在設置觸發器和影子表時。
? 下一次，在執行交換和更新外鍵引用時。
? 注意：如果指定了kill-backends，它會嘗試終止在這兩個時間內的任何競爭操作。
? 根據設計，pg-osc不會終止正在執行的任何其他 DDL。在操作過程中，最好不要對父表運行任何 DDL。
? 由于復制表的性質，磁盤上需要有足夠的空間來支持該操作。
? 索引、約束和序列名稱會被更改，并失去其原始命名。
? 可以在將來的版本中修復。如有需要，可創建特性請求。
? 外鍵會被刪除，并重新以NOT VALID的方式添加到引用表。接著運行VALIDATE CONSTRAINT操作。
? 要確保保持完整性，并在重新引入外鍵時不用獲取額外的鎖，因此才會使用NOT VALID。
此工具中有 3 種類型的表：
how-it-works
1. 創建一個審計表，以記錄對父表所做的更改。
2. 獲取一個簡短的ACCESS EXCLUSIVE鎖，以在父表上添加觸發器，記錄插入、更新、刪除操作到審計表。
3. 創建一個新的影子表，并在影子表上運行 ALTER 或遷移。
4. 復制舊表中的所有行。
5. 在新表上構建索引。
6. 將審計表中累積的所有更改重放到影子表中。
? 在審計審計表中的行時，刪除這些行。
7. 一旦差量行數（剩余行數）到 ~20，則在事務中獲取父表上的ACCESS EXCLUSIVE鎖，然后：
? 交換表名稱（影子表 <> 父表）。
? 刪除外鍵，并重新以NOT VALID的方式創建，以更新其他表中的外鍵引用。
8. 在新表上運行ANALYZE。
9. 驗證所有添加的NOT VALID的外鍵。
10. 刪除父表（現在是舊表）（可選）。
本文鏈接：http://m.www897cc.com/showinfo-26-100185-0.html再大的 DDL 變更操作都不怕了！一條命令直接搞定
聲明：本網頁內容旨在傳播知識，若有侵權等問題請及時與本網聯系，我們將在第一時間刪除處理。郵件：2376512515@qq.com
上一篇： 騰訊電商部門二面：如何保證冪等性？
Copyright ? 2016-2023 天津谷騏科技有限公司 版權所有 sitemap.xml
違法及侵權請聯系：2376512515@qq.com 津ICP備18001702號
津公網安備 12010102000574號