routine update

Author: Vonng

Diff for: README.md

@@ -21,7 +21,6 @@
 ### [**行业认知**](post/industry/)
 - [认识互联网](post/industry/understand-the-internet.md)
 - [互联网之殇](post/industry/obstacle-of-internet.md)
-- [互联网之冬](post/industry/winter-of-the-internet.md)
 
 
 ### **技术文章**
@@ -39,60 +38,39 @@
 
 --------------------
 
-
-
 ## Application / 应用开发
 
 ### **应用案例**
 
 - [KNN问题极致优化：以找出最近餐馆为例](app/knn-optimize.md)
-- [PostGIS高效解决行政区划归属查询问题](app/adcode-geodecode.md)
-- [5分钟用PgSQL实现推荐系统](app/pg-recsys.md)
+- [PostGIS高效解决行政区划归属查询问题](app/adcode.md)
+- [5分钟用PgSQL实现推荐系统](app/recsys-itemcf.md)
 - [新冠疫情数据大盘](http://demo.pigsty.cc/d/covid-overview)
 - [基于Pigsty呈现NOAA ISD数据集](http://demo.pigsty.cc/d/isd-overview)
-- 个人博客网站数据库设计
-- 使用PG监控PG：元数据库设计
-- 标签管理系统元数据库设计
-- 实时用户画s像系统数据库设计
-- PostGraphQL：使用自动生成的API解放生产力
 
 ### **功能实现**
 
 - [IP归属地查询的高效实现](app/geoip.md)
 - [PostgreSQL高级模糊查询](app/fuzzymatch.md)
 - [UUID：性质、原理、与应用](app/uuid.md)
-- [PostgreSQL CDC: 变更数据捕获](post/pg-cdc.md)
-- [使用审计触发器自动记录数据变更](app/audit-change.md)
-- [实现基于通知触发器的逻辑复制](app/notify-trigger-based-repl.md)
-- 使用三维/四维点存储时空轨迹
-- 连接池：连接数背后的问题
-- QPS/TPS：一个容易误解的指标
-- 自动化后端：PostGraphQL, PgRest, PostgRest横向对比
-- postgres_fdw应用：管理远程数据库
+- [PostgreSQL CDC: 变更数据捕获](app/cdc.md)
+- [使用审计触发器自动记录数据变更](app/trigger-audit.md)
+- [实现基于通知触发器的逻辑复制](app/trigger-notify.md)
 
 
 ### **SQL特性**
 
 - [并发异常那些事](post/concurrent-control.md)
-- [PostgreSQL中的锁](app/pg-lock.md)
-- [PostgreSQL中的触发器](app/pg-trigger.md)
-- [PostgreSQL中的LOCALE](app/pg-locale.md)
+- [PostgreSQL中的锁](app/sql-lock.md)
+- [PostgreSQL中的触发器](app/sql-trigger.md)
+- [PostgreSQL中的序列号](app/sql-sequence.md)  
+- [PostgreSQL中的LOCALE](app/sql-locale.md)
+- [PostgreSQL复制标识详解](app/sql-replica-identity.md)
 - [PostgreSQL特色：Excluded约束](app/sql-exclude.md)
 - [PostgreSQL特色：Distinct On语法](app/sql-distinct-on.md)
 - [PostgreSQL函数易变性分类](app/sql-func-volatility.md)
-- [PostgreSQL 12新特性：JSON Path](app/jsonpath.md)
+- [PostgreSQL 12新特性：JSON Path](app/sql-jsonpath.md)
 - [PostGIS：DE9IM 空间相交模型](app/gis-de9im.md)
-- PostgreSQL中的时间与时区
-- Sequence的方方面面
-- 常见索引类型及其应用场景
-- PostgreSQL中的JOIN
-- 子查询还是CTE？
-- LATERAL JOIN
-- DISTINCT ON子句与除重
-- 递归查询
-- Advanced SQL
-- Pl/PgSQL快速上手
-- 函数的权限管理
 
 
 ### **语言驱动**
@@ -106,20 +84,6 @@
 - PostgreSQL Node.JS驱动介绍：node-postgres
 
 
-### **工具组件**
-
-- [使用Wireshark抓包分析PostgreSQL协议](tool/wireshark-capture.md)
-- [psqlrc使用基础](admin/psql.md)
-- [批量配置SSH免密登录](admin/ssh-add-key.md)
-- [组合使用psql与bash](admin/psql-and-bash.md)
-- [sysbench](tool/sysbench.md)
-- [pgbouncer安装](tool/pgbouncer-install.md)
-- [pgbouncer配置文件](tool/pgbouncer-config.md)
-- [pgbouncer使用方法](tool/pgbouncer-usage.md)
-- pgpool的应用方式
-- 查看硬盘信息——smartctl
-- 查看网卡信息——ethtool
-
 ----------------
 
 
@@ -128,13 +92,19 @@
 ### **规约习惯**
 
 - [PostgreSQL开发规约](post/pg-convention.md)
-- PostgreSQL集群扩缩容规约
-- PostgreSQL数据库模式变更规约
+- [PostgreSQL集群扩缩容规约](admin/rule-scaling.md)
 - [数据库集群管理概念与实体命名规范](admin/entity-and-naming.md)
 
+
+### **日常操作**
+
+- [修改PostgreSQL配置](admin/alter-config.md)
+- [PostgreSQL 权限管理](admin/privilege.md)
+
+
 ### **监控系统**
 - [Pigsty监控系统架构](mon/pigsty-overview.md)
-- [Pigsty监控系统使用说明](mon/pigsty-introduction.md)
+- [Pigsty监控系统使用说明](https://pigsty.cc/#/zh-cn/c-arch)
 - [PostgreSQL的KPI](mon/pg-load.md)
 - [监控PG中表的大小](mon/size.md)
 - [监控WAL生成速率](mon/wal-rate.md)
@@ -145,42 +115,18 @@
 - [监控索引：空间，膨胀，重复，闲置](mon/index-bloat.md)
 - [确保表没有访问](mon/table-have-access.md)
 
-
-### **架构设计**
-
-- [PostgreSQL安装部署](admin/install.md)
-- [PostgreSQL日志配置](admin/logging.md)
-- [PostgreSQL复制方案](admin/replication-plan.md)
-- [PostgreSQL备份方案](admin/backup-plan.md)
-- [PostgreSQL报警系统](admin/alert-overview.md)
-- [PostgreSQL变更管理方案](admin/mange-change.md)
-- [PostgreSQL目录设计](admin/directory-design.md)
-- [PostgreSQL配置修改方式](admin/config.md)
-- [PostgreSQL客户端认证](admin/hba-auth.md)
-- [PostgreSQL角色权限](admin/privilege.md)
-- [PostgreSQL监控系统]((mon/overview.md))
-
-### **安装部署**
-
-- [安装TimescaleDB](admin/install-timescale.md)
-- [安装PipelineDB](admin/install-pipelinedb.md)
-- [安装Citus]()
-- [PgAdmin Server 安装](tool/pgadmin-install.md)
-- [PgBackRest 中文文档](admin/pgbackrest.md)
-- [PgBackRest2中文文档](tool/pgbackrest.md)
-- QGIS安装与简单使用
-
 ### **升级迁移**
 - PostgreSQL逻辑复制不停机迁移方案
 - PostgreSQL原地大版本升级流程
-- [飞行中换引擎：PostgreSQL不停机数据迁移](admin/migration-without-downtime.md)
 - PostgreSQL 10.0 与先前版本的不兼容性统计
 - 垂直拆分，分库分表：指导原则
 - 水平拆分与分片：减数分裂方法
+- [业务层逻辑复制实现不停机切换（Before 10）](admin/migration-without-downtime.md)
 
 ### **备份恢复**
 - [PostgreSQL备份与恢复概览](admin/backup-overview.md)
 - [PostgreSQL复制延迟问题](admin/replication-delay.md)
+- [Postgres逻辑复制详解](admin/logical-replication.md)
 - 日志传输副本：WAL段复制
 - 备份：机制、流程、问题、方法
 - 复制拓扑设计：同步、异步、法定人数
@@ -196,15 +142,15 @@
 - 重建索引：细节与注意事项
 - ErrorTracking系统设计概览
 
-### [**故障档案**](admin/pit/)
-- [故障档案：移走负载导致的性能恶化故障](admin/pit/download-failure.md)
-- [pg_dump导致的血案](admin/pit/search_path.md)
-- [PostgreSQL数据页损坏修复](admin/pit/page-corruption.md)
-- [故障档案：事务ID回卷故障](admin/pit/xid-wrap-around.md)
-- [故障档案：pg_repack导致的故障](admin/pit/pg_repack.md)
-- [故障档案：从删库到跑路](admin/pit/drop-database.md)
-- [Template0的清理与修复](admin/pit/vacuum-template0.md)
-- [内存错误导致操作系统丢弃页面缓存](admin/pit/drop-cache.md)
+### [**故障档案**](pit/)
+- [故障档案：移走负载导致的性能恶化故障](pit/download-failure.md)
+- [pg_dump导致的血案](pit/search_path.md)
+- [PostgreSQL数据页损坏修复](pit/page-corruption.md)
+- [故障档案：事务ID回卷故障](pit/xid-wrap-around.md)
+- [故障档案：pg_repack导致的故障](pit/pg_repack.md)
+- [故障档案：从删库到跑路](pit/drop-database.md)
+- [Template0的清理与修复](pit/vacuum-template0.md)
+- [内存错误导致操作系统丢弃页面缓存](pit/drop-cache.md)
 - 磁盘写满故障
 - 救火：杀查询的正确姿势
 - 存疑事务：提交日志损坏问题分析与修复
@@ -213,17 +159,19 @@
 - 硬件故障导致的机器重启
 - Docker同一数据目录启动两个实例导致数据损坏
 - 级联复制的配置问题
+- NOFILE配置导致文件描述符不够用
+- NTP时间漂移导致的故障
 
 
 --------------------
 
 ## Architecture / 内核架构
 
 ### **源码细节**
-- [PostgresSQL变更数据捕获](src/logical-decoding.md)
-- [PostgreSQL前后端协议概述](src/wire-protocol.md)
-- [PostgreSQL的逻辑结构与物理结构](src/logical-arch.md)
-- [PostgreSQL的事务隔离等级](src/isolation-level.md)
+- [PostgresSQL变更数据捕获](arch/logical-decoding.md)
+- [PostgreSQL前后端协议概述](arch/wire-protocol.md)
+- [PostgreSQL的逻辑结构与物理结构](arch/logical-arch.md)
+- [PostgreSQL的事务隔离等级](arch/isolation-level.md)
 - 并发创建索引的实现方式（CREATE INDEX CONCURRENTLY）
 - GIN索引的实现原理
 - B树索引的原理与实现细节
@@ -237,20 +185,22 @@
 - PostgreSQL数据页结构
 - FDW的结构与编写
 - SSD Internal
-- [GIN索引关键词匹配的时间复杂度为什么是O(n2)](ker/gin.md)
-
-### **架构设计**
+- [GIN索引关键词匹配的时间复杂度为什么是O(n2)](arch/gin.md)
 
-### **扩展插件**
 
 ### **FDW**
-- [FileFDW妙用无穷——从数据库读取系统信息](tool/file_fdw-intro.md)
-- [RedisFDW Installation](tool/redis_fdw-install.md)
-- [MongoFDW Installation](tool/mongo_fdw-install.md)
-- IMPORT FOREIGN SCHEMA与远程元数据管理
-- MongoFDW设计与实现
-- HBase FDW设计与实现
-- 基于Multicorn编写FDW
+
+- [FileFDW妙用无穷——从数据库读取系统信息](arch/file_fdw-intro.md)
+- [RedisFDW Installation](arch/install-redis-fdw.md)
+- [MongoFDW Installation](arch/install-mongo-fdw.md)
+
+
+
+[MongoFDW安装](install-mongo-fdw.md)
+
+[](install-pipelinedb.md)
+[](install-postgis.md)
+[](install-redis-fdw.md)
 
 
 --------------------
@@ -259,11 +209,34 @@
 
 > 用于解决某些特定问题的代码速查片段，临时笔记
 
-### **工具速查**
-- [查看系统任务 —— top](tool/unix-top.md)
-- [查看内存使用 —— free](tool/unix-free.md)
-- [查看虚拟内存使用 —— vmstat](tool/unix-vmstat.md)
-- [查看IO —— iostat](tool/unix-iostat.md)
+### **PGSQL工具**
+
+- [`psql`命令速查] 
+- [`pg_dump`命令速查]
+- [`pg_basebackup`命令速查]
+- psqlrc 配置基础
+- 性能压测：`pgbench`
+- [性能压测：`sysbench`]()
+- [组合使用psql与bash](gist/psql-and-bash.md)
+- [pgbouncer安装](tool/pgbouncer-install.md)
+- [pgbouncer配置文件](tool/pgbouncer-config.md)
+- [pgbouncer使用方法](tool/pgbouncer-usage.md)
+- [PgAdmin安装](gist/install-pgadmin.md)
+
+### **操作系统工具**
+
+- [查看系统任务 —— top](gist/os-top.md)
+- [查看内存使用 —— free](gist/os-free.md)
+- [查看虚拟内存使用 —— vmstat](gist/os-vmstat.md)
+- [查看IO —— iostat](gist/os-iostat.md)
+- [测试磁盘性能 —— `fio`](gist/os-fio.md)
+- [批量配置SSH免密登录](gist/os-ssh-key.md)
+- 查看硬盘信息 —— `smartctl`
+- 查看网卡信息 —— `ethtool`
+- 查看NUMA信息 —— `numactl`
+- 查看时间信息 —— `timedatectl`
+- 调整优化方案 —— `tuned-adm`
+
 
 
 ### **临时笔记**
@@ -274,9 +247,11 @@
 - [找出并清除表中重复的记录](http://blog.theodo.fr/2018/01/search-destroy-duplicate-rows-postgresql/)
 - 为分区表添加索引
 - 利用统计信息分批实现大表全表更新
+- [如何在LB后面获取客户端真实IP](gist/toa-get-client-ip-behind-lb.md)
 
+### **工具组件**
 
-
+- [使用Wireshark抓包分析PostgreSQL协议](tool/wireshark-capture.md)
 
 --------------------
 

Diff for: tmp/admin/config.md renamed to admin/alter-config.md

@@ -8,6 +8,7 @@ description: >
   通常涉及到数据迁移，常规操作都是停服务更新。不停机迁移数据是相对比较高级的操作。
 ---
 
+# 应用层逻辑复制迁移表
 
 
 通常涉及到数据迁移，常规操作都是停服务更新。不停机迁移数据是相对比较高级的操作。

Diff for: admin/migration-without-downtime.md renamed to admin/app-level-replication.md

@@ -8,6 +8,8 @@ description: >
 ---
 
 
+# PgSQL备份恢复概览
+
 备份是DBA的安身立命之本，有备份，就不用慌。
 
 备份有三种形式：SQL转储，文件系统备份，连续归档

Diff for: admin/backup-overview.md

@@ -11,7 +11,7 @@ description: >
 
 # 数据库集群管理概念与实体命名规范
 
-> 2020-06-03
+> 2020-06-03 [微信公众号原文](https://mp.weixin.qq.com/s/_C6cxh1e-pxqB_6viJPa8w)
 
 > 名之则可言也，言之则可行也。
 
@@ -21,7 +21,7 @@ description: >
 
 ## TL;DR
 
-![entity-naming.png](/img/blog/entity-naming.png)
+![entity-naming.png](../img/entity-naming.png)
 
 * **集群（Cluster）**是基本自治单元，由用户指定唯一标识，表达业务含义，作为顶层命名空间。
 * 集群在硬件层面上包含一系列的**节点（Node）**，即物理机，虚机（或Pod），可以通过IP唯一标识。
@@ -201,10 +201,4 @@ Node的名称会在集群资源分配阶段确定下来，每个节点都会分
 命名属于相当经验性的知识，很少有地方会专门会讲这件事。这种“细节”其实往往能体现出命名者的一些经验水平来。
 
 标识对象不仅仅可以通过ID和名称，还可以通过标签（Label）和选择器（Selector）。实际上这一种做法会更具有通用性和灵活性，本系列下一篇文章（也许）将会介绍数据库对象的标签设计与管理。
-
-
-
-
-
-
-> [微信公众号原文](https://mp.weixin.qq.com/s/_C6cxh1e-pxqB_6viJPa8w)
+ 

Diff for: admin/entity-and-naming.md

@@ -6,7 +6,7 @@ description: >
   本文介绍PostgreSQL 13中逻辑复制的相关原理，以及最佳实践。
 ---
 
-
+# Postgres逻辑复制详解
 
 ## 逻辑复制
 

Diff for: tmp/admin/ha.md renamed to admin/ha.md

@@ -7,7 +7,7 @@ description: >
   Pgbouncer是一个轻量级的数据库连接池，这里简单介绍Pgbouncer的配置、管理与使用。
 ---
 
-
+# Pgbouncer快速上手
 
 Pgbouncer是一个轻量级的数据库连接池。
 

Diff for: admin/logical-replication.md

@@ -6,6 +6,7 @@ tags: ["PostgreSQL","Bash"]
 type: "post"
 ---
 
+PostgreSQL权限管理