人生就像一杯茶，不会苦一辈子，但总会苦一阵子。 2022-06-21T07:01:47.880Z http://daydayup863.github.io/ tking Hexo http://daydayup863.github.io/pg-stat-statement/pg-stat-last-operation/%E8%AE%B0%E5%BD%95%E6%93%8D%E4%BD%9C%E6%97%B6%E9%97%B4/PostgreSQL_%E5%88%A9%E7%94%A8pg_stat_statement%E8%AE%B0%E5%BD%95%E6%9C%80%E5%90%8E%E6%93%8D%E4%BD%9C%E6%97%B6%E9%97%B4/ 2022-06-21T06:25:07.000Z 2022-06-21T07:01:47.880Z

<p>最近总是看到有人需要看记录ddl相关的最后一次操作时间，于是突发奇想，没准利用pg_stat_statement，增加一个记录时间的字段没准也可满足需求。</p>

http://daydayup863.github.io/Pgbouncer/connect-Pool/pgb/Pgbouncer_install_from_source/ 2022-05-20T06:06:27.000Z 2022-05-20T12:51:45.642Z

<h1 id="什么是pgbouncer"><a href="#什么是pgbouncer" class="headerlink" title="什么是pgbouncer"></a>什么是pgbouncer</h1><p>PgBouncer是PostgreSQL的数据库提供的一个轻量级连接池工具，PgBouncer在数据库和应用端建立连接，由PgBouncer处理与后端数据库连接关系。<br>通过对应用端的连接限流，减少对数据库的连接请求，避免恶意连接。其工作是每一个数据节点对数据的存取，pgbouncer只是提供给客户端数据节点的<br>分配和链接以及限制客户端连接的数量。整体上实现了对数据的负载均衡。能够缓存和PostgreSQL的连接，当有连接请求进来的时候，直接分配空闲进程，<br>而不需要PostgreSQL fork出新进程来建立连接，以节省创建新进程，创建连接的资源消耗。能够有效提高连接的利用率，避免过多的无效连接，导致数据库消耗资源过大，CPU占用过高。</p> <p>目前支持以下3中连接池模型：</p> <p> Session：会话级别，在session生命周期内，连接池分配给该会话一个数据库连接，断开会话后，数据库连接会放回连接池中；<br> Transaction：事务级别，开启一个事务，从连接池中获取一个连接，事务结束后，连接会释放到连接池中；<br> Statement：语句级别，执行一个SQL，开启一个连接，SQL执行完成，连接会释放到连接池中。</p>

http://daydayup863.github.io/PostgreSQL/library/CREATE-EXTENSION/%E8%87%AA%E5%AE%9A%E4%B9%89EXTENSION/PostgreSQL_self_define_extesion_reference_other_library/ 2022-05-17T09:24:41.000Z 2022-05-18T03:43:17.686Z

<p>今天看到pgfans上有人提了一个如下问题.</p> <p><img data-src="/images/create_extension_question.png" alt="pgfans上的人提的问题"></p>

http://daydayup863.github.io/pgbouncer/server/client/Pgbouncer_log_client_server_remote_map/ 2022-05-12T09:34:48.000Z 2022-05-12T09:58:28.454Z

<p>如下流程是应用通过pgbouncer连接PostgreSQL的链路，可以看到中间有三个网络层，想要对应PostgreSQL连接到应用连接并不是很容易，尤其连接断开后，查询日志更难。</p> <p>app -&gt; pgbouncer client -&gt; pgbouncer server -&gt; remote PostgreSQL</p> <p>实时连接中可以通过client中link指向server中ptr地址完成对应关系.</p>

http://daydayup863.github.io/PostgreSQL-15/release-note/PostgreSQL_15_preview_release_note/ 2022-05-12T07:41:46.000Z 2022-05-16T02:49:11.728Z

<p>PostgreSQL最近几天应该就会出第一个beta版本了，　今天看到git上已经有了提交, 就先尝一下鲜吧，之后可能还会有变更，不过应该也不会有太大的变更了, 以下为译文.</p>

http://daydayup863.github.io/decoderbufs/debezium/PostgreSQL/logical-decoding/PostgreSQL_Debezium_from_PostgreSQL_to_Kafka/ 2022-04-26T09:12:41.000Z 2022-04-26T10:16:37.927Z

<p>本文主要介绍使用Debezium从Postgresql解析WAL到Kafka。</p>

http://daydayup863.github.io/PostgreSQL/PostgreSQL-15/GUC/GUC-flags/PostgreSQL_15_preview_flags_of_GUC/ 2022-04-22T08:02:58.000Z 2022-04-22T10:00:23.052Z

<p>开篇灵魂四问:</p> <ol> <li>你知道哪些GUC参数没有在postgresql.conf中显示吗?</li> <li>你知道哪些GUC参数在show all时没有显示吗?</li> <li>你知道哪些GUC参数在reset all时不会被重置吗?</li> <li>你知道哪些GUC参数会显示在EXPLAIN时吗？</li> </ol> <p>是否很熟悉的GUC参数，顷刻间也没那么熟悉了?</p> <p>随着 PostgreSQL 15 的开发正在进行中，越来越多的功能被提交。今天我们将看一个新功能，关于GUC的相关标志, 一个值得拥有和了解的好东西。</p>

http://daydayup863.github.io/PostgreSQL/SQL/merge/PostgreSQL-15/PostgreSQL_15_preview_merge/ 2022-04-21T03:48:12.000Z 2022-04-21T03:52:38.635Z

<p>早上上班途中看到PostgreSQL提交日志，已经支持MERGE语法，现在就上手体验一把。</p>

http://daydayup863.github.io/pg-waldump/PostgresQL/PostgreSQL_15_preview_pg_waldump/ 2022-03-25T08:41:10.000Z 2022-04-21T03:42:05.205Z

<p>PostgreSQL 15 pg_waldump支持表级别的wal record内容进行赛选，可以更快的获取到我们关心的内容.</p>

http://daydayup863.github.io/sequence/%E9%80%BB%E8%BE%91%E5%A4%8D%E5%88%B6/PostgreSQL/PostgreSQL_15_preview_logical_repl_support_sequence/ 2022-03-25T08:29:51.000Z 2022-03-25T08:40:56.659Z

<p>PostgreSQL 15版本之前的逻辑复制支持表上的 delete, insert, update, truncate, 现在sequence 也支持了。看逻辑复制的DDL邮件组也十分活跃，期待在15中也得到支持。</p>

http://daydayup863.github.io/PostgreSQL/gopacket/%E6%8A%93%E5%8C%85/go_%E6%8A%93%E5%8F%96PostgreSQL_Query/ 2022-03-23T08:37:47.000Z 2022-03-23T09:23:34.455Z

<p>之前被问到tcpdump去抓取PostgreSQL的SQL时，怎么将SQL解析成可读内容，知道有wireshark可以解析tcpdump生成的cap文件，但不知道wireshake还有针对pg协议专门的扩展, 一直也没遇到过这种需求。最近在学习go语言，于是就想到能否用go直接抓包解析呢。</p> <p>这篇文章就主要以获取SQL为主。</p>

http://daydayup863.github.io/PostgreSQL/%E9%80%BB%E8%BE%91%E5%A4%8D%E5%88%B6/%E8%B7%B3%E8%BF%87%E5%86%B2%E7%AA%81/%E9%80%BB%E8%BE%91%E8%A7%A3%E7%A0%81/PostgreSQL_15_preview_sub_skip/ 2022-03-22T12:22:30.000Z 2022-03-22T12:29:29.233Z

<p>之前版本的逻辑复制如果冲突，需要手动处理冲突，并且步骤较为繁琐(参考<a href="https://www.modb.pro/db/48642)，v15中提供了更简便的处理方式">https://www.modb.pro/db/48642)，v15中提供了更简便的处理方式</a>: ALTER SUBSCRIPTION … SKIP</p>

http://daydayup863.github.io/PostgreSQL/arch/PostgreSQL_%E9%80%BB%E8%BE%91%E6%9E%B6%E6%9E%84/ 2022-03-16T12:16:28.000Z 2022-03-16T12:47:49.079Z

<p>很久没复习，居然连PostgreSQL的五层逻辑架构都忘记了，下面就复习一下吧</p>

http://daydayup863.github.io/python/pandas/%E6%8A%98%E7%BA%BF%E5%9B%BE/python3_%E6%8A%98%E7%BA%BF%E5%9B%BE/ 2022-03-15T09:14:06.000Z 2022-03-15T09:20:08.274Z

<p>使用python代码将csv中的数据生成折线图</p>

http://daydayup863.github.io/uncategorized/hello-world/ 2022-03-15T09:09:08.876Z 2022-03-15T09:09:08.876Z

http://daydayup863.github.io/PostgreSQL/logical-decoding/logical-replication/subscriptions/%E9%80%BB%E8%BE%91%E5%A4%8D%E5%88%B6/PostgreSQL_15_logical/ 2022-03-15T08:54:18.000Z 2022-03-15T08:59:51.855Z

<p>PG15之前的版本前，逻辑复制中，如果订阅端发生唯一性约束冲突，订阅端会一直重试，PG15增加选项 disable_on_error 去控制是否重试，默认情况为false, 表示不会disable订阅。</p>

http://daydayup863.github.io/PostgreSQL/pgbench/PostgreSQL_%E4%B8%8D%E5%90%8C%E7%89%88%E6%9C%AC%E6%80%A7%E8%83%BD%E5%9F%BA%E5%87%86%E6%B5%8B%E8%AF%95%E5%AF%B9%E6%AF%94/ 2022-03-15T07:59:06.000Z 2022-03-15T09:11:06.369Z

<p>此次测试主要用于对比生产环境下pg14比较pg11前版本带来的性能提升。</p>

http://daydayup863.github.io/Linux/g/gcc/Linux_multi_gcc/ 2022-03-15T04:01:01.000Z 2022-08-26T12:36:11.884Z

<h1 id="配置yum源"><a href="#配置yum源" class="headerlink" title="配置yum源"></a>配置yum源</h1><p>$ cat /etc/yum.repos.d/CentOS.repo</p> <figure class="highlight awk"><table><tr><td class="gutter"><pre><span class="line">1</span><br><span class="line">2</span><br><span class="line">3</span><br><span class="line">4</span><br><span class="line">5</span><br><span class="line">6</span><br><span class="line">7</span><br><span class="line">8</span><br><span class="line">9</span><br><span class="line">10</span><br><span class="line">11</span><br><span class="line">12</span><br><span class="line">13</span><br><span class="line">14</span><br></pre></td><td class="code"><pre><code class="hljs awk">[centos-sclo-rh]<br>name=CentOS-<span class="hljs-number">6.10</span> - SCLo rh<br>baseurl=http:<span class="hljs-regexp">//</span>vault.centos.org<span class="hljs-regexp">/centos/</span><span class="hljs-number">6.10</span><span class="hljs-regexp">/sclo/</span><span class="hljs-variable">$basearch</span><span class="hljs-regexp">/rh/</span><br>gpgcheck=<span class="hljs-number">1</span><br>enabled=<span class="hljs-number">1</span><br>gpgkey=file:<span class="hljs-regexp">//</span><span class="hljs-regexp">/etc/</span>pki<span class="hljs-regexp">/rpm-gpg/</span>RPM-GPG-KEY-CentOS-SIG-SCLo<br><br>[centos-sclo-sclo]<br>name=CentOS-<span class="hljs-number">6.10</span> - SCLo sclo<br>baseurl=http:<span class="hljs-regexp">//</span>vault.centos.org<span class="hljs-regexp">/centos/</span><span class="hljs-number">6.10</span><span class="hljs-regexp">/sclo/</span><span class="hljs-variable">$basearch</span><span class="hljs-regexp">/sclo/</span><br>gpgcheck=<span class="hljs-number">1</span><br>enabled=<span class="hljs-number">1</span><br>gpgkey=file:<span class="hljs-regexp">//</span><span class="hljs-regexp">/etc/</span>pki<span class="hljs-regexp">/rpm-gpg/</span>RPM-GPG-KEY-CentOS-SIG-SCLo<br><br></code></pre></td></tr></table></figure> <p>$ yum clean all &amp;&amp; yum makecache</p>

http://daydayup863.github.io/%E9%80%BB%E8%BE%91%E5%A4%8D%E5%88%B6/PostgreSQL/logical-replication/PostgreSQL_15_preview_row_filters/ 2022-02-22T07:17:42.000Z 2022-02-22T09:35:09.006Z

<p>刚看到PostgreSQL15 新增加功能－Allow specifying row filters for logical replication of tables，就第一时间体验一把。之前版本的逻辑复制针对的都是整个表的复制，某些情况下，对于一个极大的表，可能只关心部分数据，这时候row filters功能就显得特别有用。</p>

http://daydayup863.github.io/PostgreSQL-15/preview/PostgreSQL_15_preview/ 2022-02-22T02:47:46.000Z 2022-02-22T07:29:55.904Z

<p>记录PostgreSQL 15中的提交日志</p>