orczhou.com

admin

  • 云数据库行业动态@2021-10-25

    ·

    admin

    云数据库产品能力更新

    • [Azure] MySQL Flexible Server开始支持跨区域的备份能力：参考。
    • [AWS] Aurora 发布 2.10.1版本（注：2.x.x是指兼容MySQL 5.7的版本）：参考。
    • [AWS] Aurora 发布新版本支持PostgreSQL 12.7版本，PostgreSQL社区该版本发布时间为5月13日（参考），Aurora大概在5个月时间完成小版本跟进：参考。
    • [AWS] RDS Proxy开始支持MySQL 8.0版本：参考。使用RDS Proxy支持”连接池”(具备更好的扩展性，参考)、切换更加平滑等。
    • [AWS] RDS PostgreSQL支持13.4、12.8等版本。13.4和12.8社区版本发布时间是08月12日。
    • [AWS] MemoryDB for Redis新增11个区域支持：参考。
    • [GCP] Cloud SQL的优化建议开始支持闲置实例、规格过大、磁盘不足等建议：参考。
    • [GCP] Cloud Spanner开始支持PostgreSQL兼容的接口：参考。
    • [GCP] Cloud Spanner支持通过对Query打标而进行性能数据统计：参考。
    • [阿里云] AnalyticDB PostgreSQL版开始支持”基础版”实例，大幅降低小规格建仓成本：参考。
    • [阿里云] 开始支持MongoDB 5.0版本，在所有云厂商的一方产品中率先支持该版本：参考。
    • [阿里云] 杭州、深圳地区金融云RDS开始支持云盘加密功能：参考。
    • [腾讯云] TDSQL-C（原CynosDB）开始支持MySQL 8.0：参考。
    • [腾讯云] 数据传输的订阅功能开始支持TDSQL MySQL版：参考。
    • [华为云] GaussDB(for Redis)开始慢日志、公网SSL加密、Lua脚本等功能：参考。
    • PostgreSQL 14正式发布：参考，Percona上的相关解读：参考。
    • [OceanBase​] 发布3.2版本；开源发布3.1.1版本

    云产品其他重要更新

    • 阿里云计划在2020年新开韩国和泰国区域：参考。
    • Percona再AWS上用Sysbench分别测试了EC2上AMD、Intel、Graviton(ARM)的实例性能情况：参考。
    • [AWS] EC2的Mac实例新增更多区域支持：参考。AWS EC2竟然支持MacOS的实例…。
    • [AWS] EC2控制台开始支持从全球视角展示所有相关资源：参考。就问你爽不爽！！
    (more…)

  • 云数据库行业动态@2021-10-21

    ·

    admin

    云数据库产品能力更新

    • [Azure] Flexible Server开始支持跨区域的备份能力
    • [AWS] Aurora 发布新版本支持PostgreSQL 12.7
    • [AWS] RDS Proxy开始支持MySQL 8.0版本
    • [GCP] Cloud SQL的优化建议开始支持闲置实例、规格过大、磁盘不足等建议
    • [GCP] Cloud Spanner开始兼容PostgreSQL
    • [阿里云] AnalyticDB PostgreSQL开始支持”基础版”
    • [阿里云] 开始支持MongoDB 5.0版本
    • [腾讯云] TDSQL-C（原CynosDB）支持MySQL 8.0
    • [华为云] GaussDB(Redis)支持慢日志、SSL加密等功能
    • [社区] PostgreSQL 14正式发布
    • [OceanBase] 发布3.2版本；开源发布3.1.1版本

    云产品其他重要更新

    • [阿里云] 阿里云计划在2020年新开韩国和泰国区域
    • [AWS] EC2的Mac实例新增更多区域支持
    • [AWS] EC2控制台开始支持从全球视角展示所有相关资源(就问你爽不爽！！)
    • 中国数据库技术大会DTCC在北京举行：“DTCC 2021在北京国际会议中心隆重召开。大会以“数造未来”为主题，国内各个数据库相关厂商悉数亮相” 。

    阿里云PolarDB-X正式开源

    “我们将阿里最核心的云原生数据库技术进行开源，希望开发者和客户通过开源版本快速使用阿里云数据库产品技术，并参与到技术产品的迭代过程中来，共建云原生分布式数据库生态。”阿里云数据库负责人李飞飞表示。

    阿里云发布首个一站式敏捷数据仓库解决方案

    “该方案结合一站式数据管理平台DMS及云原生数据仓库AnalyticDB（以下简称ADB），真正实现了库仓一体的技术架构，提供在线数据实时入仓、T+1周期性快照、按需建仓等能力，数据延时低至秒级，持续赋能业务在线化，令企业在线数据释放最大价值。“

    OceanBase 发布3.2版本；开源版本3.1.1发布

    “杨传辉透露：OceanBase 3.2 是今年 6 月 1 日产品发布会宣布进入 3.0 时代后的首个重大版本。3.2 版围绕兼容性、HTAP 混合负载、小规格性价比等几大核心能力，在 Oracle/MySQL 兼容、易用性、稳定性、性能和功能等诸多方面做了迭代增强与优化升级。“

    “2021年10月18日，在第十二届中国数据库技术大会（DTCC2021）上，OceanBase CTO杨传辉分享了“一体化架构的原生分布式数据库”主题演讲，并公布了 OceanBase开源项目的进展以及开源版3.1.1的正式发布。“

    “腾讯云TDSQL X 昆山农商银行”新一代核心系统上线

    “昆山农商行新一代核心系统采用长亮V8技术，无缝衔接国产分布式数据库TDSQL，并融入微服务、读写分离、多源同步等技术…所有集群运行在一套TDSQL集群中。架构上，昆山农商行采用“两地三中心”部署，数据库“一主三备”，中心间数据强同步，实现中心级别灾难快速自动恢复，且数据零丢失。“

    阿里云数据库 X 中电金信发布“实时数仓系统”和“智慧水务”解决方案

    “共同推动阿里云云原生数据库的技术与生态构建，赋能行业数字化转型。其中，“智慧水务”解决方案在数据库层依托阿里云数据库PolarDB、AnalyticDB等系列产品首次实现了完整的全国产化方案。“实时数仓系统”基于AnalyticDB产品，从采集、治理到服务整个流程，实现数据的高效流转…“

    GaussDB数据库培训服务上线

    “本次上线的数据库培训服务主要包括华为openGauss数据库工程师培训（HCIA-openGauss)、华为GaussDB数据库工程师培训（HCIA-GaussDB)、华为GaussDB数据库高级工程师培训(HCIP-GaussDB-OLTP)等3项课程，涵盖数据库基础知识、GaussDB数据库产品介绍及SQL语法、性能调优、数据库关键特性解析等内容，全方位解锁数据库知识，让您轻松Get数据库专业技能。“

    TiDB 登陆亚马逊云科技 Marketplace（中国区）

    “企业级开源分布式数据库 TiDB 登陆亚马逊云科技 Marketplace（中国区），通过亚马逊云科技 Marketplace（中国区）网站 ，用户可以快速部署和使用 TiDB，获得更顺滑的 TiDB 分布式数据库云端体验。” 

    巨杉数据库入选”2021信创产业独角兽100强”

    “由中科院旗下权威媒体《互联网周刊》联合eNet研究院、德本咨询调研评选的“2021信创产业独角兽100强”名单揭晓公布，巨杉数据库作为国产数据库，凭借在基础软件领域的产品技术优势入选榜单” 。以数据库为主的企业入选的还有：达梦、人大金仓、南大通用、神舟通用、巨杉数据库、PingCAP、易鲸捷、爱可生等。

    3306π-上海站：GreatSQL && Databend 

    “2021年3306π上海站-开源数据库技术交流，于10.23日在上海虹口逸仙路宝丰联酒店圆满举办。”

    “万里数据库开源生态负责人叶金荣老师现场带来《面向金融级 MGR 应用场景优化》的技术主题分享，分别从GreatSQL新增金融级应用场景特性、稳定性和性能提升工作及万里数据库研发团队修复的严重MGR bug等方面展开阐述“

    “BohuTang在3306π介绍了云原生开源数仓系统Databend架构及展望，BohuTang2021年3月从青云离职和朋友们组建了：Datafuse Labs， 使用 Rust 研发一款开源的、完全面向云架构的新式数仓，用于提供极速的弹性扩展能力，致力于打造一个按需、按量计费的数据分析云平台。“

    长沙·中国1024程序员节举行，围绕国产基础软件展开

    “长沙·中国1024程序员节是CSDN和长沙市政府相关机构联合主办的年度大会。主要围绕中国核心基础软件和先进计算技术，首聚十大中国数据库掌门人…”

    小编”离散”的点评

    • 最近一周是云栖大会，所以阿里云数据库的相关发布也会比较多。
    • 什么？AWS EC2竟然支持MacOS的实例…
    • Azure云的MySQL托管形态Flexible Server一直在快速更新，虽然当前依旧处于Preview。
    • AWS Aurora支持了PostgreSQL 12.7版本，该社区版本发布时间为5月13日，Aurora的PostgreSQL研发团队需要5个月的时间完成一个小版本的改造支持。再比如，Aurora的12.6版本支持时间为6月，社区该版本发布时间为2月。考虑到，Aurora需要做的改造，这个速度应该是比较快的。
    • AWS RDS在10月初支持了13.4和12.8版本，该社区版本发布时间为08月12日，可以看到AWS RDS团队对于对PostgreSQL社区最新社区版本支持大概延迟2个月，考虑到需要适配AWS RDS后端系统，2个月也还是比较快的。
    • 近几年，开源、分布式数据库和分析型数据库是创业的热点之一，整个领域都非常活跃。
    • 上周末，OB的”礼物求赞”的事情发酵的有些厉害，不过，希望OB继续加油，中国开源继续加油。话说，其实技术运营并不好做，需要比预想的更大的投入，这点PingCAP是做得非常成功的，值得学习。

    最后，文中原本很多的参考链接，由于微信公众号的限制都删除了，如需延伸阅读，大家可以点击左下角”阅读原文”后查看。另外，如有错误或者投稿可以通过orczhou@gmail.com联系本文作者。

  • 云栖大会主要的产品技术发布

    ·

    admin

    今天云栖大会第二天，主要以产品技术为主。相比第一天，要更加面向开发者。主要的产品技术发布也都是放在这一天，阿里云数据库的很多重磅发布也是放在今天。

    百花齐放的开源

    这次大会上，阿里云数据库负责人李飞飞正式宣布“PolarDB-X开源“。随之，对应的代码也已经在Github（参考）上放出。PolarDB-X的前身是阿里集团去IOE核心产品DRDS，经过了面向云的改进，提供了原生的一体化的分布式能力，全面升级为现在的PolarDB-X，这次开源，应该是这个产品面向未来发展跨出的一大步。

    最近两天，除了云栖大会之外，数据库的年度盛会DTCC也在同步进行。在DTCC上，OceanBase也正式发布了开源版本3.1.1，提供了更强的MySQL兼容能力、开放了更多底层API、对第三方生态也提供更友好的支持等。

    此外，在主会场的计算巢平台发布中，PingCAP也是其重要的生态伙伴。阿里云计算巢（参考）是一个面向云端第三方服务商的平台，通过用户主动授权可以更加简单让第三方服务商在用户环境中构建相应的应用。

    • PolarDB-X正式开源
    • PolarDB-X产品架构
    • OceanBase开源发布3.1.1版本
    • 计算巢集成PingCAP

    在全球来看，开源已经是非常成熟的模式了，无论是运作还是商业化，都是非常成熟的。但是，在中国开源模式还有很多内容去探索，非常期待后续的发展。

    进击的“PolarDB”：将云原生进行到底

    这次李飞飞还对外重磅发布了PolarDB的“计算、内存、存储全解耦“的云原生架构。PolarDB产品技术在云原生的道路上再向前跨进一步，也是国内外领先的一步，首次实现了计算、内存、存储的三层解耦，提供内存池化、多主架构、HTAP实时分析等产品能力。自PolarDB产品上市以来，这应该是又一次大的技术跨越，相比Aurora等友商有一定的技术代差。后续，非常期待这个能力，进一步完成标准的产品化与规模化。

    面向政企市场

    多次被提及的“政企市场”

    这次数据库的产品发布中，听到了多次“政企市场”。一个是PolarDB-X的开源中，标题为“助理政企构建原生MySQL分布式数据库”。另外，在DBStack的发布过程中也提到，“将云原生能力轻量化输出到政企行业“。可以看到，目前阿里云已经在公共云市场全面领先，但是大量的政企线下市场还待开发，这次重磅发布很多产品能力建设都聚焦于此，可以看到未来，这这部分市场还将有着非常激烈的竞争。

    • 面向政企的轻量化产品DBStack
    • 使用开源策略进入超大型政企

    其他

    这次还发布了提供离在线一体、MPP架构、具备Serverless云原生能力的AnalyticDB，轻量级的混合云方案DBStack（链接），企业级智能化的RDS，企业级一站式在线数据库管理平台DMS，书籍《云原生数据库原理与实践》，data in use的加密技术等，就不一一详述了。

  • 8月7日 游西湖

    ·

    admin

    早上七点，苏堤集合。绕道曲院风荷，经过玉带晴虹，回到苏堤，经过压堤桥、苏堤春晓、望山桥、锁澜桥，到达花港观鱼，再到西湖国宾馆。

    夏天，太阳起得很早，起得早的人却不多。一行5人，全程总计约4公里，不紧不慢，先到G20展馆二楼喝茶叙旧，之后到紫微厅午餐。

    次日，一家人再到湖畔茶居，饮茶一杯，贪享半日湖光美景。

    (more…)

  • 育娃心得

    ·

    admin

    这是kiki的心得，记录如下。

    在孩子的养育过程中，最近对孩子的学习领悟的比较多一点。现在我想讲一下这方面的理解。

    现在很多家长，对于孩子学习很头疼，担心孩子成绩不好，考不上大学，这个其实我很能理解，我也是这样过来的，一直很焦虑不知道该怎么办。

    但是有一点我现在想得比较明白，那就是学习的过程比孩子成绩考了多少重要，因为写作业的过程中会锻炼人的各种能力，比如专注力，思维能力，自控力，忍耐力，抗挫折的能力，这些能力对于一个人来说是非常重要的，它们会在你未来的人生中起到很关键的作用。有些专家甚至说了更多的能力，我目前只想到这几个，因为这是我的实战经验。

    我为什么说过程比结果重要呢？难道我不关注结果吗？不是的，我其实很关注结果，但是我不会因为一次两次考试的结果不好就去打孩子骂孩子，因为这件事情其实孩子并没有任何的错误，孩子其实也很想学好的。反过来说你打了孩子，骂了孩子就有效果了吗？有的时候会有一点效果，但这主要是对顺从性比较好或者比较要强的孩子会有一定的效果，不适用于绝大多数的普娃。而且就算是这种效果也是暂时的，不长久的，长期来说负面的东西会更多，所以这么做我是不赞成的。因为这会伤害孩子的自信心甚至内驱力，孩子成绩不好不是他犯了错误，更多的原因是他学习能力的问题，不是靠着你的惩罚他就能学好了的。

    那么学习不好怎么办呢？首先我觉得作为家长要做的是搞清楚你的孩子，能力欠缺在哪一方面，有学习习惯不好的，有孩子本身这个年龄段就是欠缺的能力的，也有学习方法没有掌握的。那么我们怎么来解决这些问题呢？ (more…)

  • Amazon RDS的同步复制是如何实现的

    ·

    admin

    一直以来实现数据库的零数据丢失都是非常有挑战，尤其是跨可用区的场景下。很多核心系统为了实现这一点都投入了大量的智慧和金钱。Amazon RDS在文档都明确的写到，数据库在多AZ之间的数据是保持同步的（注：同步是指数据写入两边要同时写成功，即使一边不可用，已经提交的事务在另一边一定是成功的）。一直以来，我也很好奇Amazon RDS在哪个层面实现的同步复制。

    这个问题原本也是没有太大疑问的，可以推测应该是通过EBS层面的块复制来下。依据有两方面，有一些公开的Amazon RDS一些架构图中可以看到有EBS复制的箭头说明。另外，还有一点，只有通过EBS的复制实现跨可用区数据一致性，才可能在RDS支持的多种数据库，如MySQL、SQL Server、Oracle等，上保持架构上一致。否则，不同数据库类型的高可用和复制架构可能相差很大。

    但是，之前很长时间我还是有一个疑问，Amazon RDS复制到底是在数据库逻辑层实现的还是在EBS物理层实现的。

    既然有上面的猜测，那为什么产生了这个疑问呢？是因为，在Aurora很多的对外介绍材料（包括论文、架构介绍的slide）中，会放一个MySQL架构来突出Aurora的架构优势。这个图一直让我误以为Amazon RDS使用了数据库的binlog的复制。在了解Aurora的时候大家经常会看到如下架构图作为反面案例(参考)： (more…)