行业动态

  • 重要更新

    Google云服务发布完全兼容PostgreSQL的云原生数据库AlloyDB :AlloyDB是Google在云原生数据库领域的重要探索,其基于Google分布式文件系统,实现了存储计算分离的架构,提供一写多读的服务能力。通过引入向量化的列加速器及实现了in-memory column store,AlloyDB可以支持分析负载。据官方宣传,事务性能是AWS Aurora PostgreSQL的2倍,为原生PostgreSQL的4倍。同时,分析性能为原生PostgreSQL的100倍。从各种消息猜测GCP发力AlloyDB的主要目标是为Oracle存量市场客户提供迁移解决方案。[其数据库迁移产品DMS也刚刚发布了Oracle-to-PostgreSQL的结构迁移及数据复制能力] 。

    GCP BigQuery BI Engine正式GA,有效加速大屏或报表等应用:BI Engine是一种架设在BigQuery之上的快速的内存分析服务,可为连接到 BigQuery 的仪表板和报告加速并提供亚秒级的查询性能。BI Engine具备智能弹性能力,其会根据业务访问情况自动优化内存大小。

    TiDB Cloud 正式GA,重点服务中国出海或海外企业客户:PingCAP公司于5月11日宣布TiDB Cloud正式商用。TiDB Cloud围绕TiDB数据库提供了全托管的DBaaS(Database-as-a-Service)服务。TiDB Cloud提供了实例创建管理、备份恢复、SQL审计及监控报警等能力,基本上屏蔽了实例部署运维的复杂度,几分钟即可拉起整个集群,使用还比较简单。当前TiDB Cloud支持AWS、GCP两家云厂商,覆盖日本东京、新加坡、美国[弗吉尼亚]、美国[俄勒冈] 及印度[孟买]五个区域。TiDB Cloud提供了开发版本、概念测试版、标准版、企业版及旗舰版等多个版本,其中开发版本可免费测试1年,概念测试版提供14天免费测试周期,其他均为付费版本。产品按照计算、存储、流量及备份存储空间按需付费。

    MySQL 8.0.29正式GA:主要新增功能包括InnoDB表的ALTER TABLE….DROP column支持ALGORITHM=INSTANT,实现不锁表在线变更。同时,在任意位置添加Column均支持不锁表在线变更。这个版本开始支持binlog文件的自动purge。

    AWS RDS PG支持只读级联副本,最高可将读容量提高30倍:AWS RDS PG宣布在PostgreSQL 14.1版本开始支持级联只读同步,最多可以支持三层级联,每个节点可挂载5个只读实例,单个源实例最多可以支持155个只读副本。相较于之前的版本,最高提升30倍的读吞吐。基于AWS的只读级联能力,可以解决非级联情况下,只读副本对主实例的性能消耗,同时极大的扩展了实例的读吞吐能力。AWS是当前唯一拥有此特性的云厂商,对于读流量压力比较大的客户确实是一个福音。

    更新详情

    • [AWS] ElastiCache 上线新版控制台,重新优化了实例创建体验
    • [AWS] RDS SQLServer在Express、Web、Standard和Enterprise版本上,支持SQLServer 2016 SP3、2017 CU27、2019 CU15,修复性能和安全问题
    • [AWS] RDS For PostgreSQL 支持级联只读副本,最高可将读容量提高30倍
    • [AWS] RDS 性能详情支持按照自定义查询时间范围进行性能数据的查询
    • [AWS] RDS ON AWS outposts现在支持手动及自动存储扩缩,用户设置“Enable storage autoscaling”并设置存储上限,RDS即会根据业务情况自动扩缩存储
    • [AWS] RDS已支持互联网协议版本6 IPv6。存量客户迁移到IPv6后 ,可以同时保持IPv4、IPv6
    • [AZURE] SQL Database HyperScale 提供99.99%的服务SLA
    • [GCP] 正式发布完全兼容PostgreSQL的云原生数据库AlloyDB
    • [GCP] BigQuery支持远程函数,用户可基于GCP cloud function定义外部函数,并在BigQuery中调用使用
    • [GCP] BigQuery BI Engine正式GA,在不牺牲数据时效性的情况下,有效加速大屏及报表等业务负载
    • [阿里云] 阿里云RDS MySQL发布企业级控制台,支持批量运维能力
    • [阿里云] 阿里云云数据库Redis支持实例回收站,适用于停机后希望保留数据的场景
    • [腾讯云] 腾讯云DTS增强能力,SQLServer迁移支持云联网,支持MongoDB多账号认证,同时支持付费实例销毁后恢复
  • 重要更新

    01 Aurora Serverless GA,阿里云公测上线

    本周,AWS Aurora提供了全新的Serverless能力(v2正式GA);同时,阿里云RDS MySQL Serverless也已经公测上线,感兴趣的可以去申请试用。AWS Aurora新的Serverless将提供亚秒级(fraction of a second)的扩展能力,为系统压力峰谷明显的应用提供更低的成本。主要场景包括,压力难以预计的系统、多租户的SaaS系统、大型企业内复杂/混合的系统等。当前支持MySQL 8.0和PostgreSQL 13兼容版。不过,这个功能自2020年re:Invent宣布,到现在正式GA,历时一年半,比预期的要久很多。

    02 常熟农商行核心系统上线OceanBase

    据可靠消息确认,这次是的银行核心业务切换到OceanBase,还是有里程碑意义的,从公开材料看到,项目周期也非常长,从2018年开始,先是周边系统建立信任,再是十几个月的核心系统改造与测试验证,最终上线,恭喜OceanBase,代表国产数据库走出的坚实的一步。(不确定做业务改造团队是哪家,长亮?改造也是非常关键的一部分)

    03 袋鼠云推出自主开源计划DTstackCon

    开源主要产品包括:

    • chunjun(原名FlinkX)–批流一体大数据同步引擎:这是非常不错的项目,2900 stars,不过改名字还是对产品品牌有一定影响的,当然,这可能与Flink本身的品牌保护有关。
    • Taier–大数据分布式任务调度系统
    • molecule–轻量级Web IDE UI 框架
    • 项目地址:https://github.com/DTStack

    04 BigQuery支持LOAD DATA传输跨云数据

    BigQuery Omni支持使用简单的LOAD DATA语句实现跨云数据传输。通过使用SQL的方式将AWS S3、Azure Blob中的数据安全、高效的导入BigQuery的存储和计算节点中。多云、开源是Google云的核心战略,作为美国市场第三的位置,Google在想各种策略将其他云的数据放到GCP上来计算,大概是Google版的“东数西算”战略吧。

    LOAD DATA INTO `mydataset.test_csv` (Number INT64, Name STRING, Time DATE)
    PARTITION BY Time
    FROM FILES (format = 'CSV', uris = ['s3://test-bucket/sampled*'], skip_leading_rows=1)
    WITH CONNECTION `aws-us-east-1.test-connection`

    05 华为云发布新的GaussDB品牌视频

    目前华为云数据库应该算有两个品牌:GaussDB、openGauss,从品牌的角度还是比较容易混淆的,并不利于传播。似乎是这样:GaussDB是华为云上自研的统一数据库品牌,包括了GaussDB for MySQL、for Mongo等。openGauss则是一款开源关系型数据库,一方面外部生态在使用,另一方面华为云GaussDB也基于openGauss推出了对应的产品。另外,注意到,最近华为云正式对外宣布openGauss在邮储银行上线。

    06 Azure Data Studio新增数据迁移扩展

    Azure Data Studio新增数据迁移扩展,可以帮助用户便捷的将本地管理的SQL Server数据库迁移到Azure的云数据库SQL Server上。Azure Data Studio是由微软提供的开源的、跨平台的SQL Server管理工具。自家的工具都承载着为自家云引流的责任。

    07 实时数仓SelectDB完成超3亿元融资

    定位云原生实时数仓厂商,飞轮科技完成超3亿元天使轮和天使+轮融资。创始团队主要来自百度Doris、奇安信大数据等团队。做实时数仓这个方向的团队似乎已经非常多了,是“百家争鸣”还是“军阀混战”,还要再看一段时间。不过据小道报道,Doris后面还会有故事… 拭目以待

    更新详情

    • [Azure] Azure Data Studio新增数据迁移扩展
    • [Azure] Cosmos DB for MongoDB提供通过API重建唯一索引的能力
    • [AWS]  Aurora Serverless v2 正式GA
    • [AWS] Glue提供基于规则匹配和机器学习的敏感信息发现功能
    • [AWS] 图数据库Neptune提供免费试用
    • [GCP] BigQuery Omni支持使用简单的LOAD DATA语句实现跨云数据传输
    • [GCP] Cloud SQL for PostgreSQL开始支持大版本的原地升级功能
    • [GCP] BigQuery开始支持使用SEARCH函数的搜索功能
    • [OceanBase] OBCA进行了一次升级,更新了考试内容与教材
    • [OceanBase] 常熟农商银行核心系统开始上线OceanBase
    • [zCloud] 云和恩墨数据库云管平台 zCloud支持OceanBase
    • [阿里云] RDS PostgreSQL云盘版只读实例降价,其中包年包月降价幅度45%,按量付费降价幅度17%
    • [阿里云] RDS SQL Server企业集群版支持备库可读
    • [阿里云] RDS MySQL Serverless 正式上线,免费公测中
    • [腾讯云] 云数据库 MySQL支持智能参数调优(内测)
    • [腾讯云] 云数据库MySQL支持TXRocks引擎
    • [火山云] 云数据库MySQL支持了实例降配功能
    • [袋鼠云] 推出自主开源计划:DTstackCon
    • [华为云] 华为云数据库发布新的GaussDB品牌视频

    最后,祝大家五一快乐,劳动节多劳动。

  • 重要更新

    TiDB发布了6.0.0版本,TiFlash也正式开源。另外,近期注意到北京银行和中国银联都有与TiDB相关的采购,相信这些项目应该是有了重大进展,能够进入这些银行的生产系统,对一个新的数据库来说应该是重大的里程碑,数据库开发者们,加油!

    Google Cloud发布新产品BigLake,可以帮助用户在统一的平台上使用BigQuery进行湖/仓数据分析,底层则支持多家云厂商,包括AWS、Azure等。GCP希望通过该产品的集成能力以及BigQuery的分析能力,向用户提供统一的接入和分析层,同时向上层数据产品提供统一的数据接口。GCP的云战略和其他云厂商是非常不同的。

    MongoDB近期和AWS签署了一个长期的合作协议,帮助线下用户更好的迁移到Atlas on AWS;Google发起了Data Cloud Alliance,MongoDB等数据存储、分析、服务等厂商加入。MongoDB大概是第三方数据库厂商与云厂商竞合的”标杆”了。

    OpenGauss 发布3.0.0版本。距2.0.0版本发布约一年时间,新的版本在高性能、高可用、高安全、高智能、工具链等基础能力上持续增强。目前,从外部来看,OpenGauss生态和发展是比较良性的,基于OpenGauss的经认证的数据库有:MuDB、Vastbase、MogDB等。

    最近,X-Paxos也正式开源,这是阿里内部多个数据库产品的基础组件之一,有比较高的成熟度。不过,国内云厂商开源,一直都缺乏与商业的联系,也就难以持续投入,”诸君多努力”吧!。

    腾讯云发布新产品数据库备份(DBS),向用户多云环境数据库的连续数据保护、备份服务。是非常不错的产品,但是,总的来说,好卷…

    更新详情

    • [阿里云] RDS SQL Server企业集群版支持备库可读。
    • [阿里云]  RDS SQL Server CloudDBA支持深度检测功能。
    • [阿里云] 阿里云发布韩国数据中心。
    • [阿里云] X-Paxos正式开源。
    • [阿里云] PolarDB MySQL支持通过OSS外表访问OSS数据。
    • [腾讯云] TDSQL PostgreSQL的Oracle兼容功能开始邀请测试。
    • [华为云] 云数据库 GaussDB(for MySQL)配置和修改内网地址。
    • [AWS] Amazon Athena(Iceberg)的ACID功能正式GA。
    • [AWS] Aurora PostgreSQL通过Foreign Data Wrapper支持连接到SQL Server和Sybase。
    • [AWS] DocumentDB (MongoDB)版本开始支持性能洞察功能。
    • [AWS] RDS 计划不再支持Oracle 12c,并计划帮助用户自动升级到19c。
    • [AWS] RDS Proxy支持了Aurora PostgreSQL 13。
    • [Azure] 发布Arm-based处理器(Ampere Altra)的VM实例。
    • [Azure] SQL DB支持在DMV系统视图中查看数据库恢复任务的详细进展情况。
    • [Azure] Cosmos DB优化建议支持分区键的最优选择建议。
    • [GCP] Google发布新产品BigLake(Preview),帮助用户在统一的平台上使用BigQuery进行湖/仓数据的分析
    • [GCP] Cloud SQL Insights支持MySQL(preview)。
    • [GCP] Google发起”云数据联盟”,包括了databricks/mongodb/redis/埃森哲等。
    • Bytebase 正式商业化,Bytebase是一个独立的、开源的、数据库变更版本管理产品.
    • [DataStax] Astra DB发布新的CDC特性,帮助用户便利同步数据到周边系统中。
    • [Oracle] 发布MySQL Shell for VS Code可以连接并在数据库中执行SQL。
    • [TiDB] 发布6.0.0版本,将新增或增强了Placement Rules in SQL、诊断、MPP计算、可用性(CDC、DM)、企业级数据库管理平台等方面能力;另外,TiFlash也正式开源。
    • [OceanBase] 发布在江西人社养老统筹系统的实践。
    • [openGauss] openGauss 3.0.0 版本正式发布。
    • [Oracle] MySQL通过HeatWave引擎提供ML能力,帮助开发者在MySQL中使用机器学习能力。
    • [MongoDB] 云平台Atlas支持在GCP上以”pay-as-you-go”方式使用MongoDB。
    • [MongoDB] MongoDB与AWS签署了一个6年的合作协议,旨在帮助用户更好的迁移到Atlas on AWS。

    其他

    Atlassian发生一个持续一周并且还未修复的服务终端,受影响服务包括Jira、Confluence、Opsgenie Cloud等,受影响客户约400个(总客户数的0.18%)。目前,还在持续修复,当前声称的是一个维护脚本导致的。

    最后,上海加油,其他也不知道该说什么,哎。

  • 最近,都在和Ningoo一起搞《高性能MySQL 第四版》的翻译工作,以至于行业动态已经拖了将近三个月没有更新了。那,今天,就一起来看看在2022年的第一个季度各个厂商有什么进展吧(是的,2022年第一个季度就要结束了…)。

    重点更新

    • Azure Data Studio持续更新,发布了Table Designer、Query Plan Viewer等功能。虽然,SQL Server最权威的管理工具一直是SSMS,不过最近看到MS也在快速更新Azure Data Studio。相比,SSMS,ADS是一个跨平台的产品,可以同时支持Windows、MacOS、Linux,可以看到MS在以云为战略核心之后,开发者、开放、开源都是其核心策略。
    • 战争还没有结束,更多的数据库相关的大小组织勇敢的表达了自己的观点:
      • Percona’s Stance on Ukraine – Percona Database Performance Blog
      • We stand with Ukraine – MariaDB.org
      • Oracle suspends operations in Russia, SAP pauses sales – REUTERS
    • 火山引擎,自去年12月发布之后,也在快速迭代,最新发布了PostgreSQL的支持,不过,即现在记住火山引擎官网的域名还是有点难度的,不打算改吗?www.volcengine.com 你们都记得住吗?
    • AWS发布自己的JDBC for MySQL,并推荐客户使用,在全力推Aurora的情况下,又推出自己的JDBC,是在准备随时和Oracle全面脱钩吗?
    • AWS RDS通过类似半同步复制的机制,也推出三节点形态,相比EBS复制,这种逻辑复制可以让Standby有更好的性能,同时可以直接提供读服务。

    更新详情

    • [AWS] RDS Multi-AZ Cluster新增更多区域支持
    • [AWS] RDS开始支持 Oracle 21c
    • [AWS] AWS JDBC for MySQL正式GA
    • [AWS] RDS MariaDB开始支持延迟复制
    • [AWS] MemoryDB for Redis开始支持 PrivateLink
    • [AWS] RDS开始支持PostgreSQL 14
    • [MariaDB] 10.9版本发布,将增强JSON支持、异步redo等
    • [Azure] Microsoft Defender支持保护Cosmos DB
    • [Azure] Cosmos DB开始支持MongoDB 4.2 API
    • [Azure] Azure Data Studio发布了Table Designer、Query Plan Viewer
    • [GCP] Memorystore for Redis发布Read Replicas、RDB Snapshots等功能
    • [GCP] Spanner发布了Optimizer v4,提升了二级索引、哈希JOIN等相关功能
    • [GCP] Cloud SQL for MySQL支持了8.0.26,并作为默认版本
    • [GCP] Cloud SQL for SQL Server支持了跨区域的副本
    • [GCP] Cloud SQL for SQL Server 2019成为默认的SQL Server版本
    • [阿里云] AnalyticDB PostgreSQL发布跨实例数据共享
    • [阿里云] AnalyticDB PostgreSQL发布Serverless实例类型
    • [阿里云] RDS MySQL只读实例支持开启binlog
    • [阿里云] RDS PostgreSQL 14大版本发布
    • [阿里云] RDS PostgreSQL 支持机器学习MADlib插件
    • [阿里云] 图数据库GDB自动机器学习组件发布
    • [阿里云] Tair(Redis企业版)现已经开放TairTS时序数据结构、TairCpc数据结构
    • [腾讯] TDB for MySQL支持了连接池功能
    • [腾讯] TDB for SQL Server支持了数据库维度多任务并行、备份数据开始商业化计费
    • [腾讯] TDB for PostgreSQL支持了跨可用区容灾、克隆实例、跨可用区创建只读实例等功能
    • [腾讯] TDB for Redis支持了全球复制功能
    • [腾讯] TDSQL-C MySQL 8.0版本增加了只读节点等功能
    • [腾讯] TDSQL PostgreSQL推出Oracle 兼容版的集中式版
    • [腾讯]  DTS支持了跨账号实例间数据同步,支持了更多的源/目标的组合
    • [华为云] GaussDB(for Mongo)提供了多种数据迁移方案
    • [华为云] GaussDB(for Redis)包周期(类似于包年包月)实例支持规格变更
    • [华为云] 数据复制服务 DRS 实时同步支持DB2 for LUW 10.5、11.5、PostgreSQL->Kafka等
    • [火山引擎] 云数据库 PostgreSQL 版正式发布上线

    另外,原来的个人账号更新都会转移这个账号上,希望更多人以更专业方式来维护,欢迎大家订阅与转发。

  • 1、云数据库产品能力更新

    • [TiDB] TiDB Hackathon即将开启,主题为「Explore the Sky」
    • [阿里云] 云数据库 Redis 版 – Redis/Tair控制台发布概览页
    • [阿里云] 阿里云表格存储发布支持模糊查询新功能
    • [阿里云] RDS for PostgreSQL控制台上线”一键上云”功能
    • [腾讯云] DTS数据订阅功能支持修改位点
    • [腾讯云] 云数据库 MongoDB支持在控制台对配置参数进行修改
    • [腾讯云] MySQL托管服务优化了参数模板管理、生产购买流程的优化
    • [Azure] 数据库备份数据支持了长达10年的存储保持能力
    • [AWS] DMS服务支持了”Time Travel”功能,可以帮助用户更好的进行数据排查
    • [AWS] DMS提供了新的集成控制台,帮助用户全流程完成上云迁移
    • [GCP] Autoscaling for Cloud Bigtable正式GA
    • [GCP] PostgreSQL 14托管服务正式GA
    • [社区] 3306π 云原生–数据和未来活动在深圳举办
    • [MariaDB] 版本发布策略,诸如10.7、10.8这样较大粒度版本,将以3个月左右为周期来更新版本。在云时代,数据库的分发和使用方式已经被彻底改变,相比之前传统软件的研发周期已经不再能够满足开发者的期望了

    2、其他

    • 字节跳动云服务-火山引擎正式发布,开放的数据库包括:MySQL、Redis托管服务以及数据库传输服务;分析类产品包括:EMR、ByteHouse(ClickHouse)、数据湖分析等
    • 腾讯云开通巴西圣保罗地区
  • 1、行业头条

    • 2022 IEEE Fellow 新晋名单出炉,阿里云数据库李飞飞入选

    非常了不起!简单来说,叫”李飞飞”大概都非常牛逼,无论男女。不过话说,这次还没有看到阿里云开始宣传,难道还憋了更大的招?

    • Aurora开始支持MySQL 8.0;版本号为3.01.0版本,基于MySQL 8.0.23版本
    • Neptune开始支持Graviton 2实例
    • DocumentDB开始支持Graviton 2实例,性能号称提升30%

    今天是AWS年度大会re:Invent第一天,最近一个月AWS都在密集的发个各种功能。MySQL 8.0于2018年4月正式GA,三年半之后,Aurora正式支持8.0版本,看到,Aurora对于内核改造/定制是非常大的,导致一个大版本发布后的改造量非常大,跟紧社区的成本很高,当然,这大概也和官方8.0版本的代码一直以来变化比较大有一些关系。

    另外,AWS一直在加大Graviton2(ARM-Based)实例的支持与宣传,随着,云原生架构的标准化,IaaS层性价比将是各个云厂商的”基本内功”,在Graviton2上的投入,就相当于AWS在提前的偷偷修炼内功了,这与苹果做M1是一样的道理。

    • 火山引擎成为字节跳动的独立BU,云计算战略呼之欲出

    期望看到更加繁荣的云计算市场,不过云计算是一个技术、资金投入都非常大的方向,字节加油!

    2、云数据库产品能力更新

    • [阿里云] RDS PostgreSQL提供接入自建AD域功能
    • [阿里云] 云数据库专属集群 – MyBase 在美国(硅谷)正式开服
    • [阿里云] 表格存储时序模型公测发布
    • [腾讯云] DTS开始支持MySQL DDL语句和Where语句的过滤功能
    • [腾讯云] 云数据库Redis支持开启外网地址
    • [腾讯云] TDSQL MySQL版本新增TDStore 引擎支持
    • [腾讯云] TDSQL-C上线跨可用区容灾功能,计算与存储都可以跨可用区部署
    • [华为云] 数据管理服务DAS的部分免费功能不再继续发展,这部分功能包括:SQL诊断、数据追踪与回滚、参数智能推荐、Binlog解析等功能
    • [华为云] GaussDB/openGauss新增使用规范建议
    • [达梦] 达梦数据库×浪潮信息达成战略合作,双方将共同打造数据库一体机
    • [巨杉] 华南理工大学巨杉奖学金捐赠仪式举行
    • [TiDB] TiDB发布5.3.0版本,提供持续性能分析以及更强HTAP能力
    • [OceanBase] 入选Forrester报告《Now Tech: Globally Distributed Data Platforms, Q4 2021》
    • [AWS] RDS新增参数选项,使得多可用区部署实例的Standby节点可以提供读服务,该功能还处于内测阶段。对用户来说,资源利用率会更高
    • [AWS] Amazon ElastiCache开始支持Redis 6.2版本
    • [AWS] RDS Proxy开始支持PostgreSQL 12
    • [AWS] Neptune开始支持ARM架构的实例
    • [AWS] DMS服务支持对分区数据并行写入S3
    • [AWS] Glue DataBrew支持通过自定义SQL的方式从Redshift和Snowflake读取数据
    • [AWS] AWS Backup开始支持Neptune
    • [AWS] DocumentDB开始支持Graviton 2实例,性能号称提升30%
    • [AWS] Aurora开始支持MySQL 8.0。AWS上版本号为3.01.0版本,基于MySQL 8.0.23版本
    • [AWS] Athena开始支持较为完整的ACID能力操作S3中Iceberg格式的数据(公测)
    • [AWS] DMS(数据迁移)服务开始支持以Google Cloud、Azure上托管数据库为源数据库
    • [GCP] Bigtable、托管MySQL、PostgreSQL、SQL Server、Redis、Spanner等服务在南美(Santiago)数据中心提供服务
    • [GCP] 托管PostgreSQL服务提供如下扩展:auto_explain、pg_cron、pg_hint_plan、pg_proctab等
    • [Azure] MySQL Flexible Server正式GA,并支持了Terraform
    • [Azure] Hyperscale/Citus开始支持PostgreSQL 14

    3、其他

    • AWS将在加拿大开放第二个Region
    • AWS Cloudfront开始提供1TB/每月免费的外网流量
    • Amazon发布新的Linux版本”Amazon Linux 2022 (AL2022)”,以后会两年发布一个大版本,并为每个版本提供6年的支持周期,该版本是基于Fedora项目。另外,在Linux版本命名上也发生了一些变化,之前都是叫Amazon Linux 1、Amazon Linux 2。现在,越来越多的软件也都开始使用这种基于年份的版本命名方式
    • 火山引擎成为字节跳动的对立BU,云计算战略呼之欲出