重要更新据悉，OceanBase可能会从蚂蚁集团剥离出来，同时厘清和海外投资者的关系，以更好支持国内的核心行业的核心系统：参考参考中国数据库技术大会在北京举行，错过的朋友可以参考如下内容做个回顾：数智赋能 共筑未来 2023中国数据库技术大会盛大召开DTCC2023第二天：国产化替代与核心技术创新成焦点DTCC2023：数据库行业趋势、前沿技术及市场运营策略解读（附大会PPT下载）洞见数据库前沿技术，阿里云瑶池数据库亮相DTCC 2023打造TeleDB-DCP多云管理平台，天翼云让数据库多云管理更简单DTCC2023完美收官，向量数据库引关注DTCC 2023专家解读 | GaussDB技术解读系列：高级压缩之OLTP表压缩华为云GaussDB坚持安全可信目标，驱动产品高质量发展全球首个！TDSQL-C Serverless架构升级，创新推出可释放存储架构@腾讯云DTCC 2023，Oracle DBA 时代正式落幕！DTCC2023观感@白鳝2023 DTCC 大会归来…@韩锋DTCC2023 参会感受@缘木求猫更新详情阿里云PolarDB优化了”存储包”抵扣项，包含了包括备份、冷存储等项目的计费：参考PolarDB 分布式版日志节点新增flush logs命令、优化了CDC多项功能、AUTO模式新增default_single选项腾讯云云数 ...继续阅读 (81)

重点更新腾讯云在DTCC大会宣布TDSQL-C推出全球首个可释放存储架构的Serverless服务：参考。TDSQL-C是腾讯云的云原生数据库，最初叫”CynosDB”，后统一更名为TDSQL-C，本次发布的能力，可在一定条件下将数据进行归档，进一步降低实例成本。更多DTCC主论坛信息可以参考：链接清华大学发布论文《LLM As DBA》，尝试使用大模型技术完成部分DBA工作中的挑战，包括数据库诊断、优化等工作：参考参考MindsDB 获得Nvidia旗下基金NVenture 500万美元投资，自此该公司今年总计获得 4650 万美元融资：参考。该公司致力于通过AI技术简化数据库中的数据的价值发现。近期会议很多，除了当前正在如火如荼的DTCC之外，还有：Doris Summit 2023 正式开启议题/伙伴征集，大会计划10 月 21 日于北京举办，感兴趣的可以联系报名参加：参考ACDU 中国行-杭州站：数据库技术解密及应用实践 8月19日：参考Oracle CloudWorld 将于9月18日于Las Vegas举行：参考更新详情阿里云RDS SQL Server Web版推出独享入门规格，相较于常规独享规格，该规格性能略有所降低，但价格更加优惠：参考火山云RDS MySQL开放更多 Open API接口：参考RDS MySQL “高可用 ...继续阅读 (99)

重要更新阿里云RDS发布”最”便宜MySQL实例(1c1g,基础版,20g存储)，10元/月，算上20g存储，包年约183元。你还需要自己折腾自建MySQL吗？此类规格不适合生产环境，但是对于开发者个人使用还是非常方便的：参考火山云RDS MySQL发布多项企业级能力，包括高权限账号、SQL限流、类似创建、批量管理（包括重启、续费、参数修改、配置变更等），以更好的支持复杂环境下的云数据库使用体验。RDS PostgreSQL也新增多个功能插件，包括pg_vector、pg_roaringbitmap、pg_stat_kcache、pg_decoderbufs等：参考参考本周由OSCHINA组织了一次直播探讨：《MySQL vs. PostgreSQL，谁是世界第一？》，错过的可以通过该链接观看回放（需要移动端打开）：参考下周，DTCC 2023将在北京举行，应该是中国数据库最有影响力的行业会议了，感兴趣的可以去参加：参考更新详情阿里云RDS MySQL基础版新增1核 1GB和1核 2GB经济版规格。以ESSD PL0云盘存储空间20GB为例，RDS实例包月价格分别仅18元和24元：参考RDS 优化了参数诊断，提供静态参数诊断结果和7天内的参数修改历史：参考RDS PostgreSQL优化了备份页面部分名称：参考腾讯云TDSQL-C MySQL、云数据库 My ...继续阅读 (103)

重要更新Oracle 正式发布 MySQL HeatWave Lakehouse：让HeatWave的用户可以直接查询对象存储中的数据，并进行分析。 是否发布MySQL 8.1根本不是重点，过去几年MySQL官方的重心几乎全部都在HeatWave。在”分析”这么卷的领域，你觉得HeatWave有机会吗？参考推荐阅读刘奇：经典数据库亟需跃迁，TiDB 不是“平替”这篇文章是PingCAP CEO刘奇在其2023用户大会上的分享文章，谈论了AI对于数据库行业的理解、并宣称”TiDB Cloud Serverless”集群数量超10000个，文章重点介绍了用户从MySQL迁移到TiDB Cloud/Serverless的价值，也就是如果你不需要分布式架构，TiDB能够带来的价值（成本、未来的可扩展性等），同时发布了“平凯数据库”（应该是国内某些行业需要）。数据库碎碎念 By leiysky文章从Snowflake产品分析出发，概述了数据库的发展，文中有一些作者对于数据库技术、商业与行业趋势的理解。MySQL 之父：不要把一个优秀的开发者提升为管理者，那会是种资源浪费：除了文章标题表达的观点之外，Monty还提到了一个观点，大多数据公司并不需要太复杂的分析型数据库方案，因为硬件的高速发展以及软件技术的发展，大多数公司只需要非常简单的分析方案就 ...继续阅读 (110)

MySQL官宣引入新的版本管理，同时发布创新版8.1：在本周，MySQL团队正式官宣了全新的MySQL版本管理模式（同时支持长期稳定版LTS和创新版本），同时发布第一个创新版本8.1.0，并宣布8.0.34为LTS版本。简单来说，后续8.0系列主要以Bug修复为主，如果对于稳定性要求高的环境则可以使用该系列版本；如果需要更多的新功能的环境（例如测试开发环境），则可以使用8.1.x版本。并且在未来，预计会1一年推出一个LTS版本，按照当前的节奏，下一个LTS版本可能是8.4.x系列：参考。还是忍不住引用一个”网图“：Google云数据库再升级推出plus版：本周，GCP（谷歌云）上的数据库服务Cloud SQL推出新的Enterprise Plus版本，相比Enterprise版本，Plus通过软硬件改进在读/写能力大幅提升。说明一下，为了区别GCP自己改进的数据库版本，之前，Cloud SQL版本也被更名为Enterprise版：参考更新详情阿里云RDS MySQL支持白名单模板功能，该功能支持模板化地自定义IP白名单分组，并应用在多个RDS实例上：参考RDS SQL Server企业集群版实例支持重启备库功能，当备库出现连接数满或性能等问题时，可以通过手动重启备库来缓解或解决：参考火山云veDB MySQL 在设置自动备份策略时，支持根据业务需求自定义全量备份周期。参考AWSAW ...继续阅读 (92)

随着年龄增长，对于回家变得更加执着了。这次端午是三天假期，虽然离暑假很近了，虽然孩子马上就要期末考试了，不过依旧还是决定回一趟家。这次也抗了新的Canon相机，拍了一些照片，基本都是直出，佳能的人像直出确实还是不错。家里菜园的柚子，黄瓜和四季豆： ...继续阅读 (107)

重要更新数仓初创企业云器科技宣布完成数亿元融资，旨在打造多云及一体化数据平台。创始人兼CEO为喻思成，曾任甲骨文(Oracle)公司全球副总裁、阿里巴巴集团副总裁；联合创始人兼CTO关涛，曾任阿里巴巴P10研究员，也曾于微软云计算和企业事业部工作近十年；联合创始人兼CPO七良，长期专注于数据领域的产品体验创新。云器科技是以 “Single-Engine”为核心理念的湖仓平台，旨在简化数据平台，提供统一架构，统一批、流、交互三种计算形态，以湖仓平台，统一数据存储和管理：参考SIGMOD 2023:OceanBase两篇合作论文入选：《FEAST: A Communication-efficient Federated Feature Selection Framework for Relational Data》、《Dike: A Benchmark Suite for Distributed Transactional Databases》参考由浙江大学与阿里云共同完成的《在数据库管理系统的连接优化器中检测逻辑漏洞》(Detecting Logic Bugs of Join Optimizations in DBMS)获2023 SIGMOD最佳论文奖，是中国大陆研究团队首次获得该奖项：参考更新详情火山云托管Redis服务支持了连接地址修改、公网解析、包年转按量、分片集群切换、临时 ...继续阅读 (97)

昨天，老师问周阡：“这周是父亲节，有个打水仗活动你爸爸会来吗？” 他回答说：“不会的，他要上班”。在孩子的印象中，我大概主要是在上班，学校的活动都是妈妈在参加。这次，孩子也并没有问我，就认为我应该不会去参加。为了给他个惊喜，今天特意休了半天年假，来学校陪他参加活动。小阡得知我今天要陪他去学校，一早上都非常开心。早上，骑着小电驴陪着周阡来到他的幼儿园，才发现，这似乎真的是第一次陪周阡进入这个幼儿园，参加园里面的活动。之前，因为疫情的原因，学校一直管控很严，确实没有进过学校。这大概也是周阡非常开心的原因吧。第一项活动是，学校的“斋藤游戏”（参考）。早就听周阡说过这个游戏，但也一直没有弄明白到底是什么。这一次亲眼所见，并被小朋友强行拉着体验了一番，确实是非常不错的活动，钢琴节奏非常有韵律，带队的老师也非常投入和热情，小朋友也都满脸笑容。接着是一堂学校的示范课，明明老师给孩子们以绘本故事的形式，介绍了森林里面动物们一起去海边玩耍的故事。故事中也穿插了很多孩子们的表达联系、简单的数字练习等。大多数小朋友都非常投入，也可能是因为爸爸在，小朋友都非常积极，抢着举手，抢着发言。上课期间，别的小朋友都在认真和老师互动的时候，周阡突入回过头来，跟我说：“我今天很兴奋很开心，因为爸爸来了”。孩子突然回过头来说，爸爸来了，他非常开心课程结束后，孩子们就拿出了一个“惊喜”：给爸爸们的父亲节礼物。周阡，给我准 ...继续阅读 (98)

重点更新Oracle发布季度财报，YOY增长17%；Elon Musk 公司购入大量Oracle云资源，推动Oracle股价持续上涨。虽然，国内谈去O已经很多年了，但是从Oracle过去十年的股价变化来看，去O对其影响并不大，事实上，如果使用MySQL去O，并没有对Oracle形成真正的威胁；更重要的，云才是Oracle最核心的战略，每次云战略取得进展，都意味着Oracle在大局上获得了突破：参考PostgreSQL已经超越MySQL，成为开发者最受欢迎的数据库：在Stack Overflow发布的2023开发者调研报告中显示，PostgreSQL以45% vs 41%的受欢迎比率战胜MySQL。过去的数年，PostgreSQL一直在经历一场缓慢但持续的增长。参考Gartner发布最新数据库市场份额数据（数据来源：参考），几个亮点：2022年，全球数据库市场容量为910亿美元，年增长为14.4%，云占比超一半为55%AWS超越Oracle、微软，成为第一大数据库厂商华为超越TeraData，跃升到全球第八阿里巴巴排名不变，全球第七Snowflake超越MongoDB、TeraData等排名第九Databricks、EnterpriseDB也有不错的增长重点更新阿里云RDS MySQL基础版实例的计费方式支持按量付费与Serverless相互转换：参考RDS PostgreSQL新增 ...继续阅读 (124)

重要更新本周“华为云GaussDB数据库产业峰会”（华为全球智慧金融峰会2023）上，华为轮值董事长孟晚舟、华为云CEO张平安、华为云数据库总经理苏光牛、信通院研究所所长何宝宏参加，客户侧工行、人保、邮储银行、华夏银行、兴业证券参加，会议规格“空前”之高，会议上张平安正式发布新一代分布式数据库GaussDB。可以预见，未来华为在数据库领域将全面以GaussDB为核心：参考本周，原阿里云OLTP和 NoSQL数据库产品总负责人曹伟（曾用花名：鸣嵩）创立的云猿生数据公司产品正式对外发布：KubeBlocks 给你介绍一个有趣的开源项目，CTO看完后说数据库就要这样用！。致力于以云中立、开源产品的模式解决数据库在k8s中运行的问题。阿里达摩院联合HKU推出Text-to-SQL新基准：Bird（参考）。包含 95 个大规模数据库及高质量的 Text-SQL pair，数据存储量高达 33.4 GB。在该基准下，ChatGPT可考虑仅40.08%，与人类 92.96% 的结果还有很大差距。TiDB 7.1 LTS 发布，为关键业务提供业务稳定性和多租户场景支持：参考；PingCAP 入选 Gartner 云数据库“客户之声”，获评“卓越表现者”最高分：参考海外数据库变更管理公司（开源）宣布A轮获得1500万美元融资，致力于在云原生背景下，简化多环境下数据库变更管理：参考IDC发布2022年 ...继续阅读 (105)

重要更新在本周，微软举办了年度开发者大会“Microsoft Build”，宣布了包括Windows、Edge、Bing、365、云计算等全面接入AI技术。同时，数据库也迎来了一系列更新，包括：Cosmos DB（MongoDB兼容）开始支持向量搜索能力（内测）：参考Azure Data Studio中的Oracle迁移评估插件GA发布：参考Cosmos DB突发型实例正式GA：参考Azure SQL(Hyperscale) 支持弹性池(内测)：参考更新详情阿里云OceanBase云服务（特指在阿里云上）支持Binlog：参考OceanBase云服务发布K-V接口，可以提升简单模型下的读写效率：参考OceanBase云服务支持了新版本 V4.1.0.0火山云托管MySQL支持在创建实例时指定白名单：参考托管MySQL支持了Binlog下载：参考AWSRDS PostgreSQL集群吧现在支持最多 15 个只读副本：参考RDS PostgreSQL 现在支持 Rust 构建高性能数据库：参考Redshift 支持存储过程中auto-commit：参考Aurora（MySQL 8.0兼容版）改进了binlog模块，可以降低Binlog开启带来的开销还可以降低故障恢复时间：参考AzureAzure Data Studio中的Oracle迁移评估插件GA发布：参考Cosmos DB（Mon ...继续阅读 (101)

概述：mysqldump是MySQL官方自带的备份工具，被广泛使用着。本文详细介绍了如何使用mysqldump获得一个一致的备份，以及可能遇到的一些问题。1. 是什么备份的一致性？一致性对于备份来说是非常重要的，如果一个备份不具备一致性，那么再恢复之后，可能会让软件出现各种奇怪的问题。我们来详细看看什么是备份的一致性，例如，一个备份流程中，首先耗时一分钟（12:00:00-12:01:00）完成了用户表U表备份，然后继续其他业务表A、B等的备份，于此同时，业务线程开始向用户表U写入新注册用户X的信息，接着，业务线程又向事件表E写入X用户的事件Y信息。接着，备份线程在完成其他业务表之后，开始并完成备份事件表E。如果不考虑一致性，在备份事件表E的时候，会记录X用户的事件信息，但是在用户表U中却没有该用户的注册信息，也就出现了不一致的数据。如果事件U表记录的是，企业核心数据，例如账务、计费等信息，恢复这样数据，则难以达到备份与恢复的目的。一致性的备份是指，所有备份中的数据，可以对应到数据库在某一时刻的状态。在上面的案例中，就要求，所有备份的数据与用户表U开始备份时刻的数据处于同一个状态。2. mysqldump备份的一致性保障方式2.1 使用 –lock-tables, -l默认情况下，参数–opt是打开的，所以，不加任何相关参数的话，会默认带上参数– ...继续阅读 (89)

在过去二十年中，移动互联网飞速发展，催生了大量LBS相关应用，这也让空间信息处理成为较为基础的诉求。PostgreSQL因为其起源就与空间信息处理关系很大，所以在该领域一直有着非常大的优势。MongoDB也在很早就对空间信息处理做了很强的支持，这也帮助MongoDB在发展过程中拿下来部分市场。MariaDB也在去年8月（参考）收购了厂商“CubeWerx”以增强其在地理信息的存储与分析上的能力。在过去的十年，MySQL也在不断的增强空间信息的处理能力，本文概述了，当前MySQL在这一块的能力现状。当前，数据库访问与处理GIS相关的信息主要参考的是：OGC Standards中的“Simple Feature Access – Part 2: SQL Option”（链接）。当前，MySQL支持的空间类型主要包括：点、折线、多边形、空间（可以存储前面三种类型中的任何一种）多点、多折线、多多边形、多空间（可以存储多个任何类型）使用MySQL空间类型，则最好使用InnoDB或NDB引擎（其他还支持空间类型的引擎有MyISAM、ARCHIVE），其中InnoDB支持较为完整，对空间索引也有比较好的支持。如果要支持地理信息，则可以使用“WGS 84系统”标准的坐标系统，正式名称是：世界大地测量系统(World Geodetic System, WGS)，对应的SRID为4326。WGS是当前 ...继续阅读 (88)

最近游戏领域最大的新闻大概就是王国之泪的发售了。我从“旷野之息”开始接触“塞尔达传说”系列，从刚开始的摸不着头脑，到逐渐开始觉得有意思，到后来逐渐还是非常喜欢这款游戏。所以，对今年5月份的“王国之泪”发售也充满了期待。从上周末到现在，我大概玩了10个小时左右，说说感受吧。新的游戏，从空岛探索开始，在经过短暂的引导之后，就从高高的空岛上一跃而下，持续的在空中自由飞翔，然后慢慢的出现游戏的名字–王国之泪，正式来开游戏序幕。以下为游戏中的截图：这一段是被精心设计的，在曾经的海拉鲁大地上空，全新的场景，全新的飞翔技能，让用户在最短的时间里面感受到这是在海拉鲁大地上的全新的故事。接下来是初始空岛（“新手村”）探索，依旧保留了“最适当的引导”加上“自由度最大的探索”的特点。经过初始试炼之后，就具备全新的四个技能：“究极手”、“余料建造”、“通天术”、“倒转乾坤”，接着推开大门，再次一跃而下，就回到了旷野之息中大家所熟悉的海拉鲁大陆。说说“海拉鲁新人”和“海拉鲁老流氓”吧。无论，你之前是否玩过旷野之息，都是可以直接玩王国之类的，所以得技能、背景，在王国之泪中都会介绍，如果有必要的话。所以，完全没必有一定要先玩旷野之息，而且，根据经验来看，玩了旷野之息之后，并不会增强王国之泪的体验。原因是，虽然依旧是那篇海拉鲁大陆，但是技能已经完全不一样了，导致所有的玩法都不一样了，例如，打怪的方式、 ...继续阅读 (86)

从MySQL 8.0.13起，开始支持函数索引功能，该功能可以很好的帮助开发人员或者DBA去优先生产环境的SQL语句。通常，我们是并建议在SQL语句的查询条件中对列进行任何的函数计算的，因为这种做很有可能导致原本可以使用索引的查询条件，变得无法使用索引。例如，我们看如下的查询条件：SELECT * FROM user_info WHERE substr(id_card_no,1,6) = '330106';虽然，该表的id_card_no上原本是存在索引的，但是上面的写法则会导致SQL无法正常使用id_card_no列上的索引。一般来说，我们会建议开发人员，避免这种写法，更多的是将表达式放到右侧，如上的SQL则建议修改为：SELECT * FROM user_info WHERE id_card_no like '330106%';但某些情况下，我们可能无法修改SQL，例如：有很多的函数计算或表达式操作并不能简单的转换到表达式的右边，例如：uid%1024 = 7应用程序来自第三方，而我们并不拥有第三方的代码，也无法进行修改SQL生产故障已经由此产生，可能来不及修改线上的代码或SQL还有一个略微“牵强”的说法：SQL语法更加注重解释性，并不关注实现，基于此大原则，上面的SQL写法并没有什么问题。函数索引使用示例MySQL的函数索引是8.0版本引入的重要特性之一。它允许开发人员在查询 ...继续阅读 (95)

重要更新在上周AWS RDS PostgreSQL新增了pgvector，本周阿里云PostgreSQL 14/15也发布支持了pgvector插件，同时，AnalyticDB(ADB) PostgreSQL也发布了结合大模型构建专业领域Chatbot的实践：参考。可以看到，大模型已经确定会改变生活的各方各面，而大模型和其生态的技术阵地也在被争夺。阿里云在5月10日宣布核心产品全线降价，最高50%：参考；接着，腾讯云也宣布多款核心产品降价，最高降幅40%；前天，移动云也通过其官方渠道宣布全线产品降价，最高60%：参考。就想问问，还有谁？阿里云PostgreSQL Serverless新增支持实例的自动启/停能力，可以进一步帮助用户在部分场景中节约场景，例如开发环境的数据库，通常在晚上压力很多或者没有压力，这时，可以对成本有较大的节约：链接。更新详情阿里云PostgreSQL Serverless实例新增支持设置实例自动启停和变更实例弹性策略：链接RDS SQL Server 2014/2016/2017/2019升级了内核小版本：链接PostgreSQL 14、15新增支持pgvector 0.4.1插件，ganos插件升级到5.5：链接RDS SQL Server自治服务支持SQL洞察和审计：链接腾讯云RDS MySQL托管MySQL 发布新版数据库审计，支持全审计和规则审计等特 ...继续阅读 (84)

近期，据可靠的非正式消息，MySQL可能很快会发布新的版本管理模式：通过长期稳定版（Long-term Support）和短期创新版本（Innovation Releases）的方式进行管理。如果采用这种模式，将会更加有利于新特性新功能的引入，同时保持LTS的长期处于较稳定的状态（可以参考ClickHouse的版本管理现状），缺点则是版本会非常多，对新手不是那么友好。另外，因为MySQL 5.7的生命周期将于今年10月正式结束，如果届时依旧没有新的版本的话，MySQL 8.0就会是唯一的稳定版，通常对于快速发展的开源软件来说，这并不健康。所以，前述的消息虽然是非正式的，但是相信是非常可靠的。那么新的版本是号会是8.1、9.0、或者23、2023，拭目以待。本文总结了过去20年，MySQL的版本发展历史，回顾一下其重大功能发布的情况，以及大版本发布的节奏。MySQL 5.0在2003年12月，MySQL 5.0 alpha版本发布，2005年3月Beta版本发布（参考参考），并于2005年10月发布5.0.15生产版本（相当于GA）。注意到，这期间MySQL几乎在以每个月1~2个小版本的速度在快速迭代。最终，5.0版在2011年12月终止生命周期，历时8年。在这个版本中，MySQL新增了：存储过程触发器视图XA事务支持也让MySQL成为了一个“像样”的关系型数据库。MySQL 5.1 ...继续阅读 (83)

重要更新TiDB x CAPCOM丨为在线游戏提供灵活、可靠、可扩展的数据库服务：链接。该案例最早于去年7月对外发布（参考），CAPCOM是老牌日本游戏厂商，其经典黄色logo承载了一代代游戏人的记忆，而TiDB进入CAPCOM也代表中国数据库厂商征战全球数据库领域的取得成果，加油！TDSQL落地湖州银行新核心系统：该行基于TDSQL建设新核心系统，系统包含众多应用于业务，整体上，提升了客户体验，同时系统灾备恢复时间接近于零，业务处理能力提升10倍以上：链接。原阿里云OLTP和 NoSQL数据库产品总负责人曹伟（花名：鸣嵩）创立的云猿生数据公司正逐步浮出水面：参考1。曹伟曾担任阿里云数据库负责人、也是PolarDB产品创始人，其创业产品也非常让人期待。更新详情腾讯云RDS MySQLRDS MySQL 支持创建跨可用区 RO，进一步提升数据容灾能力：链接TDSQL-C MySQL 发布数据库代理功能，支持自动读写分离、事务拆分、连接池、防闪断等功能：链接阿里云PolarDB-X发布5.4.17版，提供了生成列、函数索引、默认秒级加字段、显示与隐藏索引等功能：参考AWSMemoryDB for Redis 开始支持Redis 7：链接；支持了 IAM 身份验证：链接Redshift 数据共享功能开始支持中国地区：链接Aurora Serverless v2 新增四个地区支持，包括亚太 ...继续阅读 (90)

当我们乘着缆车，看着两边的绝壁上屹立着众多挺拔的“黄山松”；当我们来到玉屏楼后，看到立仞千米的山峰；当风来雾散时，看到神奇而孤独的小“猴子”；当站在迎客松前，想到它挺拔于此千年。人群的喧闹，而数亿年来山峰从不言语，只是静静伫立，一时让人恍惚，到底是谁在看着谁？也早就听说过：“五岳归来不看山，黄山归来不看岳”，也在孩子的课本上看到过各式各样“黄山奇石”、黄山奇松”。而当所有的一切呈现在眼前时，给内心的震撼是巨大的，一面感叹，徐霞客诚不欺我，一面再一次理解“纸上得来终觉浅，绝知此事要躬行”。当我们爬到迎客松所在处，抬头，左侧是天都峰，右侧是黄山最高峰–莲花峰，背后是玉屏楼。山峰立仞千米，平滑处可竖立百米而鲜有植被，山顶多有造型各异的奇石。恰如徐霞客所言：“左天都，右莲花，背倚玉屏风，两峰秀色，俱可手擥。四顾奇峰错列，众壑纵横，真黄山绝胜处”。1914年的的迎客松1935年的迎客松2023年的迎客松雾中黄山到达黄山的第二天，已经是绵绵的阴雨天，这大概是登黄山最让人担心的了。因为黄山的奇、秀都在远处的山中，在阴雨天会升起大雾，能见度很低，几乎什么景色都看不大。因为是早就安排好的行程，定好的酒店也无法变更，只能按原计划登山，缘分观看各处景色。一早约六点，我就和大娃起床，再次来到酒店门口的迎客松，此时已是大雾锁山，好在迎客松就在近处，虽是朦胧，但依旧可以看得清晰。离开玉屏楼，按行程 ...继续阅读 (85)

本文重点介绍了MySQL领域最新的书籍：《MySQL实战》，以及2020左右推出的书籍《MySQL是怎样运行的》。《MySQL实战》，作者陈臣上个月，MySQL领域又发布了一本新书：《MySQL实战》，作者是陈臣，来自Oracle的工程师，一直活跃在MySQL数据库领域。本文概要的介绍一下，这是一本怎样的书，以及合适哪些人阅读。《MySQL实战》这本书更加偏重实践、深入原理相结合的方式介绍MySQL，是非常适合希望能够系统的、更加深入的了解MySQL的开发者或DBA的，例如从事的工作与MySQL数据库密切相关，涉及到MySQL的管理、问题排查、调优选型等。如果做一般性的了解，则可以选择性的阅读其中的章节和内容。具体的，如果你从事的工作与需要进行复制配置与管理，那么则可以考虑深入阅读第二章”复制“；如果，你的工作中需要处理Binlog，例如需要进行增量数据解析与获取，则可以精读第三章”深入解析Binlog“。相比于官方手册，该书籍在实践方面是更接地气的，这一点上，这本书也是MySQL官方手册的很好补充。例如，如果想系统的了解MySQL的备份，本书在第五章系统的介绍各种MySQL的备份方法。涵盖了官方提供的mysqldump，也包括在社区使用非常广泛的mydumper和XtraBackup。如果只是阅读官方手册的话，你可能只会看到关于mysqldump的相关介绍，但在实际的生产使用中， ...继续阅读 (83)

重要更新4月28日，向量数据库平台Pinecone在B轮获得1亿美元融资，估值达到7.5亿美元：参考；而在之前一周，4月22日，开源向量数据库Weaviate也宣布获得5000万美元（约3.5亿元）B轮融资；来自中国的同类产品Milvus也在去年9月获得B+6000万美元的融资。更新详情AWSAurora Serverless v1支持PostgreSQL 13，同时支持11到13的原地升级：参考Aurora Serverless v1实例支持转成普通预留实例：参考RDS PostgreSQL支持扩展pgvector，内置了ML模型，可实现向量搜索：参考GCPSpanner发布了历史执行计划采样展示功能（Preview）：参考托管PostgreSQL支持快速迁移功能，可以更快速的将外部数据迁移到GCP：参考托管SQL Server支持禁用simultaneous multithreading (SMT)功能以减少客户所需的授权费用Spanner单表支持的索引个数由32个增长为128个：参考保底折扣（Committed use discounts）支持托管Redis和MemcachedAlloyDB支持节点状态（CPU使用/负责延迟/uptime）指标数据：参考Azure托管Databricks服务的Serverless SQL功能正式GA：参考推荐阅读ChatGPT vs. MyS ...继续阅读 (82)

不可见索引（Invisible Indexes）MySQL 8.0之后引入的一个重要特性。也可以帮助DBA或者开发者更好的管理和维护数据库的索引。本文将介绍不可见索引的一些常见使用场景和注意事项。更加安全的删除没用的索引通常，线上运行时间较长的系统，可以通过索引使用统计信息知道哪些索引是从来不被使用的，但依旧会占用磁盘空间，并且会影响系统的写入/更新/删除操作的性能。但是删除索引的操作，有时候也会带来意想不到的系统性能下降，所以，在正式删除之前，可以先将索引修改为不可用，待观察数日后再进行删除，会更加安全。性能分析有时候在对线上系统进行SQL性能分析时，有时候为了排除某些索引对查询性能影响时，可以暂时的将某些索引暂时标记为不可用，再统计此时的SQL执行时长与性能。然后，再将索引置为可见，再次执行SQL，并统计执行时长与性能。通过这样对比，可以非常简单直观、量化的观察到索引对对于具体SQL性能的提升。不可见索引依旧会有维护成本虽然不可见索引不会被查询优化器使用，但在对数据进行DML操作（如：插入、更新、删除）时仍会被维护。这意味着不可见索引可能会对数据库性能产生一定影响。在使用不可见索引进行性能测试或分析时，请务必权衡这一点。不建议长期保留不可见索引如果确定某个不可见索引对查询性能没有帮助，建议尽早删除该索引，以节省存储空间和减小维护成本。否则，该索引对系统性能没有起到任何正面作用， ...继续阅读 (93)

重要更新根据建行龙集采平台信息，国产数据库-小机下移项目有腾讯云、PingCAP、中兴支持，金额为3436万：参考；国产数据库-贷记卡场景由华为云支持，金额为578万。过去几年和未来很长时间，国产数据库都将在国家基础设施中起着越来越大作用：参考。云数据库技术社区组织的第一次线下沙龙在杭州成功举行：参考。本次沙龙由玖章算术（NineData）、菜根发展、良仓太炎、ITPub联合主办与支持，以MySQL x ClickHouse为主题，汇聚了字节跳动、阿里云、玖章算术、华为云、腾讯云、百度的6位数据库领域专家，分享了MySQL x ClickHouse 的实践经验和技术趋势。更新详情阿里云托管RDS优化了恢复流程，提升用户体验。linkPolarDB MySQL 发布条件下推（某些情况下下推到生成表/Derived Table）以提升性能：参考、支持通过并行DDL创建全局二级索引：参考，等数十项优化。腾讯云托管MySQL、MariaDB更多区域支持了外网：参考；备份空间商业化生效：参考托管SQL Server优化了回档功能：参考AWS & AzureAWS 托管RDS的读优化实例在中国地区发布上线。该类型实例在本地提供了高性能的NVMe磁盘，可以让需要使用本地盘读写性能的SQL（例如，大排序、大分组等）运行得更快linkAzure Cosmos DB for PG支持用户自定义密钥的数 ...继续阅读 (90)

重要更新最近两篇争锋相对的文章，又在数据库圈子里面引起了一阵涟漪：正方为：《分布式数据库是伪需求吗？》，反方为《2023年了，还有人在谈分布式数据库是不是伪需求》感兴趣的可以看看。正方观点看起来虽然有一些偏激，但是笔者还是支持正方的，也认为狭义的分布式数据库受众是非常有限的，并确实在受到硬件快速发展的挤压，例如，2009年淘宝业务使用的x86数据库服务器内存是16GB+HDD硬盘，而现在云数据库很容易买到500GB内存的实例（如阿里云RDS最大内存可达768G），比较极限的还可以买到4TB内存的实例（可以看看Amazon的”db.x2iedn.32xlarge”规格3）。另外，分布式数据库场景虽然有限，依旧有部分场景，最典型的就是写入密集型，并且是非常关键的一些场景，例如交易事务，需要使用分布式数据库。你站哪边？可以留下你的评论。华为云GaussDB荣获中国电子学会“科技进步一等奖”（参考），这代表该数据库一定程度获得了中国官方非常高的认可与评价。据悉，MySQL版本管理将会做出重大改变，原来模式下每3年左右发布一个大版本，例如5.1/5.5/5.6/5.7/8.0等，但是事实上，距离8.0在2018年4月GA到现在已经有5年没有大版本了，据悉，新的模式下，将会使用LTS版本和Innovation Release结合形式，LTS版本两年发布一次，并提供5年（ ...继续阅读 (87)

疫情来到之初，因为对于病毒和传播了解较少，难以感受到疫情在过去的三年如此巨大的改变了大家的生活。而这次ChatGPT变革则是处在自己所在的互联网/基础科技领域，已经感受到了ChatGPT将较为深刻的改变很多内容。简述ChatGPTChatGPT太火热了，相关的介绍、文章非常多，这里不做介绍了。就简单说说ChatGPT和搜索引擎吧。在使用搜索引擎的时候，通常是通过搜索引擎先获得零散的信息，然后再自己去理解信息，然后再根据自己的实际情况去做决策，或者去做更进一步加工处理，而产出自己需要的内容。例如，我们要买一台相机，我们会去搜索相机参数，再去看更多的用户测评，再看看些专业评论，最后自己会做出一个列表，之后再根据自己的需要，进行选择。ChatGPT则把信息获取，到最终结果的产出全部完成了。你可以直接问，如下的问题，一万元左右的微单相机有哪些推荐的，他们的优缺点是什么？我们看看Google、百度、和ChatGPT-4的回答：搜索引擎给出的是多个信息；而ChatGPT给出的则是你想要的答案，完全的省去我们需要对信息加工的步骤。这大概也是，为什么ChatGPT推出之处，最紧张的是搜索引擎。一方面搜索引擎的利润够丰厚，而面临的竞争可能也更加直接。ChatGPT会增强现有领域，也会催生大型的原生应用和企业移动互联网颠覆了我们的生活，但是各家大企业并没有被颠覆。购物、搜索、沟通、支付背后的三家公司淘 ...继续阅读 (74)

重要更新“云数据库技术”第一次线下meetup正式开启，计划于下周六（4月22日）下午在杭州举办，主题为“MySQL x ClickHouse”，邀请了国内云厂商和技术专家，与开发者共同讨论云数据库技术。欢迎现场参加，感谢朋友们的转发与扩散：参考注意到，原“阿里云数据库”公众号正式更名为“阿里云瑶池数据库”，“瑶池”应该会是后续阿里云数据库主推的品牌，该品牌可以理解和之前的ApsaraDB类似，是阿里云数据库的整体品牌。另外，上周，阿里云Lindorm通过SQL语句曲线支持AI绘图能力：参考。可以通过简单的SQL语句，加上描述性语言生成对应图片。Amazon RDS开始支持Graviton 3（第三代自研ARM芯片）的实例，规格代码为：db.m7g（通用） 和 db.r7g（内存优化型），AWS的Graviton实例（ARM）已经相对比较成熟，在性价比上相比x86架构有明显的优势，如果是降本增效的业务可以考虑使用，能够很轻松的获得30%的成本节约2更新详情阿里云RDS PostgreSQL Serverless正式商业化发布：参考RDS MySQL/PostgreSQL部分实例（PL1/2/3类型）支持存储空间缩容：参考RDS PostgreSQL 14/15新增自研插件rds_ccl，支持SQL限流：参考字节火山云DTS支持了支持通过专线和 VPN 实现数据上云（邀测）：参考AW ...继续阅读 (84)

故障总是会出现，业务系统面对故障时的容错能力则体现了系统架构师的设计能力。但是，在现实的世界中，系统的容灾建设总是优先级很低的任务，可能长期躺在”to-do“当中。在过去的几个月中，国内两大云厂商均出现了可用区级别的故障（链接、链接）、B站在3月5日发生过一次大规模不可用（参考参考）、OpenAI在3月也发生过一次宕机（参考），技术团队如此强大的公司依旧会出现此类大故障，那么几乎是一定的：我们的系统也会出现类似的故障，你的也会。而这类故障，不是第一次，也不会是最后一次。本文就从数据库角度，看看构建有效的跨区域容灾有哪些难度和挑战。挑战1：业务系统总是优先于容灾系统在公司的各级团队中，业务系统总是优先于容灾系统，这是常态。这并不是技术人员不知道其重要性，而是在当前互联网企业普遍追求KPI/OKR考核的环境下，都需要将资源投入到可短/中期见效业务系统建设中，而对于长期非常重要的容灾建设，其优先级都会比较低。目前，大部分公司的考虑机制都是，按年进行，每到年底都会进行绩效（KPI/OKR）考核，并依此决定一年最重要的年终收入分配（涨薪/年终奖/股票/期权等），业务目标和容灾建设孰轻孰重，大家都会用脚投票。所以，对于容灾建设，通常容易停留在保障在当前自己的任期内不出大问题就可以了，很难会有人考虑系统化的建设企业的容灾系统。挑战2：容灾系统建设架构难度大、成本高一个有效的容灾体系建设，几乎需要 ...继续阅读 (85)

重要更新Oracle Database 23c Free发布：Oracle免费？其实并没有这是Oracle 23c的第一个尝鲜版，类似于之前的XE（Express Edition）版本。Free版本是一个面向开发者、全功能的、但资源使用受限（2CPU/2GB RAM）、无patch的免费版本。这一次Oracle主打对开发者更加友好，非常强调开发者重要性（原话大概是：开发者已经在技术决策中起到关键的作用），同时提供了友好的Docker化安装：参考openGauss发布5.0，TiDB发布7.0在去年4月份发布3.0版本，现在则准时发布了5.0。看来是真国产数据库，版本号的选择是有讲究的。5.0版本更新有很多，细节：参考。此外，TiDB近期也发布了7.0版本：参考。主要更新包括了：多租户下的资源管控能力增强、自动的执行计划缓存、数据TTL过期能力、新增KEY分区、远程LOAD DATA、增强的TiFlash等。DTC 2023于7、8号在北京举行数据技术嘉年华（DTC）于本周五、六在北京举行，国内数据库众多有影响力的专家均悉数参加，感兴趣的可以去现场参加。更新详情[阿里云] RDS SQL Server支持任务中心功能。任务中心功能与2022年12月上线，可以方便的从整体了解的RDS相关任务运行情况：参考[AWS] RDS Custom版本支持了GP3存储：参考。在上周的文章中介绍了什 ...继续阅读 (96)

前两天，Oracle正式发布了第一个23c版本（参考），是一个面向开发者、全功能的、但资源使用受限、patch的免费版本，可以说是一个尝鲜版本。该版本和之前的Express版本（XE）类似，免费、资源使用受限、无支持、无patch、几乎全功能。所以，Oracle免费？ 然而并没有。看起来是个大新闻，其实并没什么。还是看看都发布了一些什么吧：这次，更加强调“面向开发者”原文如下：Developers are the most important constituency in tech decision making today. Therefore getting tools into their hands with a minimum of friction is more important than ever. Oracle Database 23c Free – Developer Release is designed to remove obstacles to developer access, allowing devs to define the ecosystem without requiring permission. This is a radical departure for Oracle,” said James Governor, co-foun ...继续阅读 (76)

上面的照片中，周陌和袁华钦两人，凭在滕王阁主楼的栏杆上，眺望远处。楼下近处是滕王阁的辅助楼阁，远处是以纪念1927年的南昌起义而命名的“八一大桥”，桥下是贯穿江西南北的赣江。赣江对岸则是繁华的现代都市南昌，也就是王勃诗文中的“豫章故郡，洪都新府”。白天的城市可能用“繁华”二字可能显得有些夸张，那看看江畔南昌夜景吧：趁着周末两天假期，回了趟老家，途径南昌，就抽了几个小时，上了一次滕王阁，于是就有了上面的照片。 ...继续阅读 (91)