读DAMA数据管理知识体系指南47数据管理成熟度活动
1. 活动 1.1. 数据管理成熟度评估需要计划 1.2. 确保实际可行的结果，应在计划内留出时间准备材料和评估结果，评估应在规定的短时间内进行 1.3. 目的是揭露当前的优势和改进的机会，而不是解决问题 1.4. 评估是通过向业务、数据管理和信息技术参与者征求意见来进行的，目的是在证据的支持下就当 ...
MySQL binlog筛选参数和复制筛选参数
binlog-ignore-db 是一个master节点设置，控制主服务器不记录指定数据库的binlog如何查看binlog-ignore-db的值？show master status;show binary logs status; replica-ignore-db是一个slave端设置，控制 ...
Apache DolphinScheduler社区答疑Star第一期评选结果公示
在广大社区成员的积极参与下，Apache DolphinScheduler社区答疑Star第一期评选活动圆满落幕！本次活动旨在表彰那些长期为社区用户提供专业解答、积极推动技术交流的社群管理员。经过社区成员的公开票选，在25个社区群中共有4位表现突出的管理员脱颖而出（因票数并列第三名共同获评）。让我们 ...
MySQL备份文件导入GreatSQL MGR环境为什么出现大量报错？
MySQL备份文件导入GreatSQL MGR环境为什么出现大量报错？ 1. 问题信息 1.1 问题描述 客户计划将数据库由 MySQL 迁移到 GreatSQL，为客户安装好3节点 GreatSQL MGR 环境后，客户将使用mysqldump从MySQL8中导出的数据导入到GreatSQL中，导 ...
如果单表数据量大，只能考虑分库分表吗?
程序员最怕啥？不是需求改八遍，也不是半夜报警电话，而是数据库突然卡成PPT！尤其是当单表数据冲到几千万行，查询慢得像老牛拉车，这时候团队第一反应往往是：“赶紧分库分表！” 但兄弟，分库分表可不是什么温柔小姐姐，它更像是个浑身带刺的仙人掌——你以为抱上就能解决问题，结果可能扎得你嗷嗷叫。今天咱就聊点实 ...
从传统冶金到智慧工厂：中国恩菲用IoTDB破解有色金属行业数据难题
时序数据库 IoTDB 支撑中国恩菲百亿级时序数据毫秒级写入查询效能，助力有色金属智能工厂建设。 1. 业务介绍 中国有色工程有限公司暨中国恩菲工程技术有限公司（原中国有色工程设计研究总院，简称“中国恩菲”）是中华人民共和国成立后，为恢复和发展我国有色金属工业而设立的专业设计机构，现为世界五百强企业 ...
读DAMA数据管理知识体系指南46数据管理成熟度概念
1. 成熟度模型 1.1. 能力成熟度评估(Capability Maturity Assessment, CMA)是一种基于能力成熟度模型(Capability Maturity Model, CMM)框架的能力提升方案，描述了数据管理能力初始状态发展到最优化的过程 1.1.1. CMA概念源于美 ...
MySQL 架构设计：数据库的"城市规划指南"
MySQL 架构设计：数据库的"城市规划指南" ️ 就像一座完美城市需要精心的规划才能高效运行，一个优秀的 MySQL 系统也需要精心的架构设计才能支撑业务的发展...让我们一起探索 MySQL 的"城市规划"，学习如何设计一个既高效又稳定的数据库王国！ 什么是 MySQL 架构设计？ My ...
TimechoDB v2.0.1/2.0.2 发布 | 支持时序表模型，表模型中新增嵌套查询、权限管理、UDF 等功能
TimechoDB v2.0.1/2.0.2 版本正式发布！ TimechoDB 是由 IoTDB 原厂团队开发的企业级时序数据库产品。V2.0.1/2.0.2 版本新增了表模型权限管理、用户管理以及相关操作鉴权，并新增了表模型 UDF、系统表和嵌套查询等功能。此外，持续优化数据订阅机制，impor ...
喜讯！白鲸开源入选智联联盟2024年度软件研发优秀案例
近日，中关村智联软件服务业质量创新联盟（简称“智联联盟”）发布了《关于公布第二批2024年度软件研发优秀案例获奖名单的通知》。此次评选旨在进一步推动软件产业高质量发展和信息技术应用创新，加强业内先进经验交流，推广软件优秀实践。 通知附件中详细列出了第二批2024年度软件研发优秀案例获奖名单，其中，白 ...
读DAMA数据管理知识体系指南45大数据和数据科学实施指南
1. 方法 1.1. 解析建模 1.1.1. 实时访问可以解决批处理中的许多延迟问题 1.1.2. Apache Mahout是一个开源项目，旨在创建一个机器学习库 1.1.3. 解析模型与不同的分析深度相关联 1.1.3.1. 描述性建模以紧凑的方式汇总或表示数据结构 1.1.3.1.1. 这种方 ...
[20250409]GUID转换GUID_BASE64(补充3).txt
[20250409]GUID转换GUID_BASE64(补充3).txt--//前面写的bash shell脚本没有追加结尾的=，尝试完善该脚本。$ cat o64basex.sh#! /bin/bash# convert guid to guid_base64odebug=${ODEBUG:-0} ...
5分钟掌握！DolphinScheduler时间参数动态配置秘籍
在 DolphinScheduler 中，调度时对时间参数的使用非常重要，尤其是当你在数据处理、ETL 任务或其他需要依赖时间范围的任务场景中。DolphinScheduler 允许通过多种方式灵活地配置时间参数，以适应不同的任务调度需求。以下是时间参数在 DolphinScheduler 调度中的 ...
MySQL 数据类型：数据库的"衣橱整理指南"
MySQL 数据类型：数据库的"衣橱整理指南" 就像每个人的衣橱都需要合理规划才能高效利用空间，数据库表结构也需要精心选择数据类型才能优化存储和性能...让我们一起探索 MySQL 的"数据衣橱"，学习如何为不同场合选择最合适的"数据着装"！ 什么是 MySQL 数据类型？ MySQL 数 ...
MySQL下200GB大表备份，利用传输表空间解决停服发版表备份问题
MySQL下200GB大表备份，利用传输表空间解决停服发版表备份问题 问题背景 在停服发版更新时，需对 200GB 大表（约 200 亿行数据）进行快速备份以预防操作失误。 因为曾经出现过有开发写的发版语句里，UPDATE语句的WHERE条件写错了，原本只需要更新几行数据，最终导致更新了半张表的数据 ...
读DAMA数据管理知识体系指南44大数据和数据科学活动
1. 定义大数据战略和业务需求 1.1. 组织的大数据战略需要与其整体业务战略和业务需求保持一致并提供支持，并成为其数据战略的一部分 1.2. 一个组织的大数据战略将推动其明确大数据能力路线图的范围和时间 1.3. 组织试图解决什么问题，需要分析什么 1.4. 要使用或获取的数据源是什么 1.4.1 ...
告别数据孤岛：Telegraf-loTDB 实现一站式监控数据闭环
数据是驱动数字化转型的核心燃料，面对海量设备传感器持续生成的庞大时序数据，如何无缝实现高效采集、写入与存储，是工业物联网智能化领域的核心挑战。 Apache IoTDB 作为国产原生时序数据库，为工业物联网场景提供了低成本、高可用的时序数据管理能力。而 Telegraf 作为 InfluxData ...
[20250407]GUID转换GUID_BASE64(补充2).txt
[20250407]GUID转换GUID_BASE64(补充2).txt--//以前写过一篇GUID转换GUID_BASE64的文章，链接：[20200103]GUID转换GUID_BASE64.txt--//实际上linux直接有一个命令base64直接实现转换.先要转换raw类型再计算，结果完全 ...
深入 PostgreSQL 内部：5 个关键阶段拆解查询处理全流程
引言 当您向 PostgreSQL 发送查询时，后端会经历多个处理阶段。每个阶段承担着不同的职责，以确保您能在最短时间内获得准确响应。虽然这些阶段可能庞大而复杂，但理解它们在查询处理中的角色对 PostgreSQL 开发者至关重要。本文将概述每个查询处理阶段的功能及其在 PostgreSQL 架构中 ...
理解PostgreSQL和SQL Server中的文本数据类型
理解PostgreSQL和SQL Server中的文本数据类型 在使用PostgreSQL时，理解其文本数据类型至关重要，尤其对有SQL Server背景的用户而言。尽管两个数据库系统都支持文本存储，但处理方式存在根本差异。PostgreSQL提供多种文本相关数据类型，每种类型都有特定用途与行为，理 ...
