ambari2.8+ambari-metrics3.0+bigtop3.2编译、打包、安装
bigtop编译 资源说明： 软件及代码镜像 开发包镜像 github访问 编译相关知识 技术知识 bigtop编译流程及经验总结 各模块编译难度及大概耗时（纯编译耗时，不包含下载文件和排错时间） centos 真机编译branch-3.2 硬件说明： 编译步骤 下载代码并切换分支 国内镜像配置 基 ...
Apache DolphinScheduler用户线上Meetup火热来袭！
Apache DolphinScheduler 社区 8 月用户交流会精彩继续！本次活动邀请到老牌农牧产品实业集团铁骑力士架构工程师，来分享Apache DolphinScheduler在现代农牧食品加工场景中的应用实践。此外，还将有社区活跃贡献者以Apache DolphinScheduler为例 ...
Apache DolphinScheduler使用图关系解决核心链路告警问题，减轻任务运维负担！
转载自程序员小陶 Apache DolphinScheduler 在使用过程中，肯定会有任务出现失败的情况，那么问题来了：调度任务的告警是需要人为配置的，在生产环境中，面对海量的任务，如何找到重要的任务，并且在失败的时候，第一时间告警呢？ 先思考一下。 先看思路 本文提供一个思路，接着往下看吧。 不 ...
成为Apache SeaTunnel贡献者的N种方式
如何参与开源贡献 参与开源贡献的常见方法有多种： 1）参与解答 在社区中， 帮助使用过程中遇到困难的人，帮他们解释框架的用法也算是一种贡献。 2）文档贡献 帮助框架来完善文档，比如说将英文文档翻译为中文，纠正文档里面的错误单词，这 是很多人参与开源贡献的第一步。 3）代码贡献 经过阅读源码，发现源码 ...
我用Awesome-Graphs看论文：解读PowerGraph
这次向大家分享发表在OSDI 2012上的一篇经典图计算框架论文PowerGraph，旨在通过点切分解决图数据幂律分布导致的计算倾斜问题，并提出了区别于Pregel's VC（以点为中心）的GAS（以边为中心）计算框架。 ...
SQLServer 事务复制在发布端（publication）和订阅端（subscription）对应的数据库还原之后复制异常问题的解决
书接上文，在一个正常的事务复制环境中，如果发生了数据库还原，事务复制会不会出问题，出问题之后又如何恢复，如果在不删除订阅发布重建的情况下，如何在现有基础上修复事务复制的异常，这个问题可以分为两部分看： 1，如果publisher数据库发生了还原操作，事务复制会出现什么异常，该如何恢复？ 2，如果是s ...
React 的 KeepAlive 实战指南：深度解析组件缓存机制
Vue 的 Keep-Alive 组件是用于缓存组件的高阶组件，可以有效地提高应用性能。它能够使组件在切换时仍能保留原有的状态信息，并且有专门的生命周期方便去做额外的处理。该组件在很多场景非常有用，比如： · tabs 缓存页面 · 分步表单 · 路由缓存 在 Vue 中，通过 KeepAlive ...
我用Awesome-Graphs看论文：解读Pregel
上次向大家分享了论文图谱项目Awesome-Graphs的介绍文章，这次我们就拿图计算系统的奠基文章Pregel开篇，沿着论文图谱的主线，对图计算系统的论文内容进行解读。 ...
mongo副本集开启安全认证
线上mongo是四节点的副本集，其中一个节点是延迟并且隐藏不参与选举。由于业务的需要，现在需要开启mongo的安全认证。根据官网的介绍（ https://www.mongodb.com/zh-cn/docs/manual/tutorial/enforce-keyfile-access-control ...
MySQL基础篇（一）
1. 事物的四大特性 事务是逻辑上的一组操作，要么都执行，要么都不执行 原子性（Atomicity）：事务是最小的执行单位，不允许分割。事务的原子性确保动作要么全部完成，要么完全不起作用； 一致性（Consistency）：执行事务前后，数据保持一致，例如转账业务中，无论事务是否成功，转账者和收款人 ...
GreatSQL 的刷新锁
GreatSQL 的刷新锁 前言 因为运维小伙伴执行dump备份命令，导致数据库卡住，很多会话都在waiting for table flush，基于这一故障，我对GreatSQL的刷新锁进行了研究。感兴趣的小伙伴请随我一探究竟吧。 刷新锁的症状 刷新锁问题的主要症状是数据库会进入嘎然而止的状态，所 ...
ElasticSearch第4篇（亿级中文数据量 ElasticSearch与Sphinx建索引速度、查询速度、并发性能、实测对比）
经过实测：1.09亿的数据量进行中文检索。ElasticSearch单机的检索性能在0.005~5.6秒之间，此检索速度可满足95%的业务场景（注意：每条ES文档平均65个汉字，数据源取自几千本小说，大部分文档在15~300个汉字之间，不然字数太多索引太大电脑存不下）。 前置文章 由于本文章的前置操 ...
如何让SQL Server像MySQL一样拥有慢查询日志（Slow Query Log慢日志）
如何让SQL Server像MySQL一样拥有慢查询日志（Slow Query Log慢日志） SQL Server一直以来被人诟病的一个问题是缺少了像MySQL的慢日志功能，程序员和运维无法知道数据库过去历史的慢查询语句。 因为SQLServer默认是不捕获过去历史的长时间阻塞的SQL语句，导致大 ...
ElasticSearch第3篇 大数据处理3大问题（“10000条”问题解决方案、hits total值统计总数不精确解决方案、大数据深度分页性能问题3种优化方案）
“10000条”问题（个人称谓） 症状： 在数据量不大的情况下，可能还会使用from + size的传统分页方式，但是数量受限，只能取前10000条的数据。 缘由：ES限值10000条，是ES团队挑选一个不大不小的数作为阈值，为了避免深度分页的策略。 调整：max_result_window 用于控 ...
解锁 SQL Server 2022的时间序列数据功能
解锁 SQL Server 2022的时间序列数据功能 背景随着物联网、金融、工业监控等领域的发展，时间序列数据的应用日益广泛。时间序列数据通常涉及大量的连续读写操作和时间维度的聚合计算，这对数据库的性能提出了更高要求。尽管传统上会使用专门的时间序列数据库，如InfluxDB，但随着企业对数据库一体 ...
MySQL基础知识分享(一)
写在前面 大家好，不知道前面的20题大家写的怎么样，前面分享的20题是SQL中查询的基础题型，这部分被称为DQL部分，是每个学习MySQL必须要学会的部分，下面就让我来介绍MySQL中的其他部分。 回顾DQL部分 先介绍一下sql语句的语法和执行顺序（序号代表顺序由1~9）： select 查询列表 ...
DML/DDL/TCL知识点汇总（超详细知识点）
DML（数据定义语言） 插入语句 方式一：经典的插入语句 * 语法： insert into 表名(列名,...) values(值1,...); 方式二： 语法： insert into 表名 set 列名=值,列名=值,...... 方式一和方式二对比： 方式一支持插入多行，方式二不支持； 方式 ...
MySQL数据结构和索引
一、MySQL数据结构 InnoDB引擎 MySQL默认引擎是InnoDB引擎，这个引擎的主要特点是支持事务和行锁， 数据结构 2.1 二叉树（二叉查找树） 二叉树是一种特殊的树，二叉树中每个节点的度都不能大于2，就是说每个节点最多只能有左右两个子节点 当我们像二叉查找树储存数据的时候，是安装从大到 ...
工作常用SQL
工作常用SQL Excel生成SQL 这个好用 ="insert into t_gk_mapping(id,gk_project_name,gk_project_code,main_project_name,main_project_code) values ('"&J2&"','"&I2&"',' ...
白鲸开源CEO郭炜荣获「2024中国数智化转型升级先锋人物」称号
2024年7月24日，由数据猿主办，IDC协办，新华社中国经济信息社、上海大数据联盟、上海市数商协会、上海超级计算中心作为支持单位，举办“数智新质·力拓未来 2024企业数智化转型升级发展论坛——暨AI大模型趋势论坛”数据猿“年中·特别策划季——数智化转型升级”主题策划活动。 在这场备受瞩目的盛会上 ...