mysql 如何获取数据表中离当前日期最近的数据

mysql 如何获取数据表中离当前日期最近的数据,第1张

问题:

仅用慢日志文件,如何快速获取分时报告?

如果有监控系统,获取分时报告(每小时慢查询的条数报告)不难,如果只有慢日志文件,就会有点费劲。

实验:

通过 pt-query-digest --timeline 功能,可以输出带时间戳的慢查询条目

用 sed 将 timeline 报告滤出

安装 termsql

使用 termsql,将报告导入,并使用 SQL 查询一条记录,以展示 termsql 的效果

可以看到 termsql 将 timeline 报告的每一行,整理成了一条数据,放在 SQLite 中。

下面就可以尽情使用 SQL 获取分时报告:

用一个复杂一点慢日志,获得如下结果:

可以轻松定位到慢查询的热点时段,也便于发现业务的周期性规律。

termsql 是一个很方便的小工具:

1 可以用于将文本导出到 SQLite 中,方便 SQL 查询。

2 它与 ps 或者 top 合用也有惊喜,比如找出 CPU 占用率高于 25% 的进程:

你应该是想查询某一时间段的内容吧:

如下:

日期范围内条件查询to_date('2016-11-06','yyyy-mm-dd') and to_date('2016-12-10','yyyy-mm-dd')

select date_format( now( ) , ‘%Y%m’ ) , date_format(date_sub(now(),interval 6 month) , ‘%Y%m’ )

以每24小时作为一份时间(而非自然日),根据用户的配置有两种工作模式:带状模式中,用户仅定义开始日期时,从开始日期(含)开始,每份时间1个分片地无限增加下去;环状模式中,用户定义了开始日期和结束日期时,以结束日期(含)和开始日期(含)之间的时间份数作为分片总数(分片数量固定),以类似取模的方式路由到这些分片里。

1 DBLE 启动时,读取用户在 rulexml 配置的 sBeginDate 来确定起始时间

2 读取用户在 rulexml 配置的 sPartionDay 来确定每个 MySQL 分片承载多少天内的数据

3 读取用户在 rulexml 配置的 dateFormat 来确定分片索引的日期格式

4 在 DBLE 的运行过程中,用户访问使用这个算法的表时,WHERE 子句中的分片索引值(字符串),会被提取出来尝试转换成 Java 内部的时间类型

5 然后求分片索引值与起始时间的差,除以 MySQL 分片承载的天数,确定所属分片

1 DBLE 启动时,读取用户在 rulexml 配置的起始时间 sBeginDate、终止时间 sEndDate 和每个 MySQL 分片承载多少天数据 sPartionDay

2 根据用户设置,建立起以 sBeginDate 开始,每 sPartionDay 天一个分片,直到 sEndDate 为止的一个环,把分片串联串联起来

3 读取用户在 rulexml 配置的 defaultNode

4 在 DBLE 的运行过程中,用户访问使用这个算法的表时,WHERE 子句中的分片索引值(字符串),会被提取出来尝试转换成 Java 内部的日期类型

5 然后求分片索引值与起始日期的差:如果分片索引值不早于 sBeginDate(哪怕晚于 sEndDate),就以 MySQL 分片承载的天数为模数,对分片索引值求模得到所属分片;如果分片索引值早于 sBeginDate,就会被放到 defaultNode 分片上

与MyCat的类似分片算法对比

中间件

DBLE

MyCat

分片算法种类 date 分区算法 按日期(天)分片

两种中间件的取模范围分片算法使用上无差别

开发注意点

分片索引1 必须是字符串,而且 javatextSimpleDateFormat 能基于用户指定的 dateFormat 来转换成 javautilDate

分片索引2 提供带状模式和环状模式两种模式

分片索引3 带状模式以 sBeginDate(含)起,以 86400000 毫秒(24 小时整)为一份,每 sPartionDay 份为一个分片,理论上分片数量可以无限增长,但是出现 sBeginDate 之前的数据而且没有设定 defaultNode 的话,会路由失败(如果有 defaultNode,则路由至 defaultNode)

分片索引4 环状模式以 86400000 毫秒(24 小时整)为一份,每 sPartionDay 份为一个分片,以 sBeginDate(含)到 sEndDate(含)的时间长度除以单个分片长度得到恒定的分片数量,但是出现 sBeginDate 之前的数据而且没有设定 defaultNode 的话,会路由失败(如果有 defaultNode,则路由至 defaultNode)

分片索引5 无论哪种模式,分片索引字段的格式化字符串 dateFormat 由用户指定

分片索引6 无论哪种模式,划分不是以日历时间为准,无法对应自然月和自然年,且会受闰秒问题影响

运维注意点

扩容1 带状模式中,随着 sBeginDate 之后的数据出现,分片数量的增加无需再平衡

扩容2 带状模式没有自动增添分片的能力,需要运维手工提前增加分片;如果路由策略计算出的分片并不存在时,会导致失败

扩容3 环状模式中,如果新旧 [sBeginDate,sEndDate] 之间有重叠,需要进行部分数据迁移;如果新旧 [sBeginDate,sEndDate] 之间没有重叠,需要数据再平衡

配置注意点

配置项1 在 rulexml 中,可配置项为 <propertyname="sBeginDate"> 、 <propertyname="sPartionDay"> 、 <propertyname="dateFormat"> 、 <propertyname="sEndDate"> 和 <propertyname="defaultNode">

配置项2在 rulexml 中配置 <propertyname="dateFormat">,符合 javatextSimpleDateFormat 规范的字符串,用于告知 DBLE 如何解析sBeginDate和sEndDate

配置项3在 rulexml 中配置 <propertyname="sBeginDate">,必须是符合 dateFormat 的日期字符串

配置项4在 rulexml 中配置 <propertyname="sEndDate">,必须是符合 dateFormat 的日期字符串;配置了该项使用的是环状模式,若没有配置该项则使用的是带状模式

配置项5在 rulexml 中配置 <propertyname="sPartionDay">,非负整数,该分片策略以 86400000 毫秒(24 小时整)作为一份,而 sPartionDay 告诉 DBLE 把每多少份放在同一个分片

配置项6在 rulexml 中配置 <propertyname="defaultNode"> 标签,非必须配置项,不配置该项的话,用户的分片索引值没落在 mapFile 定义

以上就是关于mysql 如何获取数据表中离当前日期最近的数据全部的内容,包括:mysql 如何获取数据表中离当前日期最近的数据、java/mysql 如何查询当前时间比如:2017-02-08 09:19:00 我要查询的是09:00:00-09:59:59秒、我想根据当前时间获取最近六个月的日期,请问以下SQL中的方法在MYSQL中改怎么写,求大神指教等相关内容解答,如果想了解更多相关内容,可以关注我们,你们的支持是我们更新的动力!

欢迎分享,转载请注明来源:内存溢出

原文地址:https://54852.com/web/9437671.html

(0)
打赏 微信扫一扫微信扫一扫 支付宝扫一扫支付宝扫一扫
上一篇 2023-04-28
下一篇2023-04-28

发表评论

登录后才能评论

评论列表(0条)

    保存