Mysql 乘法除法精度不一致问题(除法后四位小数)
作者:Siam 发布时间:2024-01-13 09:44:16
问题
今天在写项目功能的时候,有一个统计金额的情况,然后需要进行单位转换,所以写下了大概如下功能的语句,但得到的数据为小数点后4位精度,正常我们只需要2位就足够。
select total_fee / 100 from orders
继续排查寻找资料,进行精度转换,找了一圈的资料都不太满意,继续进行测试
测试
测试bug和未知情况,我们一定要 最小复现,精简测试 ,防止其他语句对结果产生干扰。
select 1 / 100;
// 得到 0.0100
select 1 * 0.01;
// 得到 0.01
并且在3/4台设备上运行,不同mysql版本环境都是这样子的结果。
所以初步得知 Mysql中,乘法和除法对小数点后的精度不一致
在国内的论坛中没有找到合适的资料,于是到国外论坛寻找,提问,交流。
答案
首先感谢其他前辈对问题的解答和指点,我们也将尽量详细地记录问题的排查。
文明之所以能延续,是因为它们有记忆。希望文章也能帮到更多的朋友。
除法的精度默认是小数点后4位
乘法的精度使用 操作数的精度和 的方式来判断,如例子中的 1*0.01 精度分别是小数点后0位和2位,那么就是 0+2 =2 结果也将使用2位精度
测试
select 1.00 * 0.01;
// 结果 0.0100
符合上诉结论。感谢国外前辈指教。
除法使用2位精度
那么我们的问题 如果是要坚持用除法解决,我们可以使用函数来进行转换精度,
CAST( @x / @y AS DECIMAL(m,n) )
DECIMAL的参数可以百度看这个,基本创建过表结构的都能明白。
@x和@y就是除数和被除数。
同时我还提出疑问,是否能在mysql里设置默认除法精度,我们就可以不用每次sql都使用函数计算了。
前辈回复:如果你不想有时候出现出乎意料的情况,那么需要每次都强制使用类型转换。
mysql相关说明文献
https://dev.mysql.com/doc/refman/8.0/en/arithmetic-functions.html
In division performed with /, the scale of the result when using two exact-value operands is the scale of the first operand plus the value of the div_precision_increment system variable (which is 4 by default). For example, the result of the expression 5.05 / 0.014 has a scale of six decimal places (360.714286).
除法的精度规则
由上面引用的文献可知:当使用两个数值进行计算时,结果的精度由 第一个操作数的精度 + 系统变量div_precision_increment的值决定 ,如我们例子中的1 精度是0,系统变量精度是4位默认,所以得到的结果是4位精度
set div_precision_increment = 2;
// 再运行select 1 / 100; 得到 0.01 符合想要的结果
所以我们还可以通过修改默认变量,来改变除法的默认精度。
此时我们再测试
select 1.0 / 100;
// 结果 0.010 符合上文所述结论
来源:https://www.siammm.cn/archives/242


猜你喜欢
- 字符串与数字类型的转换什么是类型转换?—> 将自身的数据类型变成新的数据类型,并拥有新的数据类型的所有功能的过程即
- 什么是生成器?生成器是一个包含了特殊关键字yield的函数。当被调用的时候,生成器函数返回一个生成器。可以使用send,throw,clos
- 本文实例讲述了Symfony2实现在controller中获取url的方法。分享给大家供大家参考,具体如下:// 假设当前URL地址是htt
- Gogland 是 JetBrains 公司推出的Go语言集成开发环境。Gogland 同样基于 IntelliJ 平台开发,支持 JetB
- 有。试试下面这个程序:saveip.asp<%Server.Scripttimeout = 1000On 
- 一、使用多个setting文件 开发Django项目是最常见,也是最麻烦的一个问题就是如何区分开发配置与线上配置。有一些解决方案是
- 前言:处理字符串时经常要定制化去掉无用的空格,python 中要么用存在的常规方法,或者用正则处理1.去掉左边空格string = &quo
- 每个 ndarray 都有一个关联的数据类型 (dtype) 对象。这个数据类型对象(dtype)告诉我们数组的布局。这意味着它为我们提供了
- 条条框框的报表页面枯燥乏味?不妨给页面加点“新意”!前阵子,在看天气预报的时候,发现免费天气预报的调用代码,瞬间想到可以给我开发的报表“润润
- 最近做的都是前端的项目,很多项目都有回到顶部的需求,下面把我写js代码做个笔录,方便以后查找。发现还可以添加从快到慢的动画效果和随时下拉滚动
- 这是一篇关于怎样精简代码和Asp 特征以获得最快执行速度的详细文章。对于一个急燥的用户来说,任何在按下用户按钮到结果出现在它们的屏幕之间的延
- 最近帮伙计做了一个从网页抓取股票信息并把相应信息存入MySQL中的程序。使用环境:Python 2.5 for WindowsMySQLdb
- 1 IDLE1.1 IDLE是python创初人Guido van Rossum使用python and Tkinter来创建的一个集成开发
- Go语言内置int转string至少有3种方式:fmt.Sprintf("%d",n)strconv.Itoa(n)st
- 本文实例讲述了python中sleep函数用法。分享给大家供大家参考。具体如下:Python中的sleep用来暂停线程执行,单位为秒#---
- 点击率预估模型0.前言本篇是一个基础机器学习入门篇文章,帮助我们熟悉机器学习中的神经网络结构与使用。日常中习惯于使用Python各种成熟的机
- 前言:大家都知道python项目中需要导入各种包(这里的包引鉴于java中的),官话来讲就是Module。而什么又是Module呢,通俗来讲
- 首先去官网下载两个架包链接如下:官网链接第一步:将两个架包解压到同一个database目录下。如截图所示:第二步:打开setup应用程序打开
- 常见的几种分页方式:1.扶梯方式扶梯方式在导航上通常只提供上一页/下一页这两种模式,部分产品甚至不提供上一页功能,只提供一种“更多/more
- Xxencode编码,也是一个二进制字符转换为普通打印字符方法。跟UUencode编码原理方法很相似,唯独不同的是可打印字符不同。通个UUe