楼 主
[求助]大数字的运算
发表于 2007-11-22 17:57 · 中国 湖北 武汉 电信
初级用户
★
积分 97
发帖 33
注册 2007-03-05 06:13
19年会员
UID 80815
性别 男
状态 离线
set /a AA=1048576/3798863872
并不能算出 3798863872除以1048576的值
这个错在哪
第 2 楼
发表于 2007-11-22 18:26 · 中国 北京 联通
银牌会员
★★★
积分 1,287
发帖 634
注册 2007-05-02 15:06
19年会员
UID 87277
性别 男
来自 cmd.exe
状态 离线
第 3 楼
发表于 2007-11-22 18:57 · 中国 北京 中国科学院研究生院玉泉四公寓
银牌会员
★★★
积分 1,187
发帖 555
注册 2006-12-21 07:35
19年会员
UID 74129
性别 男
状态 离线
Originally posted by qdloverr at 2007-11-22 17:57:
set /a AA=1048576/3798863872
并不能算出 3798863872除以1048576的值
这个错在哪
最大是 2^31-1=2147483647
第 4 楼
发表于 2007-11-22 18:58 · 中国 北京 中国科学院研究生院玉泉四公寓
银牌会员
★★★
积分 1,187
发帖 555
注册 2006-12-21 07:35
19年会员
UID 74129
性别 男
状态 离线
Originally posted by scriptor at 2007-11-22 18:57:
最大是 2^31-1=2147483647
数字的精确度长度是32位的
第 5 楼
发表于 2007-11-22 22:29 · 中国 浙江 杭州 教育网
银牌会员
★★★
积分 2,000
发帖 621
注册 2007-01-01 00:00
19年会员
UID 75212
性别 男
状态 离线
论坛跳转: