golang中如何基于net包实现Curl获取下载速度等指标

问答 / 168 / 13 / 创建于 1年前

1. 运行环境

go v1.18.1
centos7

2. 问题描述？

使用net包实现curl指令功能，发现只能模拟请求get,post等方式，存在两个问题

1：下载速度，时间，文件大小这些数据怎么获取
2：指定ip的curl指令，如何使用net包实现，比如：curl –connect-timeout 5 -m 30 -w %{http_code}::%{speed_download}::%{size_download}”\n” -x 127.0.0.1:80 “http://xxx.com/1M.png"

3. 您期望得到的结果？

给出指导建议，例如有其他包可以实现（exec包执行命令除外）
给出方法，相关指标计算与哪些参数有关，获取途径是啥

4. 您实际得到的结果？

目前使用net包，只能间接计算建联时间，文件大小，下载速度
存在准确度问题

golang 基于net包怎么实现Curl采集下载速度等指标，如何指定ip

11 声望

暂无个人描述~

推荐文章：

更多推荐...

GoWeb框架Gin学习总结 38 / 16 |

PowerWeChat V3 - 微信SDK 全新发布 23 / 36 |

第三代微服务架构：基于 Go 的博客微服务实战案例，支持分布式事务 21 / 6 |

Excelize 2.5.0 发布，2022 年首个更新 10 / 2 |

[开源] [正式版发布] Goravel，一个功能完备、具有良好扩展能力的 Golang Web 应用程序框架，致敬 Laravel，欢迎 star、issues 26 / 67 |

Golang常见面试题 25 / 6 |

xuesongtao

42 声望

最佳答案

使用支持多种协议吗，如果只要 http 方面，怎么不使用 http 包呢，1. response header 里就有内容大小，2. 下载速率=总大小/每秒的下载大小，3. 总耗时=总大小/速率

1年前评论

xuesongtao （作者）

@xuanyu_li
我试了下 curl, 他还是用的 Content-Lenght

综上：curl 的 size_download 是取的 response Content-Lenght, 如果 response 里没有 Content-Lenght 时，可以取的 response body 字节大小

xuanyu_li （楼主）

指定ip这种场景使用http包应该怎么做呢？curl -x 127.0.0.1:80...这种

xuesongtao （作者）

@xuanyu_li http 包使用时， url 为 http://127.0.0.1:80/xxx

xuanyu_li （楼主）

http://127.0.0.1:80/xxx我能明白，那curl -x 127.0.0.1:80 “xxx.com/1M.png" 类似这种复杂点的应该怎么处理？

xuesongtao （作者）

@xuanyu_li 这种就要你定下入参的，还有就是不晓得你这个工具要做到什么程度，只是从我的角度想的哈

xuesongtao （作者）

@xuanyu_li 还有就是问个问题，如果用 net 包的话，需要自己解析文本内容吗😂

xuanyu_li （楼主）

问一下，为什么响应内容的ContentLength大小和直接执行curl命令获取的size_download不一样，怎么转换？

xuesongtao （作者）

代码

你说的那个 size-download 是这个命令吗

xuanyu_li （楼主）

比如： curl --connect-timeout 5 -m 30 -w %{http_code}::%{size_download}"\n" www.baidu.com/img/PCtm_d9c8750bed0...

xuanyu_li （楼主）

response header 里就有内容大小，2. 下载速率 = 总大小 / 每秒的下载大小，3. 总耗时 = 总大小 / 速率，能问一下，每秒的下载大小在哪里获取？

讨论数量: 13

xuesongtao

42 声望

使用支持多种协议吗，如果只要 http 方面，怎么不使用 http 包呢，1. response header 里就有内容大小，2. 下载速率=总大小/每秒的下载大小，3. 总耗时=总大小/速率

1年前评论

xuesongtao （作者）

@xuanyu_li
我试了下 curl, 他还是用的 Content-Lenght

综上：curl 的 size_download 是取的 response Content-Lenght, 如果 response 里没有 Content-Lenght 时，可以取的 response body 字节大小

xuanyu_li （楼主）

指定ip这种场景使用http包应该怎么做呢？curl -x 127.0.0.1:80...这种

xuesongtao （作者）

@xuanyu_li http 包使用时， url 为 http://127.0.0.1:80/xxx

xuanyu_li （楼主）

http://127.0.0.1:80/xxx我能明白，那curl -x 127.0.0.1:80 “xxx.com/1M.png" 类似这种复杂点的应该怎么处理？

xuesongtao （作者）

@xuanyu_li 这种就要你定下入参的，还有就是不晓得你这个工具要做到什么程度，只是从我的角度想的哈

xuesongtao （作者）

@xuanyu_li 还有就是问个问题，如果用 net 包的话，需要自己解析文本内容吗😂

xuanyu_li （楼主）

问一下，为什么响应内容的ContentLength大小和直接执行curl命令获取的size_download不一样，怎么转换？

xuesongtao （作者）

代码

你说的那个 size-download 是这个命令吗

xuanyu_li （楼主）

比如： curl --connect-timeout 5 -m 30 -w %{http_code}::%{size_download}"\n" www.baidu.com/img/PCtm_d9c8750bed0...

xuanyu_li （楼主）

response header 里就有内容大小，2. 下载速率 = 总大小 / 每秒的下载大小，3. 总耗时 = 总大小 / 速率，能问一下，每秒的下载大小在哪里获取？

1112

432 声望

需要使用net/http/httptrace才能获取http的每个步骤耗时，可以参考客户端req的trace接入。

github.com/imroc/req/blob/master/t...

下面是req的trace输出结果：

file

1年前评论

xuanyu_li （楼主）

下载的文件大小能获取么，我没看到相关链路信息

讨论应以学习和精进为目的。请勿发布不友善或者负能量的内容，与人为善，比聪明更重要！

帮助