Go
话题列表 社区 Wiki 优质外文 招聘求职 Go 实战教程 社区文档
登录
注册

golang中如何基于net包实现Curl获取下载速度等指标

问答 / 0 / 13 / 创建于 2年前

1. 运行环境

  • go v1.18.1
  • centos7

2. 问题描述？

使用net包实现curl指令功能，发现只能模拟请求get,post等方式，存在两个问题

  • 1：下载速度，时间，文件大小这些数据怎么获取
  • 2：指定ip的curl指令，如何使用net包实现，比如：curl –connect-timeout 5 -m 30 -w %{http_code}::%{speed_download}::%{size_download}”\n” -x 127.0.0.1:80 “http://xxx.com/1M.png"

3. 您期望得到的结果？

  • 给出指导建议，例如有其他包可以实现（exec包执行命令除外）
  • 给出方法，相关指标计算与哪些参数有关，获取途径是啥

4. 您实际得到的结果？

目前使用net包，只能间接计算建联时间，文件大小，下载速度
存在准确度问题

golang 基于net包怎么实现Curl采集下载速度等指标，如何指定ip
xuanyu_li
11 声望
暂无个人描述~
xuesongtao
42 声望
最佳答案

使用支持多种协议吗，如果只要 http 方面， 怎么不使用 http 包呢，1. response header 里就有内容大小，2. 下载速率=总大小/每秒的下载大小，3. 总耗时=总大小/速率

2年前 评论
xuesongtao （作者） 2年前

@xuanyu_li
我试了下 curl, 他还是用的 Content-Lenght

Go

Go

Go
综上：curl 的 size_download 是取的 response Content-Lenght, 如果 response 里没有 Content-Lenght 时，可以取的 response body 字节大小

xuanyu_li （楼主） 2年前
指定ip这种场景使用http包应该怎么做呢？curl -x 127.0.0.1:80...这种
xuesongtao （作者） 2年前
@xuanyu_li http 包使用时， url 为 http://127.0.0.1:80/xxx
xuanyu_li （楼主） 2年前
http://127.0.0.1:80/xxx我能明白，那curl -x 127.0.0.1:80 “xxx.com/1M.png" 类似这种复杂点的应该怎么处理？
xuesongtao （作者） 2年前

@xuanyu_li 这种就要你定下入参的，还有就是不晓得你这个工具要做到什么程度，只是从我的角度想的哈

xuesongtao （作者） 2年前
@xuanyu_li 还有就是问个问题，如果用 net 包的话，需要自己解析文本内容吗😂
xuanyu_li （楼主） 2年前
问一下，为什么响应内容的ContentLength大小和直接执行curl命令获取的size_download不一样，怎么转换？
xuesongtao （作者） 2年前

@xuanyu_li

Go
代码

Go

你说的那个 size-download 是这个命令吗

Go

xuanyu_li （楼主） 2年前
比如： curl --connect-timeout 5 -m 30 -w %{http_code}::%{size_download}"\n" www.baidu.com/img/PCtm_d9c8750bed0...
xuanyu_li （楼主） 2年前
  1. response header 里就有内容大小，2. 下载速率 = 总大小 / 每秒的下载大小，3. 总耗时 = 总大小 / 速率，能问一下，每秒的下载大小在哪里获取？
1
讨论数量: 13
排序：
时间 投票
xuesongtao
42 声望

使用支持多种协议吗，如果只要 http 方面， 怎么不使用 http 包呢，1. response header 里就有内容大小，2. 下载速率=总大小/每秒的下载大小，3. 总耗时=总大小/速率

2年前 评论
xuesongtao （作者） 2年前

@xuanyu_li
我试了下 curl, 他还是用的 Content-Lenght

Go

Go

Go
综上：curl 的 size_download 是取的 response Content-Lenght, 如果 response 里没有 Content-Lenght 时，可以取的 response body 字节大小

xuanyu_li （楼主） 2年前
指定ip这种场景使用http包应该怎么做呢？curl -x 127.0.0.1:80...这种
xuesongtao （作者） 2年前
@xuanyu_li http 包使用时， url 为 http://127.0.0.1:80/xxx
xuanyu_li （楼主） 2年前
http://127.0.0.1:80/xxx我能明白，那curl -x 127.0.0.1:80 “xxx.com/1M.png" 类似这种复杂点的应该怎么处理？
xuesongtao （作者） 2年前

@xuanyu_li 这种就要你定下入参的，还有就是不晓得你这个工具要做到什么程度，只是从我的角度想的哈

xuesongtao （作者） 2年前
@xuanyu_li 还有就是问个问题，如果用 net 包的话，需要自己解析文本内容吗😂
xuanyu_li （楼主） 2年前
问一下，为什么响应内容的ContentLength大小和直接执行curl命令获取的size_download不一样，怎么转换？
xuesongtao （作者） 2年前

@xuanyu_li

Go
代码

Go

你说的那个 size-download 是这个命令吗

Go

xuanyu_li （楼主） 2年前
比如： curl --connect-timeout 5 -m 30 -w %{http_code}::%{size_download}"\n" www.baidu.com/img/PCtm_d9c8750bed0...
xuanyu_li （楼主） 2年前
  1. response header 里就有内容大小，2. 下载速率 = 总大小 / 每秒的下载大小，3. 总耗时 = 总大小 / 速率，能问一下，每秒的下载大小在哪里获取？
1
1112
432 声望

需要使用net/http/httptrace才能获取http的每个步骤耗时，可以参考客户端req的trace接入。

github.com/imroc/req/blob/master/t...

下面是req的trace输出结果：

file

2年前 评论
xuanyu_li （楼主） 2年前
下载的文件大小能获取么，我没看到相关链路信息
1

讨论应以学习和精进为目的。请勿发布不友善或者负能量的内容，与人为善，比聪明更重要！
支持 MD 帮助
xuanyu_li 11 声望
TA 的博客
社区赞助商
成为赞助商

关于 LearnKu

LearnKu 是终身编程者的修道场
做最专业、严肃的技术论坛
LearnKu 诞生的故事

资源推荐

  • 《社区使用指南》
  • 《文档撰写指南》
  • 《LearnKu 社区规范》
  • 《提问的智慧》

    • 服务提供商

    其他信息

  • 成为版主
  • 所有测验
  • 联系站长（反馈建议）

    • 粤ICP备18099781号-6 | 粤公网安备 44030502004330号 | 违法和不良信息举报

    由 Summer 设计和编码 ❤

    请登录

    内容举报
    匿名举报，为防止滥用，仅管理员可见举报者。

    我要举报该，理由是：

    取消