上云无忧 > 文档中心 > 百度智能云内容分发网络CDN日志下载及转储
内容分发网络CDN
百度智能云内容分发网络CDN日志下载及转储

文档简介:
CDN提供了完善的日志管理与下载功能,您可以根据实际情况查询、下载或自动存储CDN的日志文件并能进行实时日志推送。 下载日志到本地:将选择的日志下载到本地路径保存。
*此产品及展示信息均由百度智能云官方提供。免费试用 咨询热线:400-826-7010,为您提供专业的售前咨询,让您快速了解云产品,助您轻松上云! 微信咨询
  免费试用、价格特惠

概述

CDN提供了完善的日志管理与下载功能,您可以根据实际情况查询、下载或自动存储CDN的日志文件并能进行实时日志推送。

  • 下载日志到本地:将选择的日志下载到本地路径保存。
  • 一键转储:设置了转储路径后,可选择一个或多个日志文件转储到指定的BOS Bucket中,了解更多BOS可参考BOS产品描述和BOS操作指南。
  • 自动转储:开启自动转储,设置了自动转储的域名和路径后,系统将自动将相关日志存储至设定的BOS路径,了解更多BOS可参考BOS产品描述和BOS操作指南。

日志字段说明

下载、一键存储或自动存储的日志格式都相同,包含的字段也相同,详细字段解释如下:

字段 含义
client_ip 客户端IP
log_level 是否为边缘日志
- 保留字段
host 访问域名
time_local 时间字符串
request_time_ms 请求处理时间,单位ms
request 请求的方法、路径、版本,例如"GET /path/of/url?args&a=1&b=2 HTTP/1.1"
status HTTP状态码
bytes_sent 返回的字节长度
body_bytes_sent 返回的body长度
referer 请求Referer
cookie 客户端Cookie
user_agent 请求UA,即请求Header中的User-Agent部分
x_forwarded_for 即请求Header中的X-Forward-For部分
connection_id 请求的唯一id
udf_hit 命中状态,例如MISS/HIT
server_ip 服务端IP

日志下载

  1. 登录 CDN管理控制台,选择 日志管理

  2. 选择需要下载日志的域名,可以选择单个或多个域名。
  3. 选择需要查看和下载的日志时间段。选择时间段后,系统将展示该时间段内的日志。百度智能云将保存180天的日志数据。
  4. 选择需要下载的日志,点击 下载,将日志下载到本地。

设置一键转储

  1. 登录 CDN管理控制台,选择 日志管理
  2. 选择需要下载日志的域名,可以选择单个或多个域名。
  3. 选择需要查看和下载的日志时间段。选择时间段后,系统将展示该时间段内的日志。百度智能云将保存180天的日志数据。
  4. 全选或者选择需要下载的日志,点击 一键转储
  5. 选择转储路径。

说明: 您可以选择已有的Bucket进行转储,也可以新建Bucket用于转储日志。

  1. 完成路径选择后,点击 确认,日志将被转储至BOS Bucket中。
  2. 转储请求提交成功后,可由 转储记录 查看相应状态和进度,如下图所示。

设置自动转储

CDN提供了自动转储功能,只需在控制台进行设置即可完成对日志的情况管理和存储。日志自动转储功能默认情况下关闭。日志自动转储功能开启后,您可选择转储路径和需要自动转储日志的域名。

设置日志自动转储具有以下优势特点,您可以根据实际情况进行设置:

  • 日志永久存储不删除。
  • BOS提供了丰富的操作工具,方便对日志进行管理下载。
  • 可以利用BMR进行数据分析。

操作步骤

  1. 登录 CDN管理控制台,选择 日志管理
  2. 点击 设置日志自动转储 ,选择相应的域名和转储路径。

    • 将日志自动转储按钮调整为“开”。
    • 可以将一个或多个域名设置为日志自动转储。
    • 可以选择已有的Bucket或新建Bucket用于自动转储CDN日志文件。
  3. 点击 确认 即可完成设置。完成了域名的自动转储设定后,系统将自动将域名的日志文件转储至设定的BOS Bucket中。

自定义日志格式

根据对日志字段和顺序的不同需求,您可以自定义日志格式。

  1. 登录 CDN管理控制台,选择 日志管理
  2. 在 日志管理 页面,点击 自定义日志格式 选项。

  3. 在 自定义格式页,设置日志的自定义格式,如下图所示

注意:一个域名只能有一个格式,如有重复设置,域名优先级大于标签,其余按照创建时间最新的为准。

配置 说明
日志名称 您可自定义设置日志的名称,便于您对日志的查看及管理。
适用对象 您可通过域名或标签选择本日志格式适用的对象。
• 域名:您可以通过域名选择适用对象,并支持选择单个或多个域名。
• 标签:您可以通过标签选择适用对象,并支持选择多个或单个标签下的所有域名。
分隔符号 您可以设置生成的日志中字段的分隔符号,您可以选择 “空格“、“;”、“/”、“~”、“@@”、“\t”6种不同的分隔符号。
字段 字段分为待选字段和已选字段。
• 待选字段:待选字段为您尚未选择的字段。您可以选择单个或多个字段,并点击  添加到已选字段中。
• 已选字段:已选字段为您当前已选择的字段。
   您可以点击字段后的  删除单个字段,或点击 全部删除 删除所有的已选字段。
   您可以点击字段后的  为字段添加引号。

  1. 点击 确定 保存设置。

自定义日志格式可选字段解释如下(默认字段解释见 日志字段说明):

字段 含义
remote_addr 客户端IP:客户端port
remote_ip 客户端IP
remote_port 客户端port
sent_http_content_length Content-Length
http_content_length 客户端发送的content-length
sent_http_content_type 响应的body类型,例如"image/jpeg"
sent_http_content_range 响应的range头,例如"bytes 0-800/801"
http_range 请求Range,例如"bytes=0-795427"
request_time 请求处理时间,单位s
ssl_protocol ssl协议,例如"TLSv1.2"
ssl_cipher ssl密钥套件,例如"ECDHE-RSA-AES128-GCM-SHA256"
server_protocol 请求协议,"HTTP/1.0", "HTTP/1.1", or "HTTP/2.0"
http_accept 发送端(客户端)希望接受的数据类型
scheme http/https
req_len 接收的客户端请求字节数
url 请求URL eg:http://host/path?args
request_method 请求方式,例如 GET or POST
uri 请求URI eg: /path?args
http_ver eg: HTTP/1.1
http_referer 请求Header中的Referer
http_cookie 请求Header中的Cookie
http_user_agent 请求Header中的User-Agent
http_x_forwarded_for 请求Header中的X-Forward-For
connection 连接序列号,单机自增
udf_hit 是否命中,命中:HIT 没有命中:MISS
jvip 节点vip
相似文档
  • 在借助 CDN 访问图片、文字或视频资源时,CDN 会产生大量的日志数据,并对这些日志数据进行实时采集。您可以将 CDN 加速域名产生的实时日志投递到日志服务进行实时日志分析,通过实时日志分析,您可以快速发现和定位业务中存在的问题。
  • 用户开启动态加速服务后,可以在日志管理中查看一段时间内产生的动态加速日志。 登录CDN管理控制台,进入“内容分发网络CDN”页面。 在左侧导航栏点击日志管理,选择动态加速日志页签。 选择要查询的动态加速域名和时间段,最大支持查询180天内的日志。 点击查询动态加速,即可在下方查看日志列表。
  • CDN图片鉴黄是百度基于云计算平台,通过对海量数据进行快速扫描,来检测出通过CDN加速的图片是否涉黄,能够帮助用户节省90%以上的人力审核成本。为了方便您使用,CDN为用户提供了界面化的图审控制台,用户可在控制台查看CDN审核出的涉黄图片,并按需进行人工复审。
  • 百度智能云CDN通过遍布全球的优质节点,结合百度自研的最优链路算法及协议层优化,通过资源动静分离、智能缓存、路由优化、传输优化等核心技术,使动态内容通过安全可靠的最优传输路径快速分发给用户,有效提升动静内容混合站点的访问速度,为用户解决跨运营商、跨国、网络不稳定等因素导致的响应慢、丢包、服务不稳定等问题。
  • 开通安全防护服务: 登录内容分发网络 CDN 管理控制台,进入CDN概览页面。 首次开通服务用户请点击侧方目录中的增值服务-->安全防护按钮,进入“功能开通页面”。 点击立即购买,在弹出的套餐详情页面选择套餐配置,点击去结算-->提交订单,进入“订单支付页面”确认支付,开通成功后自动跳转安全防护页面。
官方微信
联系客服
400-826-7010
7x24小时客服热线
分享
  • QQ好友
  • QQ空间
  • 微信
  • 微博
返回顶部