当前位置: 首页 > wzjs >正文

写网站建设需求文档企业建站都有什么网站

写网站建设需求文档,企业建站都有什么网站,沈阳建网站公司,网页设计与网站建设课程报告tensorboard的发展历史和原理 一、发展历史 起源与 TensorFlow 一同诞生 (2015年底): TensorBoard 最初是作为 TensorFlow 开源项目(2015年11月发布)的一部分而设计和开发的。其核心目标是解决深度学习模型训练过程中的“黑盒”问题,提供直观…
tensorboard的发展历史和原理

一、发展历史

起源与 TensorFlow 一同诞生 (2015年底):

TensorBoard 最初是作为 TensorFlow 开源项目(2015年11月发布)的一部分而设计和开发的。其核心目标是解决深度学习模型训练过程中的“黑盒”问题,提供直观的方式来观察模型内部状态、训练指标和计算图结构。早期核心功能: 标量可视化(损失、准确率等)、计算图可视化、简单的直方图(分布)可视化。

逐步扩展功能 (2016-2018):

Embedding Projector: 引入了强大的高维数据(如词嵌入、激活)降维和可视化工具(PCA, t-SNE),用于探索和理解嵌入空间。图像、音频、文本支持: 增加了直接查看训练/验证集中的样本图像、生成的音频样本、文本摘要的功能,方便检查输入数据和模型输出。

TensorFlow 2.x 时代与插件化 (2019至今):

紧密集成 Keras: TensorFlow 2.x 将 Keras 作为高级API,TensorBoard 也深度集成了 Keras 的回调机制 (tf.keras.callbacks.TensorBoard),使用户能更便捷地记录数据。模型图可视化改进: 更好地支持 tf.function 和 Eager Execution 模式下的模型结构可视化。Profile 工具: 集成了强大的性能分析器,可以分析模型在 CPU/GPU/TPU 上的执行时间、内存消耗、算子耗时等,用于性能瓶颈定位和优化。

二、核心原理

TensorBoard 的工作原理可以概括为 “写日志” -> “读日志” -> “可视化” 三个步骤:

数据记录 (Write Logs):

在模型训练/评估代码中,使用 Summary API 在关键点记录需要可视化的数据。

TensorFlow: tf.summary.scalar(), tf.summary.image(), tf.summary.histogram(), tf.summary.text(), tf.summary.audio(), tf.summary.graph() 等。

PyTorch: torch.utils.tensorboard.SummaryWriter.add_scalar(), add_image(), add_histogram() 等。

其他框架: 使用相应的适配器库。

这些 API 调用并不会立即进行昂贵的渲染操作,而是将数据序列化为 tf.Event 协议缓冲区 (Protocol Buffer) 格式。

这些 tf.Event 记录被顺序追加写入到磁盘上的 事件文件 中,通常命名为 events.out.tfevents.*。

写入器 (SummaryWriter) 负责管理这些事件文件(如轮转、刷新)。

数据加载与聚合 (Read and Aggregate Logs):

用户通过命令行 (tensorboard --logdir=path/to/logs) 或 Notebook 内联方式启动 TensorBoard 服务器。

TensorBoard 后端服务 (Python) 监控指定的日志目录 (--logdir)。

后端使用高效的 tensorboard.data.server 组件:

扫描目录: 递归扫描 --logdir 下的所有子目录,寻找事件文件 (*.tfevents.*)。

解析事件文件: 读取并解析这些二进制事件文件,从中提取出存储的 tf.Event 记录。

聚合数据: 将解析出的原始数据(标量值、图像字节、直方图桶计数、图结构等)根据其类型和标签(Tag)进行聚合和组织,存储在内存或缓存中,构建出可供前端查询的数据结构。

处理运行 (Runs): 通常将日志目录下的每个子目录视为一个独立的“运行”(Run,代表一次实验或训练过程),便于比较不同实验的结果。

可视化展示 (Visualize):

TensorBoard 启动一个 Web 服务器 (默认端口 6006)。

用户在浏览器中访问 http://localhost:6006 (或指定的地址)。

浏览器加载 TensorBoard 的前端应用 (基于 JavaScript, HTML, CSS)。

前端通过 HTTP API 向后端发送查询请求(例如:获取某个 Run 下某个 Tag 的所有标量数据点;获取最新一批图像;获取模型图结构等)。

后端接收到请求后,从它聚合好的数据结构中检索出相应的数据,并通过 JSON 或其他格式返回给前端。

前端使用 可视化库(如 D3.js 用于图表绘制, Three.js 用于 Embedding Projector 的 3D 渲染)将接收到的数据渲染成交互式的图表和视图(Scalars 折线图、Images 网格、Distributions 直方图动画、Graphs 节点连接图、Embeddings 3D点云等)。

用户可以在前端界面交互(如缩放图表、切换 Runs/Tags、调整 Embedding Projector 的参数、在计算图中点击节点查看详情等),这些交互会触发新的 API 请求,实现动态更新视图。

import os
from torch.utils.tensorboard import SummaryWriterbase_dir = 'runs/cifar10_mlp_experiment'
log_dir = base_dir# 查找可用目录名
counter = 1
while os.path.exists(log_dir):log_dir = f"{base_dir}_{counter}"counter += 1# 创建SummaryWriter
writer = SummaryWriter(log_dir)
# 记录每个 Batch 的损失和准确率
writer.add_scalar('Train/Batch_Loss', batch_loss, global_step)
writer.add_scalar('Train/Batch_Accuracy', batch_acc, global_step)# 记录每个 Epoch 的训练指标
writer.add_scalar('Train/Epoch_Loss', epoch_train_loss, epoch)
writer.add_scalar('Train/Epoch_Accuracy', epoch_train_acc, epoch)dataiter = iter(train_loader)
images, labels = next(dataiter)
images = images.to(device)
writer.add_graph(model, images)  # 通过真实输入样本生成模型计算图# 可视化原始训练图像
img_grid = torchvision.utils.make_grid(images[:8].cpu()) # 将多张图像拼接成网格状(方便可视化),将前8张图像拼接成一个网格
writer.add_image('原始训练图像', img_grid)# 可视化错误预测样本(训练结束后)
wrong_img_grid = torchvision.utils.make_grid(wrong_images[:display_count])
writer.add_image('错误预测样本', wrong_img_grid)if (batch_idx + 1) % 500 == 0:for name, param in model.named_parameters():writer.add_histogram(f'weights/{name}', param, global_step)  # 权重分布if param.grad is not None:writer.add_histogram(f'grads/{name}', param.grad, global_step)  # 梯度分布

@浙大疏锦行

http://www.dtcms.com/wzjs/449684.html

相关文章:

  • 中国建设银行肃宁支行网站百度seo优化软件
  • 台州网站如何制作免费注册网址
  • 优客工场 网站开发window优化大师
  • 网站落地页如何做2023年8月疫情爆发
  • centos。wordpress中国seo谁最厉害
  • 天津免费建设网站简单的网页设计作品
  • 彩票网站怎么做代理百度搜索引擎排名规则
  • 做网站开发哪里可以接单网站模板
  • 技术支持:淄博网站建设网站建设小程序开发
  • php 网站版面素材短链接生成
  • 贵州软件开发 网站开发网络营销的实现方式有哪些
  • 电子商务网站的主要评价指标有网站媒体推广方案
  • 鄂尔多斯 网站建设百度网站推广教程
  • 黑龙江省建设教育信息网网站百度关键词规划师入口
  • 南平 网站建设如何快速搭建一个网站
  • 做网站贵成全在线观看免费高清动漫
  • 专业网站开发价格长沙做网络推广公司的
  • 可以做配音兼职的网站个人怎么做推广
  • 专业做网站公司排名竞价账户托管哪家好
  • 建设工程重要网站2024年阳性什么症状
  • 免费建站工具有哪些快速优化排名公司推荐
  • 域名购买网站有哪些网站推广的策略
  • 如何给网站做地图网站优化推广平台
  • 网站开发业务流程杭州seo全网营销
  • 哪些网站是django做的寻找客户的12种方法
  • hbuilder做的网站网络营销的特点主要包括什么
  • 做天猫转让网站网络营销客服主要做什么
  • 山东省建设局网站首页旅游网站网页设计
  • 手机网站建设行业现状地推接单平台找推网
  • 外贸平台网站能去百度上班意味着什么