tag

GPU

共 43 篇文章。
全部文章GoTypeScript游戏开发小游戏游戏设计Godot书稿RustPython性能优化游戏引擎PRDSaaS游戏服务端
LLMOps

推理成本核算与 FinOps

本文解决 LLM 服务账单不可解释的问题:拆解 GPU 小时、token、存储、网络、向量库五类成本的计费口径与占比,给出自建与 API 的盈亏平衡计算方法与真实价格表,建立每千次请求成本、每用户成本、毛利率等单位经济指标。文中给出按团队、应用、租户打标签的归因方案,梳理量化、批处理、前缀缓存、路由、right-sizing 五类降本手段的降幅与风险,附可运行的 Python 核算脚本与常见坑。

15 分钟阅读
FinOps cost GPU
frontend

前端动画与渲染性能:帧率、合成层与 GPU 加速

前端动画与渲染性能:浏览器渲染流水线(解析/样式/布局/绘制/合成)、帧率与刷新率(60fps/120fps/VSync)、CSS 动画 vs JS 动画(requestAnimationFrame)、合成层与 GPU 加速(will-change/transform3d)、性能分析工具(Chrome DevTools Performance/Rendering/Layers)、常见性能陷阱(强制同步布局/布局抖动/重绘风暴)、动画优化策略(FLIP/虚拟滚动/离屏渲染)、Web Animations API、SVG 与 Canvas 动画选型。

6 分钟阅读
动画 渲染 性能
ai

分布式推理与 GPU 集群调度:张量并行、流水并行与调度器实战

当单卡放不下一个 70B 模型,或单卡无法满足线上吞吐时,分布式推理就从『可选优化』变成『必选项』。本文系统讲解张量并行、流水线并行与专家并行三大策略的通信代价与适用场景,介绍连续批处理在集群中的落地,并深入 KServe 与 Ray Serve 两类 GPU 调度器的架构与配置。一、为什么需要分布式推理

10 分钟阅读
GPU 并行计算 LLM