性能
性能是训练机器学习模型时一个十分值得关注的问题。性能让研究速度加快并且使研究规模化,同时还为最终用户提供近乎即时的预测。这部分提供了利用高级 API 构建和训练高性能模型最佳实践的详细信息,以及用于推断最小延迟和最高吞吐量的量化模型。
- 性能指南 包括一系列优化你的 TensorFlow 代码的最佳实践。
- 数据输入管道指南 描述了构建有效的 TensorFlow 数据输入管道的 tf.data API。
- 基准 包括一系列针对不同种类硬件配置的基准结果。
- 针对优化 GPU 的推断,请参考集成 TensorFlow 的 NVIDIA TensorRT™。
Tensorflow 模型优化工具包是一组用于推理优化模型的技术:
XLA(加速线性代数)是一个用于优化 TensorFlow 线性代数计算的试验编译器。下面的教程对 XLA 进行了详细的阐述: