Forrest Hu's Blogs

Forrest Hu's Blogs

技术、架构与生活随笔 · 共 453 篇文章

  1. X的生成——特征工程

    ·Architecture MachineLearning

    简介 特征工程的重要性 建立特征工程的流程 数据清洗 特征提取 特征选择 特征变换 特征构建 特征准入和淘汰 特征交叉/Feature crosses tf 特征处理 feature colum...

  2. tvm

    ·Architecture MachineLearning

    （未完成） 简介（未完成）阿里 BladeDISC 深度学习编译器正式开源The Deep Learning Compiler: A Comprehensive Survey【从零开始学深度学习编译器】十一，初识MLIR 未读。Dive into Deep Learnin...

  3. tensorflow原理——core层分析

    ·Architecture MachineLearning

    简介 以Graph为中心的视角 proto 定义 C++定义 数据流图的整体执行 结合分布式环境 client-master-worker 会话管理 会话生命周期与图控制 单机会话...

  4. 模型演变

    ·Architecture MachineLearning

    简介 历史发展 发展脉络 why deep历史发展一文回顾深度学习发展史上最重要经典模型以历史顺序浏览论文也是了解当前技术的来历以及为什么会发明它们。换句话说，我会尽量呈现最小集的想法，最必要的基本知识，了解现代的深度学习研究核心发展历程。一文梳理深度学习算法演进 未...

  5. 《深度学习推荐系统实战》笔记

    ·Architecture MachineLearning

    简介 整体架构 数据部分 特征工程 整体设计 召回层/recall/matching 模型训练 模型 以Embedding+MLP 模型为例 技术架构 冷启动 ...

  6. keras 和 Estimator

    ·Architecture MachineLearning

    简介 原生api keras 顺序模型 函数式模型 实现 其它 和session 的关系 callback Estimator ...

  7. tensorflow分布式训练

    ·Architecture MachineLearning

    简介 基本概念 服务 进程 Low-level 分布式编程模型 High-level 分布式编程模型 Middle-level/Strategy 代码示例 与estimator 结合使用 ...

  8. 分布式训练的一些问题

    ·Architecture MachineLearning

    简介 基本理念 并行模式 通信技术 协议层 GPU 卡间通信 NCCL Gloo MPI 与 NCCL/GLOO 优化手段 数...

  9. 学习ebpf

    ·Technology Linux

    （未完成） 简介（未完成） demo 工作原理 应用初识 eBPF，你应该知道的知识简单来说，eBPF 是 Linux 内核中一个非常灵活与高效的类虚拟机（virtual machine-like）组件， 能够在许多内核 hook 点安全地执行字节码（bytecod...

  10. 基于Volcano的弹性训练

    ·Architecture MachineLearning

    简介 背景介绍 如何触发扩缩容 HPA方案 让volcano支持弹性调度 弹性扩缩容的实现 小结背景介绍训练任务基于k8s执行，由volcano负责调度，算法人员归属于不同的部门，一个部门对应一个volcano queue。因...