DIPU build 改进

[lljbash]

Read

• Modern-CMake-for-C++.pdf

PRs

• (lljbash) CMake 优化 #301

  • 将编译好的 DIOPI 以 imported 形式引入，可以以 WITH_DIOPI 的 CMake 参数设置位置
  • 删除所有 LIBRARY_PATH 的需求（会影响 rpath），并正确设置 DIOPI 和 DIPU 的 rpath
    • 删除对 DIOPI LD_LIBRARY_PATH 的需求（由 rpath 寻找），因此总是可以正确找到编译 DIPU 时用的版本
  • 修复并优化 cpp test 的 CMake
  • 格式化所有受影响的 CMake
  • 将一些非 DIPU 的 include dir 设置为 isystem

• Make all in CMake #351

  • dipu autogen 转移到 CMake 中，添加适当的依赖，移除显式生成的相关 script
  • dipu python C_ext 转移到 CMake 中编译，暂时移除 setup.py
  • 设置 lib 输出目录，代替 mv

• One step install #358

  • 支持 WITH_DIOPI=internal 来就地编译 DIOPI
  • 把 DIOPI 的 build.sh 里面那些配置组干掉，相应地把配置组功能在 CMake 里面加上支持
  • Caikun/enhance profiler #355 中 thirdparty build 的重构
  • pip install

• add Interface in CMake for diopi_impl #398

  • 将 WITH_DIOPI 拆解为 WITH_DIOPI_LIBRARY 和 WITH_DIOPI_INCLUDE，允许提供自定义的 lib 及 *.hpp 文件

• Pass CMAKE_EXPORT_COMPILE_COMMANDS from DIPU to DIOPI #425

  • 向下传递 CMAKE_EXPORT_COMPILE_COMMANDS

• feat: pass CMAKE_BUILD_TYPE into DIOPI #428

TODO list

(move the item into PRs when you start working on one)

CMake

• 修复 find python 在多python环境下，返回Python.h的列表，导致编译出错。 #322
• 修复 find torch
• 检查并修复 nccl 链接的问题
• DIOPI 路径使用 cache variable，而不是读取环境变量（待定）
• torch_dipu lib 结构对齐 pytorch
• make install
• 模块化 关于 CMakeLists.txt 改进问题 #479
• autogen 参数配置
• thirdparty 改 submodule

Python one-step setup

DIOPI

• DIOPI 模块化、现代化