1. 17 10月, 2022 1 次提交
    • G
      Support BF16 training for sharding (#46846) · 0b39b244
      Ghost Screaming 提交于
      * Fix bug of reduce_sum op. When input.numel() > INT32_MAX, its result
      is wrong.
      
      * support pure bfloat16
      
      * support bf16 linear
      
      * update PR to pass CI
      
      * tiny fix where_grad_kernel.cu
      
      * Support bfloat16 type for reducer and sharding.
      
      * Fix some bug.
      
      * Polish code.
      
      * Polise code.
      
      * Add bfloat16 datatype in fill_grad kernels.
      Co-authored-by: Nsneaxiy <sneaxiy@126.com>
      0b39b244
  2. 01 9月, 2022 1 次提交
  3. 03 8月, 2022 1 次提交
  4. 01 8月, 2022 1 次提交
    • L
      unify gpu context (#44740) · 86763023
      Leo Chen 提交于
      * remove cudaDeviceContext
      
      * remove more template
      
      * fix rocm compile
      
      * remove alias name CUDADeviceContext
      
      * fix compile
      
      * fix tests
      
      * revert changes
      86763023
  5. 29 7月, 2022 1 次提交
  6. 02 7月, 2022 1 次提交
    • L
      unify cpu context, part2 (#44012) · 755438a7
      Leo Chen 提交于
      * fix init()
      
      * delete test_device_context
      
      * replace CPUDeviceContext with CPUContext
      
      * fix test_scalar
      
      * remove dot_op.cc
      
      * fix compile
      755438a7
  7. 26 6月, 2022 1 次提交
  8. 07 6月, 2022 1 次提交
  9. 05 6月, 2022 1 次提交
  10. 11 5月, 2022 1 次提交
  11. 29 4月, 2022 1 次提交
  12. 14 4月, 2022 1 次提交
  13. 13 4月, 2022 2 次提交
  14. 04 4月, 2022 1 次提交
  15. 31 3月, 2022 1 次提交
  16. 22 3月, 2022 1 次提交
  17. 18 3月, 2022 1 次提交
  18. 15 3月, 2022 1 次提交
  19. 01 3月, 2022 1 次提交