oahzxl 25952b67d7 [feat] add flash attention (#1762)		2022-10-26 16:15:52 +08:00
..
test_checkpoint	…
test_activation_checkpointing.py	…
test_colo_checkpoint.py	…
test_commons.py	…
test_flash_attention.py	[feat] add flash attention (#1762)	2022-10-26 16:15:52 +08:00
test_lazy_init_ctx.py	…
test_memory.py	…
test_norm_gradient_clipping.py	…
test_zero_gradient_clippling.py	…