第三视点

不同repeat机制分析

发表于 2025-07-12 分类于 programming

简要介绍不同repeat在存储方面的机制差异，重点分析用通常方法实现的GQA为什么只能减小kv cache，但不能降低显存开销。

发表于 2025-06-22 更新于 2025-09-13 分类于 LLM

简要介绍rotary positional encoding （RoPE）的原理，主要参考RoFormer

发表于 2025-06-22 更新于 2025-09-13 分类于 LLM

简要说明CoT是怎么一回事，主要参考NIPS’22

发表于 2025-06-22 更新于 2025-09-13 分类于 LLM

简要说明in-context learning是怎么一回事。主要参考ACL’24

发表于 2024-05-12 分类于 programming

简要介绍python的decorator：cache

发表于 2023-09-15 更新于 2023-09-16 分类于 optics

对应第六章

发表于 2023-09-14 分类于 optics

对应第五章

发表于 2023-09-14 分类于 optics

对应第四章

发表于 2023-09-13 分类于 optics

对应第三章

发表于 2023-09-12 更新于 2023-09-13 分类于 optics

对傅里叶光学知识的简介。对应《傅里叶光学导论》（古德曼，第三版）第一、二章，以下略。