RAG(Retrieval and generation)技术可以扩展大模型的知识库,用来回答我们特定问题,这里我们Step by Step 实现RAG技术。
Multi-Head Attention 计算过程
直觉的理解Attention和Multi-Head Attention的计算过程,然后咱们用NumPy来实现下。
RAG(Retrieval and generation)技术可以扩展大模型的知识库,用来回答我们特定问题,这里我们Step by Step 实现RAG技术。
直觉的理解Attention和Multi-Head Attention的计算过程,然后咱们用NumPy来实现下。