Bộ nhớ ngữ cảnh
Bộ nhớ ngữ cảnh (Contextual Memory) đề cập đến khả năng của một hệ thống AI trong việc lưu giữ, truy cập và sử dụng thông tin thu thập được từ các tương tác trước đó trong một phiên cụ thể hoặc qua nhiều phiên. Không giống như xử lý phi trạng thái (stateless processing), vốn coi mỗi đầu vào là hoàn toàn mới, bộ nhớ ngữ cảnh cho phép AI xây dựng sự hiểu biết năng động về nhu cầu, sở thích và dòng chảy cuộc trò chuyện đang diễn ra của người dùng.
Đối với các ứng dụng hiện đại, đặc biệt là chatbot và các tác nhân thông minh, ngữ cảnh là tất cả. Nếu không có nó, các tương tác sẽ bị rời rạc và gây khó chịu. Bộ nhớ ngữ cảnh biến một công cụ hỏi đáp đơn giản thành một trợ lý hữu ích và bền bỉ. Nó cho phép hệ thống trả lời các câu hỏi tiếp theo một cách chính xác, ngay cả khi người dùng không nhắc lại rõ ràng tất cả các chi tiết cần thiết.
Cơ chế này thường bao gồm việc lưu trữ dữ liệu tương tác—chẳng hạn như đầu vào của người dùng, phản hồi của hệ thống, các thực thể được xác định và ý định được suy luận—trong một kho lưu trữ bộ nhớ tạm thời hoặc vĩnh viễn. Dữ liệu này sau đó được mã hóa (thường bằng cách sử dụng nhúng vector) và đưa trở lại mô hình ngôn ngữ hoặc thuật toán ra quyết định như một phần của lời nhắc (prompt) hiện tại. Điều này cho phép mô hình điều kiện hóa đầu ra tiếp theo của nó dựa trên hồ sơ lịch sử.
Tạo sinh được Tăng cường Truy xuất (Retrieval-Augmented Generation - RAG) là một kỹ thuật thường được sử dụng cùng với bộ nhớ ngữ cảnh để kéo kiến thức bên ngoài liên quan vào cửa sổ ngữ cảnh hiện tại. Quản lý Trạng thái (State Management) là lĩnh vực kỹ thuật rộng hơn điều chỉnh cách hệ thống theo dõi trạng thái hoạt động hiện tại của một phiên người dùng.