Cách Gỡ Lỗi Câu Trả Lời Của Chatbot

Xem Lại Lịch Sử Chatbot với Nhật Ký Chi Tiết

FlowHunt cung cấp lịch sử các tương tác với chatbot, cho phép bạn xem lại thông tin nhật ký chi tiết về từng phiên trò chuyện. Nếu các thành phần cụ thể, như Document Retriever, được sử dụng trong một cuộc trò chuyện, nhật ký ở chế độ chi tiết sẽ cho biết điều này, bao gồm cả những tài liệu nào đã được phát hiện và tận dụng để tạo ra câu trả lời của chatbot.

Truy cập nhật ký chi tiết ở đâu?

1. Trong workspace FlowHunt của bạn, mở Lịch sử từ menu bên trái hoặc dùng liên kết này: https://app.flowhunt.io/aistudio/chatbot-history
2. Sử dụng các bộ lọc có sẵn. Nên sử dụng ít nhất bộ lọc phiên để chỉ định khoảng thời gian bạn muốn kiểm tra, nhằm thu hẹp kết quả.
3. Mở một cuộc trò chuyện cụ thể.
4. Chuyển từ Plain sang Verbose ở góc trên bên trái màn hình.
5. Tìm các mục Tool Call và xem liệu (và công cụ nào) đã được sử dụng, cùng với kết quả chi tiết.

Khắc Phục Các Vấn Đề Được Phát Hiện Trong Câu Trả Lời Của Chatbot

Nếu bạn phát hiện chatbot cung cấp thông tin sai hoặc chưa tối ưu mặc dù thông tin đúng đã có sẵn, hãy làm theo các bước sau để khắc phục và cải thiện kết quả.

• Kiểm tra xem Document Retriever đã được sử dụng chưa. Nếu lịch sử chi tiết cho thấy Document Retriever chưa được sử dụng, hãy cập nhật system prompt của thành phần agent gọi tool để đảm bảo nó luôn tận dụng Document Retriever khi xây dựng câu trả lời. Bạn có thể củng cố prompt bằng cách thêm hướng dẫn như sau:

  <core_instructions>
  LUÔN sử dụng Tool Call và tận dụng "Document Retriever" để cung cấp phản hồi ngắn gọn với các URL từ Document Retriever cho thông tin chi tiết hơn.
  </core_instructions>
  

  Điều này sẽ đảm bảo chatbot tìm kiếm và tích hợp tài liệu, bài viết của bạn từ Schedules làm nguồn tham khảo để soạn câu trả lời, giảm thiểu rủi ro cung cấp thông tin sai hoặc chưa tối ưu chỉ dựa trên dữ liệu đã được huấn luyện sẵn.

• Xem lại các tài liệu đã được truy xuất. Nếu nhật ký chi tiết chỉ ra rằng Document Retriever đã được dùng nhưng lại trả về các bài viết khác hoặc không liên quan, hãy cân nhắc các giải pháp sau:

  • Cải thiện cơ sở kiến thức: Thêm bài viết mới hoặc nâng cấp các bài hiện có để bao gồm các từ khóa, cụm từ mà khách hàng có thể hỏi. Điều này sẽ tăng khả năng truy xuất đúng thông tin.
  • Tinh chỉnh metadata của bài viết: Đảm bảo các bài viết có tiêu đề, tóm tắt, và thẻ tag phù hợp để tăng khả năng được Document Retriever phát hiện.
  • Tạo mục FAQ: Với các câu hỏi phổ biến hoặc lặp lại, hãy tạo mục FAQ riêng với câu trả lời chính xác. Điều này giúp chatbot dễ dàng truy xuất và cung cấp đúng thông tin khi cần.
  • Xem lại hướng dẫn trong system prompt: Trong các tình huống chatbot cần hành động cụ thể như gửi email, chuyển cho agent, hoặc trả lời theo cách nhất định, hãy cập nhật system prompt của agent gọi tool để có hướng dẫn cụ thể cho từng trường hợp, ví dụ:

  <case_specific_instructions>
  - Các vấn đề với YOUR_PRODUCT_NAME:
    - Lịch sự yêu cầu người dùng cung cấp tên tài khoản theo định dạng: account.domain.com.
    - Chỉ sau khi người dùng cung cấp tên tài khoản, ngay lập tức sử dụng công cụ "LiveAgent Human Assist" để chuyển cuộc trò chuyện cho Nhân viên Hỗ trợ.
  </case_specific_instructions>
  

Xem Lại Định Kỳ Câu Trả Lời Của Chatbot

Đặc biệt trong những tuần đầu sau khi triển khai, chúng tôi khuyến nghị khách hàng thiết lập thói quen kiểm tra định kỳ các câu trả lời của chatbot để phát hiện các phản hồi sai hoặc chưa tối ưu.

Mẹo: Sử Dụng Gắn Thẻ

Gắn thẻ trực tiếp trong lịch sử chatbot giúp bạn tổ chức và theo dõi các trường hợp đã kiểm tra cũng như những trường hợp cần phân tích hoặc cải thiện thêm.

• Gắn thẻ các cuộc trò chuyện đã kiểm tra để tránh kiểm tra trùng lặp.
• Gắn thẻ các cuộc trò chuyện có vấn đề để dễ dàng tra cứu lại.
• Sử dụng các thẻ như ok, needs review, incorrect, hoặc các thẻ tùy chỉnh phù hợp với nhu cầu của bạn.