Pango AIPango AI Team
Module 02: Chatbot Admin (Portal)
Module 02 • ChatGPT Doanh Nghiệp

Quản Trị Đánh Giá & Kiểm Toán Hội Thoại (Feedback & Audit)

Vòng lặp phản hồi (Feedback Loop) và kiểm toán ngữ cảnh (Context Audit) là tính năng tối quan trọng của Pango Chatbot Admin, giúp đội ngũ kỹ sư AI và quản trị viên doanh nghiệp theo dõi độ hài lòng, phát hiện câu trả lời chưa chuẩn xác và liên tục tinh chỉnh tri thức cho mô hình.


1. Danh Sách Đánh Giá (Feedback Management)

Màn hình Quản lý đánh giá thu thập toàn bộ các lượt xếp hạng sao (1 đến 5 sao) và nhận xét do người dùng gửi từ giao diện chat hoặc qua API SubmitAiFeedback:

Danh sách đánh giá - Pango Chatbot Admin

Các Khả Năng Nổi Bật

  • Bộ Lọc Nâng Cao: Tìm kiếm theo từ khóa trong câu hỏi, phân loại hình thức đánh giá (Rating sao, Thumbs up/down, Text comment), chọn theo Agent cụ thể và khoảng thời gian tùy chọn.
  • Xem Nhanh Đánh Giá: Hiển thị số sao trực quan, người gửi, thời điểm tạo.
  • Xuất Dữ Liệu Đánh Giá: Nút Xuất dữ liệu đánh giá trích xuất danh sách để tổng hợp KPI chất lượng dịch vụ.

2. Chi Tiết Đánh Giá (Feedback Detail Inspection)

Khi bấm vào nút xem chi tiết của một đánh giá:

Chi tiết đánh giá - Pango Chatbot Admin

Cấu Trúc Thông Tin

  • Cột Phải (Tổng Quan):
    • Tên Agent xử lý (ví dụ: buddy).
    • Loại phản hồi (Rating).
    • Danh tính người dùng và thời điểm gửi.
    • Số sao đánh giá (5 sao).
    • Nút Logs: Cho phép kỹ sư AI mở xem chi tiết kỹ thuật của lượt gọi (prompt tokens, completion tokens, latency thời gian phản hồi, mô hình LLM đã phục vụ).
  • Cột Trái (Nội Dung Tin Nhắn):
    • Hiển thị trực tiếp câu trả lời của AI kèm thẻ sản phẩm trực quan (ví dụ: Tai nghe Bluetooth True Wireless Baseus Bass BC1 Lite Open-Ear, giá bán 590.000đ).

3. Kiểm Toán Toàn Bộ Ngữ Cảnh Hội Thoại (Conversation Context Audit)

Tính năng vượt trội của Pango Chatbot Admin là khả năng tái hiện toàn bộ ngữ cảnh hội thoại dẫn đến phản hồi đó thông qua tab Ngữ cảnh hội thoại:

Kiểm toán toàn bộ ngữ cảnh hội thoại

Lợi Ích Cốt Lõi Cho Doanh Nghiệp

  1. Hiểu Rõ Nguyên Nhân Đánh Giá:
    • Thay vì chỉ nhìn thấy một câu trả lời đơn lẻ bị đánh giá thấp hay cao, quản trị viên có thể đọc toàn bộ cuộc trao đổi trước đó (người dùng đã hỏi những gì, cung cấp thông tin gì).
    • Ví dụ trên hình: Người dùng hỏi "MÁY CHIẾU MINI BEECUBE X2 MAX GEN 5 FULLHD TRẮNG kết nối với điện thoại bằng cách nào", AI đã trả lời chi tiết 2 cách kết nối (Không dây qua AirPlay/Miracast và Có dây qua cáp chuyển đổi HDMI). Nhờ câu trả lời chuẩn xác và hữu ích này, người dùng đã chấm 5 sao hài lòng.
  2. Phát Hiện Ảo Giác (Hallucination) & Sai Lệch Tri Thức:
    • Nếu có đánh giá tiêu cực, kỹ sư RAG có thể truy ngược lại đoạn tài liệu tri thức nào trong Knowledge Base đã dẫn đến câu trả lời chưa đúng, từ đó cập nhật lại tri thức chỉ sau vài phút.
  3. Đảm Bảo Tuân Thủ & Bảo Mật (Compliance):
    • Đảm bảo nhân sự không sử dụng AI để hỏi các dữ liệu nhạy cảm vi phạm chính sách bảo mật nội bộ của doanh nghiệp.