paint-brush
Sử dụng công cụ không có lỗi và có thể khái quát hóa cho LLM: Phụ lụctừ tác giả@textmodels
131 lượt đọc

Sử dụng công cụ không có lỗi và có thể khái quát hóa cho LLM: Phụ lục

từ tác giả Writings, Papers and Blogs on Text Models1m2024/06/02
Read on Terminal Reader

dài quá đọc không nổi

Các nhà nghiên cứu đề xuất TOOLDEC, một giải mã được hướng dẫn bằng máy ở trạng thái hữu hạn cho LLM, giúp giảm lỗi và cải thiện việc sử dụng công cụ.
featured image - Sử dụng công cụ không có lỗi và có thể khái quát hóa cho LLM: Phụ lục
Writings, Papers and Blogs on Text Models HackerNoon profile picture
0-item

tác giả:

(1) Kexun Zhang, UC Santa Barbara và đóng góp bình đẳng;

(2) Hongqiao Chen, Trường Trung học Northwood và đóng góp bình đẳng;

(3) Lei Li, Đại học Carnegie Mellon;

(4) William Yang Wang, UC Santa Barbara.

Bảng liên kết

A. PHỤ LỤC

A.1 MÃ PSEUDO CỦA THUỐC GIẢI MÃ

A.2 TỔNG HỢP TOOLKENGPT CHO CÁC CÔNG CỤ MỚI CHƯA BIẾT

Hình 6: Khi lệnh gọi công cụ bắt đầu, TOOLDEC sẽ đưa một dấu nhắc đặc biệt (văn bản màu xanh) vào ngữ cảnh để tạo tên công cụ.

A.3 VÍ DỤ VỀ TOLDEC LOẠI BỎ LỖI LIÊN QUAN ĐẾN CÔNG CỤ

Trong phần này, chúng tôi trình bày các ví dụ về TOOLDEC ngăn ngừa các lỗi liên quan đến công cụ trên nhiều đường cơ sở khác nhau. Đường cơ sở được hiển thị ở cột bên trái và TOOLDEC được hiển thị ở bên phải.





Hình 7: TOOLDEC có thể ngăn chặn lỗi tên hàm, lỗi đối số hàm và cú pháp ReAct không hợp lệ trên ToolLLM.


Hình 8: TOOLDEC có thể loại bỏ các lỗi phổ biến liên quan đến công cụ cho các mô hình được tinh chỉnh.

A.4 VÍ DỤ VỀ QUAN HỆ KAMEL

Bảng 6: Ví dụ về mối quan hệ KAMEL


Bài viết này có sẵn trên arxiv theo giấy phép CC 4.0 DEED.