One Task, Many Interfaces: Simple Cross-Interface Consistency Training Improves LLM Agent Robustness
Post-training binds the competence of an LLM agent to the interface it was trained on. Semantics-preserving perturbations of that interface, such as renaming an action or changing the notation, leave the underlying task unchanged yet make the agent worse at it. Scoring each sample independently means interface randomization only broadens this dependence from a single interface to the training interface distribution, so out-of-distribution perturbations still degrade the agent. We propose Cross-Interface Policy Regularization (CIPR), a self-supervised objective that replaces action names with uninformative identifiers and presents each training sample under two interfaces in which equivalent actions are identified by construction. CIPR penalizes the KL divergence between the action distributions induced under the two interfaces, so the policy behaves consistently across them. We evaluate CIPR in both supervised and reinforcement-learning post-training, where it improves robustness. On agentic function calling, held-out interface perturbations reduce the accuracy of a post-trained agent by nearly 25%, and CIPR recovers 10.5% while leaving accuracy on the unchanged interface intact.
C1 reading
Select any word for its Thai meaning and pronunciation.
แปลไทยทั้งบท
การฝึกอบรมหลังการฝึกอบรม เชื่อมโยงความทำได้ของเจ้าหน้าที่ LLM กับอินเตอร์เฟช ที่เขาได้รับการฝึกอบรม. การสับสนที่อนุรักษ์ความหมายของอินเทอร์เฟสนั้น เช่นการเปลี่ยนชื่อการกระทำหรือการเปลี่ยนแปลงคํานวณ ทำให้งานเบื้องหลังไม่เปลี่ยนแปลง แต่ทำให้ตัวแทนแย่ลง. การให้คะแนนตัวอย่างแต่ละตัวอย่าง โดยอิสระ หมายถึงการเรียงแรนด์มายซ์อินเตอร์เฟส เพียงขยายความขึ้นอยู่กับนี้จากอินเตอร์เฟสเดียวไปยังการกระจายอินเตอร์เฟสการฝึกอบรม.
เราเสนอการปรับปรุงนโยบายข้ามอินเตอร์เฟส (CIPR) เป็นเป้าหมายที่ควบคุมตนเองที่แทนชื่อการกระทำด้วยตัวประชากรที่ไม่เป็นข้อมูล และนําเสนอตัวอย่างการฝึกอบรมแต่ละตัวภายใต้อินเตอร์เฟสสองตัว ซึ่งการดําเนินการที่เท่าเทียมกันถูกระบุโดยการสร้าง. CIPR ทำให้การแยกแยก KL ระหว่างการกระจายการกระทำที่เกิดขึ้นภายใต้สองอินเตอร์เฟส ดังนั้นนโยบายจึงดําเนินการอย่างสม่ําเสมอระหว่างพวกเขา. เราประเมิน CIPR ทั้งในการฝึกอบรมหลังการฝึกอบรมที่ได้รับการดูแลและการฝึกอบรมเสริมเสริมเสริม ซึ่งมันปรับปรุงความแข็งแกร่ง.
ในการเรียกฟังก์ชั่นของหน่วยงาน การปรับระบาดของแหล่งสัมผัสลดความแม่นยําของหน่วยหลังการฝึกซ้อมได้เกือบ 25%, และ CIPR ยืนยัน 10.5% โดยปล่อยความแม่นยําบนแหล่งสัมผัสไม่เปลี่ยนแปลง.
ประโยคและวลีที่ใช้ได้จริงจากเรื่องนี้
Useful phrases from this story
การฝึกอบรมเชื่อมโยงความสามารถของ.
From the storyPost-training binds the competence of an LLM agent to the interface it was trained on.
ได้รับการฝึกอบรม.
From the storyPost-training binds the competence of an LLM agent to the interface it was trained on.
การอนุรักษ์ความผิดปกติของแหล่งสัมผัสนั้น.
From the storySemantics-preserving perturbations of that interface, such as renaming an action or changing the notation, leave the underlying task unchanged yet make the agent worse at it.
เปลี่ยนชื่อการดําเนินการ หรือ เปลี่ยนชื่อการดําเนินการ.
From the storySemantics-preserving perturbations of that interface, such as renaming an action or changing the notation, leave the underlying task unchanged yet make the agent worse at it.
การทํางานที่อยู่เบื้องหลังยังคงไม่เปลี่ยนแปลง.
From the storySemantics-preserving perturbations of that interface, such as renaming an action or changing the notation, leave the underlying task unchanged yet make the agent worse at it.
Save & Review
Only words saved from this story appear here.