Circuit Hypernetworks for Quantum-Augmented Diffusion Language Models

Nghiên cứu giới thiệu HyperQ, phương pháp thêm các nhánh phần dư lượng tử được điều kiện hóa theo token vào mô hình ngôn ngữ khuếch tán mặt nạ đóng băng. Một hypernetwork mạch nhẹ phát ra các góc quay, lực ghép nối và trục đo cụ thể cho từng token trong một cấu trúc mạch thưa thớt được chia sẻ. Biểu thức cổ điển chính xác cho phép chi phí đánh giá tăng tuyến tính theo số lượng qubit, hỗ trợ các mạch từ 16 đến 64 qubit trong xương sống 1,1 tỷ tham số. Kết quả cho thấy việc tăng độ rộng mạch nâng điểm trung bình từ 47,65 lên 54,30, vượt qua các baseline thông thường và fine-tuned trên ít dữ liệu hơn.

Across downstream benchmarks, increasing circuit width raises the average score from 47.65 to 54.30.

At 64 qubits, HyperQ exceeds the backbone and its low-rank-adapted counterpart by 4.71 and 3.67 points, respectively.

HyperQ is fine-tuned on 20,000 prompt-response pairs, compared with 200,000 for the classical baselines.