ERNIE-Light-DT-1.0

Baidu

ERNIE-Light-DT-1.0 ওপেন-সোর্স GLM মডেলগুলির উপর ভিত্তি করে তৈরি এবং এতে Baidu Search-এর Lightning লার্জ মডেলের গবেষণার ফলাফল অন্তর্ভুক্ত রয়েছে। এতে Baidu Sparse Attention (BSA) রয়েছে, যা ... দ্বারা উন্নত একটি অনন্য স্পার্স অ্যাটেনশন মেকানিজম।