愛科泰克申請低算力高性能大語言模型領域微調方法專利,有更低的時間複雜度和更好的效果

金融界2025年6月11日消息,國家知識產權局信息顯示,深圳愛科泰克科技有限公司申請一項名爲“一種低算力高性能大語言模型領域微調方法”的專利,公開號CN120124743A,申請日期爲2025年02月。

專利摘要顯示,本發明提供了一種低算力高性能大語言模型領域微調方法,涉及大語言模型技術領域,包括:配置與輸入數據對應的輸出數據;通過大語言模型得到輸出數據,並判斷輸出數據是否滿足期望,並確定輸入數據在不同條件下的條件概率;對輸入數據的條件概率進行分類並分配標記,並根據分配標記,爲每個令牌分配尺度值,構建令牌級損失函數;根據構建的令牌級損失函數,通過前向傳播和反向傳播計算對大語言模型進行調整。本發明通過對不同條件下的各個自然語言token條件概率進行對比,直接將自然語言作爲監督信號,對其中的顯著性標記進行定位並進行尺度賦值,相比其他算法有更低的時間複雜度和更好的效果。

天眼查資料顯示,深圳愛科泰克科技有限公司,成立於2011年,位於深圳市,是一家以從事科技推廣和應用服務業爲主的企業。企業註冊資本100萬人民幣。通過天眼查大數據分析,深圳愛科泰克科技有限公司財產線索方面有商標信息1條,專利信息2條,此外企業還擁有行政許可4個。

本文源自:金融界

作者:情報員