完善資料讓更多小伙伴認識你，還能領(lǐng)取20積分哦，立即完善>
標(biāo)簽 > 語言模型
文章：546個 瀏覽：10782次 帖子：4個
從原理到代碼理解語言模型訓(xùn)練和推理，通俗易懂，快速修煉LLM
要理解大語言模型（LLM），首先要理解它的本質(zhì)，無論預(yù)訓(xùn)練、微調(diào)還是在推理階段，核心都是next token prediction，也就是以自回歸的方式...
嘉楠開源通用大語言模型Toucan中的INT4量化技術(shù)解析
ChatGPT與其之后不斷涌現(xiàn)的大語言模型（LLM）迅速席卷了整個時代。隨著計算機對人類自然語言的領(lǐng)悟程度突飛猛進，我們與計算機的交互方式正在迅速而深刻...
首個中文醫(yī)學(xué)知識LLM：真正的賽華佗—華駝(HuaTuo)
通過醫(yī)學(xué)知識圖譜和 GPT 3.5 API 構(gòu)建了中文醫(yī)學(xué)指令數(shù)據(jù)集，并在此基礎(chǔ)上對 LLaMA 進行了指令微調(diào)，提高了 LLaMA 在醫(yī)療領(lǐng)域的問答效果。
LLM in Medical Domain: 一文速覽大語言模型在醫(yī)學(xué)領(lǐng)域的應(yīng)用
由于在生成長文本的數(shù)據(jù)集上，F(xiàn)lan-PaLM和臨床醫(yī)生的結(jié)果顯示出一定gap。本文提出了使用Instruction Prompt Tuning對Fla...
2023-06-15 標(biāo)簽：語言模型數(shù)據(jù)集大模型 2243 0
知識管理涉及到用于在組織中捕獲、存儲和共享知識的流程和技術(shù)。在聊天機器人設(shè)計的背景下，知識管理可以幫助確保聊天機器人能夠訪問廣泛的相關(guān)信息，并可以為用戶...
三步完成在英特爾獨立顯卡上量化和部署ChatGLM3-6B模型
ChatGLM3 是智譜 AI 和清華大學(xué) KEG 實驗室聯(lián)合發(fā)布的新一代對話預(yù)訓(xùn)練模型。ChatGLM3-6B 是 ChatGLM3 系列中的開源模型...
本節(jié)目標(biāo)是通過OpenAI系列論文閱讀細窺ChatGPT的主要原理，其先進的工作脈絡(luò)可以概括為下圖。從依賴往上追溯需要了解Codex 和 instruc...
2023-04-11 標(biāo)簽：語言模型深度學(xué)習(xí)ChatGPT 2187 0
雖然ChatGPT并非是為了專門修改bug而生，但自打它問世以來，不少網(wǎng)友們都發(fā)現(xiàn)它是具備這項能力的。因此研究人員為了摸清ChatGPT到底能修改bug...
具體來說，我們以多項選擇的常識推理作為示例任務(wù)，因為常識推理任務(wù)是一類可能性 (plausible) 的任務(wù)，每個答案都是可能成立的，只是正確答案成立的...
面向表格數(shù)據(jù)的推理任務(wù)，在計算機領(lǐng)域，特別是自然語言處理（Natural Language Processing，NLP）領(lǐng)域的研究中扮演著重要角色[1...
語言模型性能評估必備下游數(shù)據(jù)集：ZeroCLUE/FewCLUE與Chinese_WPLC數(shù)據(jù)集
零樣本學(xué)習(xí)是AI識別方法之一。簡單來說就是識別從未見過的數(shù)據(jù)類別，即訓(xùn)練的分類器不僅僅能夠識別出訓(xùn)練集中已有的數(shù)據(jù)類別， 還可以對于來自未見過的類別的數(shù)...
2023-03-27 標(biāo)簽：分類器語言模型數(shù)據(jù)集 2139 0
一種完全由LLM + 啟發(fā)式搜索算法結(jié)合的TOT算法
今天分享一篇普林斯頓大學(xué)的一篇文章，Tree of Thoughts: Deliberate Problem Solving with Large La...
因為直接對原是文本進行數(shù)據(jù)增強，很難保證維持原始的文本語義，因此可以通過在語義空間上進行隱式數(shù)據(jù)增強，簡單列出幾種方法：
2022-09-15 標(biāo)簽：數(shù)據(jù)語言模型nlp 2121 0
隨著大規(guī)模預(yù)訓(xùn)練語言模型（LLM）能力的不斷提升，in-context learning（ICL）逐漸成為自然語言處理領(lǐng)域一個新的范式。
? 本篇內(nèi)容是對于ACL‘23會議上陳丹琦團隊帶來的Tutorial所進行的學(xué)習(xí)記錄，以此從問題設(shè)置、架構(gòu)、應(yīng)用、挑戰(zhàn)等角度全面了解檢索增強的語言模型，...
基礎(chǔ) LLM 基本信息表，GPT-style 表示 decoder-only 的自回歸語言模型，T5-style 表示 encoder-decoder ...
CarperAI 是EleutherAI研究小組的一個新實驗室，其任務(wù)是“通過強化學(xué)習(xí)提高大型語言模型 (LLM) 的性能和安全性?！?CarperAI...
LLM（Large Language Model）是指大型語言模型，它們是一類使用深度學(xué)習(xí)技術(shù)構(gòu)建的自然語言處理（NLP）模型。LLM模型可以處理各種語...
英特爾銳炫顯卡運行類ChatGPT的開源大語言模型(LLM)Dolly 2.0解讀
人類偏好強化學(xué)習(xí)Reinforcement learning with human preferences（RLHF）和 InstructGPT 等技術(shù)...
有哪些省內(nèi)存的大語言模型訓(xùn)練/微調(diào)/推理方法？
首先，我們需要了解如何根據(jù)參數(shù)量估計模型大致所需的 RAM，這在實踐中有很重要的參考意義。我們需要通過估算設(shè)置 batch_size，設(shè)置模型精度，選擇...
換一批
編輯推薦廠商產(chǎn)品技術(shù)軟件/工具OS/語言教程專題
| 電機控制 | DSP | 氮化鎵 | 功率放大器 | ChatGPT | 自動駕駛 | TI | 瑞薩電子 |
| BLDC | PLC | 碳化硅 | 二極管 | OpenAI | 元宇宙 | 安森美 | ADI |
| 無刷電機 | FOC | IGBT | 逆變器 | 文心一言 | 5G | 英飛凌 | 羅姆 |
| 直流電機 | PID | MOSFET | 傳感器 | 人工智能 | 物聯(lián)網(wǎng) | NXP | 賽靈思 |
| 步進電機 | SPWM | 充電樁 | IPM | 機器視覺 | 無人機 | 三菱電機 | ST |
| 伺服電機 | SVPWM | 光伏發(fā)電 | UPS | AR | 智能電網(wǎng) | 國民技術(shù) | Microchip |
| Arduino | BeagleBone | 樹莓派 | STM32 | MSP430 | EFM32 | ARM mbed | EDA |
| 示波器 | LPC | imx8 | PSoC | Altium Designer | Allegro | Mentor | Pads |
| OrCAD | Cadence | AutoCAD | 華秋DFM | Keil | MATLAB | MPLAB | Quartus |
| C++ | Java | Python | JavaScript | node.js | RISC-V | verilog | Tensorflow |
| Android | iOS | linux | RTOS | FreeRTOS | LiteOS | RT-THread | uCOS |
| DuerOS | Brillo | Windows11 | HarmonyOS |
關(guān)注我們的微信
下載發(fā)燒友APP
電子發(fā)燒友觀察
版權(quán)所有 ? 湖南華秋數(shù)字科技有限公司
長沙市望城經(jīng)濟技術(shù)開發(fā)區(qū)航空路6號手機智能終端產(chǎn)業(yè)園2號廠房3層（0731-88081133）
電子發(fā)燒友 （電路圖） 湘公網(wǎng)安備43011202000918
工商網(wǎng)監(jiān)
湘ICP備2023018690號-1
