完善資料讓更多小伙伴認識你，還能領取20積分哦，立即完善>
標簽 > 大模型
以大模型作為基礎模型支撐AI產(chǎn)業(yè)應用邏輯已經(jīng)被證明實用性，AI大模型為AI落地應用提供了一種通用化的解決方案；各自各樣參數(shù)不一、面向不同行業(yè)、面向不同任務的“大模型”也陸續(xù)發(fā)布，大模型已經(jīng)成為整個AI 界追逐的寵兒，AI大模型有效果好、泛化性強、研發(fā)流程標準化程度高等特點。
文章：3348個 瀏覽：4864次 帖子：22個
為什么transformer性能這么好？Transformer的上下文學習能力是哪來的？
為什么 transformer 性能這么好？它給眾多大語言模型帶來的上下文學習 (In-Context Learning) 能力是從何而來？在人工智能領...
InfiniBand和RoCEv2網(wǎng)絡簡介及解決方案
超高帶寬、超低延遲、超高可靠，這是大模型訓練對于網(wǎng)絡的要求。
2023-09-22 標簽：數(shù)據(jù)中心AITCP 1.2萬 0
聽圖森CTO王乃巖淺談從L2到L4商用車自動駕駛中的規(guī)?；?、可靠性與成本
算法冗余：針對單點算法失效的問題，圖森未來將整車運行的算法分成兩大類，即Data driven算法和Principle based算法；Data dri...
文本摘要，作為自然語言生成（NLG）中的一項任務，主要用來將一大段長文本壓縮為簡短的摘要，例如新聞文章、源代碼和跨語言文本等多種內(nèi)容都能用到。
數(shù)據(jù)標注（Data Annotations）是指對收集到的、未處理的原始數(shù)據(jù)或初級數(shù)據(jù)，包括語音、圖片、文本、視頻等類型的數(shù)據(jù)進行加工處理，并轉(zhuǎn)換為機器...
【比特熊充電?！繉崙?zhàn)演練構(gòu)建LLM對話引擎
大模型時代，安全問題不容小覷。但如果把大模型比作孫悟空，那 NVIDIA NeMo Guardrails 就是“安全護欄”，可以輕松的為基于 LLM 的...
一文詳解6G內(nèi)生AI架構(gòu)及關鍵技術(shù)
6G作為下一代移動通信技術(shù)，正在成為全球范圍內(nèi)通信行業(yè)的重要研究熱點。6G內(nèi)生AI架構(gòu)，將人工智能與無線網(wǎng)絡緊密結(jié)合，有望為未來的通信帶來革命性的改變。
2023-09-18 標簽：無線網(wǎng)絡AI人工智能 1.9k 0
大模型是一個實驗工程，涉及數(shù)據(jù)清洗、底層框架、算法策略等多個工序，每個環(huán)節(jié)都有很多坑，因此知道如何避坑和技術(shù)選型非常重要，可以節(jié)省很多算力和時間。
大模型訓練為什么不能用4090顯卡，GPU訓練性能和成本對比
為什么？一般有 tensor parallelism、pipeline parallelism、data parallelism 幾種并行方式，分別在模...
大模型未來的產(chǎn)業(yè)發(fā)展趨勢和挑戰(zhàn)是什么
一般而言，大模型(Large Language Models)指的是包含超大規(guī)模參數(shù)的神經(jīng)網(wǎng)絡模型。大模型通常能夠?qū)W習到更細微的模式和規(guī)律，具有更強的泛...
2023-09-13 標簽：神經(jīng)網(wǎng)絡語音識別人工智能 1.3k 0
開源大模型FLM-101B：訓練成本最低的超100B參數(shù)大模型
近期，一支來自中國的研究團隊正是針對這些問題提出了解決方案，他們推出了FLM-101B模型及其配套的訓練策略。FLM-101B不僅大幅降低了訓練成本，而...
LLaMA微調(diào)顯存需求減半，清華提出4比特優(yōu)化器
從 GPT-3，Gopher 到 LLaMA，大模型有更好的性能已成為業(yè)界的共識。但相比之下，單個 GPU 的顯存大小卻增長緩慢，這讓顯存成為了大模型訓...
揭秘英偉達A100、A800、H100、H800 GPU如何實現(xiàn)高性能大模型的百倍訓練加速
摘要：本文主要介紹大模型的內(nèi)部運行原理、我國算力發(fā)展現(xiàn)狀。大模型指具有巨大參數(shù)量的深度學習模型，如GPT-4。其通過在大規(guī)模數(shù)據(jù)集上進行訓練，能夠產(chǎn)生更...
用LLM根據(jù)用戶query生成k個“假答案”。（大模型生成答案采用sample模式，保證生成的k個答案不一樣，不懂LLM生成答案原理的同學可以看我這篇文...
2023-09-08 標簽：向量數(shù)據(jù)集大模型 3k 0
一般而言，越復雜的任務，越充裕的資源，應該是各自用更加專業(yè)的方案來做各自的上限才會比較高，大模型能提供的，是一個基礎的、快速的、zero shot或者f...
AI Agents會消除人與AI系統(tǒng)的大量繁瑣交互已經(jīng)板上釘釘，正在發(fā)生
這種編碼方式又叫做 Sinusoidal編碼 。直覺上看，第個位置的表征向量維度是 ，這個向量的奇數(shù)位置元素使用余弦值，偶數(shù)位置元素使用正弦值。
對于位置編碼，常規(guī)的做法是在計算 query，key 和 value 向量之前，會計算一個位置編碼向量 加到詞嵌入 上，位置編碼向量 同樣也是 維向量，...
2023-09-05 標簽：向量旋轉(zhuǎn)編碼大模型 1.6萬 0
基于Tansformer架構(gòu)的ChatGPT原理解析
ChatGPT模型發(fā)布后，因其流暢的對話表達、極強的上下文存儲、豐富的知識創(chuàng)作及其全面解決問題的能力而風靡全球，刷新了大眾對人工智能的認知。提示學習（P...
換一批
編輯推薦廠商產(chǎn)品技術(shù)軟件/工具OS/語言教程專題
| 電機控制 | DSP | 氮化鎵 | 功率放大器 | ChatGPT | 自動駕駛 | TI | 瑞薩電子 |
| BLDC | PLC | 碳化硅 | 二極管 | OpenAI | 元宇宙 | 安森美 | ADI |
| 無刷電機 | FOC | IGBT | 逆變器 | 文心一言 | 5G | 英飛凌 | 羅姆 |
| 直流電機 | PID | MOSFET | 傳感器 | 人工智能 | 物聯(lián)網(wǎng) | NXP | 賽靈思 |
| 步進電機 | SPWM | 充電樁 | IPM | 機器視覺 | 無人機 | 三菱電機 | ST |
| 伺服電機 | SVPWM | 光伏發(fā)電 | UPS | AR | 智能電網(wǎng) | 國民技術(shù) | Microchip |
| Arduino | BeagleBone | 樹莓派 | STM32 | MSP430 | EFM32 | ARM mbed | EDA |
| 示波器 | LPC | imx8 | PSoC | Altium Designer | Allegro | Mentor | Pads |
| OrCAD | Cadence | AutoCAD | 華秋DFM | Keil | MATLAB | MPLAB | Quartus |
| C++ | Java | Python | JavaScript | node.js | RISC-V | verilog | Tensorflow |
| Android | iOS | linux | RTOS | FreeRTOS | LiteOS | RT-THread | uCOS |
| DuerOS | Brillo | Windows11 | HarmonyOS |
關注我們的微信
下載發(fā)燒友APP
電子發(fā)燒友觀察
版權(quán)所有 ? 湖南華秋數(shù)字科技有限公司
長沙市望城經(jīng)濟技術(shù)開發(fā)區(qū)航空路6號手機智能終端產(chǎn)業(yè)園2號廠房3層（0731-88081133）
電子發(fā)燒友 （電路圖） 湘公網(wǎng)安備43011202000918
工商網(wǎng)監(jiān)
湘ICP備2023018690號-1
