

EXAONE 3.5 7.8B Instruct
简介 :
EXAONE-3.5-7.8B-Instruct是由LG AI Research开发的一系列指令调优的双语(英语和韩语)生成模型,参数范围从2.4B到32B。这些模型支持长达32K令牌的长上下文处理,并在真实世界用例和长上下文理解方面展现出最先进的性能,同时在与近期发布的类似大小模型相比,在通用领域保持竞争力。
需求人群 :
目标受众为需要进行长上下文理解和文本生成的研究人员和开发者,特别是在需要处理大量数据和复杂任务时。由于模型支持双语,因此也适合需要英语和韩语文本生成能力的用户。
使用场景
用于生成高质量的英语和韩语文本
在长上下文理解任务中提供先进的性能
在多种真实世界用例中展现出竞争力
产品特色
参数数量(不包括嵌入):6.98B
层数:32
注意力头数:GQA,32个Q头和8个KV头
词汇量:102,400
上下文长度:32,768令牌
支持长上下文处理,最长达32K令牌
在真实世界用例中展现出最先进的性能
使用教程
1. 安装transformers库v4.43或更高版本
2. 使用AutoModelForCausalLM和AutoTokenizer从Hugging Face加载模型和分词器
3. 选择或编写提示(prompt)
4. 使用tokenizer.apply_chat_template方法处理消息并生成输入ID
5. 使用模型的generate方法生成文本
6. 使用tokenizer.decode方法将输出的令牌解码为文本
精选AI产品推荐

Deepmind Gemini
Gemini是谷歌DeepMind推出的新一代人工智能系统。它能够进行多模态推理,支持文本、图像、视频、音频和代码之间的无缝交互。Gemini在语言理解、推理、数学、编程等多个领域都超越了之前的状态,成为迄今为止最强大的AI系统之一。它有三个不同规模的版本,可满足从边缘计算到云计算的各种需求。Gemini可以广泛应用于创意设计、写作辅助、问题解答、代码生成等领域。
AI模型
11.4M
中文精选

Liblibai
LiblibAI是一个中国领先的AI创作平台,提供强大的AI创作能力,帮助创作者实现创意。平台提供海量免费AI创作模型,用户可以搜索使用模型进行图像、文字、音频等创作。平台还支持用户训练自己的AI模型。平台定位于广大创作者用户,致力于创造条件普惠,服务创意产业,让每个人都享有创作的乐趣。
AI模型
8.0M