Jais

这是一个130亿参数的预训练双语大型语言模型,支持阿拉伯语和英语,在720亿阿拉伯语标记和2790亿英语/代码标记的数据集上进行训练。阿拉伯语数据迭代了1.6个时代(相比英语/代码的1个时代),总计3950亿个标记进行训练。该模型基于Transformer解码器专用架构(GPT-3),使用SwiGLU非线性激活函数。它实现了ALiBi位置嵌入,可以外推到长序列长度,提供改进的上下文处理和模型精度。

需求人群:

["研究用途","商业用途,如聊天助手、客户服务等"]

使用场景示例:

用作阿拉伯语自然语言处理研究的基础模型

开发集成了阿拉伯语功能的应用程序

针对聊天助手等下游任务进行微调

产品特色:

支持阿拉伯语和英语的生成式对话

可针对特定下游任务进行微调

提供上下文感知能力

支持长序列生成

浏览量:3

s1785318098921236

打开站点

构建AI去赚钱
s1785341518918206
网站流量情况

最新流量情况

月访问量

23862.08k

平均访问时长

00:04:49

每次访问页数

5.71

跳出率

48.10%

流量来源

直接访问

46.60%

自然搜索

31.61%

邮件

0.81%

外链引荐

12.76%

社交媒体

8.21%

展示广告

0

截止目前所有流量趋势图

地理流量分布情况

美国

13.90%

中国

12.86%

印度

6.58%

俄罗斯

4.23%

法国

3.42%

类似产品

© 2024     AIbase    备案号:闽ICP备2023012347号-1

隐私政策

用户协议

意见反馈 网站地图