需求人群:
"目标受众为机器学习和人工智能领域的开发者和研究人员,他们需要微调大型语言模型以适应特定的应用场景或领域。"
使用场景示例:
微调Llama模型以进行领域特定的问答系统
使用Llama模型在云端进行文本摘要任务
本地部署Llama模型以实现个性化推荐系统
产品特色:
提供微调Meta Llama模型的示例脚本和笔记本
支持在本地、云和本地部署环境中运行Meta Llama
支持Meta Llama 2和3模型
包含新的提示模板和特殊标记
提供模型转换到Hugging Face的指南
组织代码以便于使用和贡献
使用教程:
克隆llama-recipes仓库到本地
安装必要的依赖项,包括PyTorch Nightlies
根据需要安装可选的依赖包
从Hugging Face hub获取Meta Llama模型
按照指南将模型转换为Hugging Face格式
运行示例脚本以开始微调或部署模型
贡献代码或改进仓库
浏览量:13
最新流量情况
月访问量
4.38m
平均访问时长
00:07:17
每次访问页数
6.50
跳出率
38.34%
流量来源
直接访问
51.33%
自然搜索
30.08%
邮件
0.86%
外链引荐
11.05%
社交媒体
6.66%
展示广告
0
截止目前所有流量趋势图
地理流量分布情况
美国
15.94%
中国
15.11%
印度
9.28%
日本
3.94%
德国
3.35%
多语言可控文本到语音合成工具包
ToucanTTS是由德国斯图加特大学自然语言处理研究所开发的多语言且可控的文本到语音合成工具包。它使用纯Python和PyTorch构建,以保持简单、易于上手,同时尽可能强大。该工具包支持教学、训练和使用最前沿的语音合成模型,具有高度的灵活性和可定制性,适用于教育和研究领域。
在浏览器中直接运行先进的机器学习模型。
transformers.js 是一个JavaScript库,旨在为网页提供先进的机器学习能力。它允许用户在浏览器中直接运行预训练的Transformers模型,无需服务器支持。该库使用ONNX Runtime作为后端,支持将PyTorch、TensorFlow或JAX模型转换为ONNX格式。transformers.js 与 Hugging Face 的 transformers Python 库功能等价,提供相似的API,使得开发者能够轻松地将现有代码迁移到网页端。
Surya是一个用于任何语言中准确的逐行文本检测和识别(OCR)的项目。
Surya是一个多语言文档OCR工具包,具有准确的逐行文本检测功能。它在一系列文档和语言上都有效(参见使用和基准测试以获取更多细节)。Surya的命名源自印度太阳神,象征着具有普遍视野。Surya通过Python 3.9+和PyTorch实现,支持多种语言的高效OCR处理,包括图像动画和个性化T2I模型。Surya的特点是其高效性和多语言支持能力。
统一的语言模型评估框架
PromptBench是一个基于Pytorch的Python包,用于评估大型语言模型(LLM)。它为研究人员提供了用户友好的API,以便对LLM进行评估。主要功能包括:快速模型性能评估、提示工程、对抗提示评估以及动态评估等。优势是使用简单,可以快速上手评估已有数据集和模型,也可以轻松定制自己的数据集和模型。定位为LLM评估的统一开源库。
先进的大型语言模型,具备推理和编程能力。
Mistral-Large-Instruct-2407是一个拥有123B参数的先进大型语言模型(LLM),具备最新的推理、知识和编程能力。它支持多语言,包括中文、英语、法语等十种语言,并且在80多种编程语言上受过训练,如Python、Java等。此外,它还具备代理中心能力和先进的数学及推理能力。
快速、多语言支持的OCR工具包
RapidOCR是一个基于ONNXRuntime、OpenVINO和PaddlePaddle的OCR多语言工具包。它将PaddleOCR模型转换为ONNX格式,支持Python/C++/Java/C#等多平台部署,具有快速、轻量级、智能的特点,并解决了PaddleOCR内存泄露的问题。
让任何人的声音听起来调皮/有趣
bleep_that_sht 是一个使用 Python 编写的应用程序,它利用 Whisper 转录模型来转录音频,然后根据用户选择的关键词,使用相应的时间戳来替换为哔声。所有处理都在本地完成,无需上传数据,保护用户隐私。
一站式RAG搜索SDK
Korvus是一个基于Postgres构建的搜索SDK,它将整个RAG(检索增强生成)流程统一到单一的数据库查询中。它提供了高性能、可定制的搜索能力,同时最小化了基础设施的考虑。Korvus利用PostgresML的pgml扩展和pgvector扩展,将RAG流程压缩在Postgres内部。它支持多语言SDK,包括Python、JavaScript、Rust和C,允许开发者无缝集成到现有的技术栈中。
快速构建可靠的网络爬虫工具
Crawlee是一个用于构建可靠网络爬虫的Python库。它由专业的网络爬虫开发者构建,每天用于抓取数百万页面。Crawlee支持JavaScript渲染,无需重写代码即可轻松切换到浏览器爬虫。此外,它还提供自动扩展和代理管理功能,能够基于系统资源智能管理并轮换代理,丢弃那些经常超时或返回网络错误的代理。
AI驱动的网页信息组织工具
Exa是一个为AI应用设计的网页信息组织工具,它通过语义搜索、内容抓取、相似性搜索等功能,帮助用户快速获取所需信息,避免信息过载和错误信息。Exa的语义搜索能够理解语义含义,而不仅仅是关键词匹配,提供更精准的搜索结果。此外,Exa支持从任何网页抓取完整且清洗过的内容,以及通过URL或长文本找到相似结果。Exa还提供了强大的过滤功能,允许用户根据域名、日期范围或数据类别进行搜索。Exa的API支持Python、Javascript和Curl等编程语言,易于集成到现有系统中。
开源版Anthropic Artifacts UI,支持AI代码执行。
Anthropic Power Artifacts是一个开源项目,它复现了Anthropic公司在其Claude聊天应用中的Artifacts用户界面。该项目使用E2B的代码解释器SDK来安全地执行AI生成的代码。E2B提供了一个云沙箱环境,可以安全地运行AI生成的代码,并且能够处理安装库、运行shell命令、执行Python、JavaScript、R以及Nextjs应用程序等。
Python中创建精美表格的库
Great Tables是一个Python库,用于创建美观且功能丰富的表格。它支持Pandas或Polars DataFrame作为数据源,提供了多种格式化选项和自定义功能,非常适合数据分析和报告生成。该库由Rich Iannone和Michael Chow主要维护,采用MIT许可证,强调简洁而强大的设计哲学。
快速使用和评估提示技术
QualityPrompts是一个Python插件,实现了58种不同的提示技术,这些技术来源于OpenAI、Microsoft等机构的调研。它通过提供少量示例来帮助用户快速构建和评估他们的提示。该插件的主要优点是能够显著提高解决数学问题等任务的准确性,并且易于使用和集成。
深入理解深度学习的原理与应用
《Understanding Deep Learning》是一本深入探讨深度学习原理和应用的书籍。它提供了丰富的数学背景知识、监督学习、神经网络的构建与训练等深度学习领域的全面内容。书中提供的Python笔记本练习帮助读者通过实践来加深理解。此外,还有为教师提供的资源,包括图像、幻灯片和教辅材料。
Python封装的Doc2X API,增强PDF处理。
pdfdeal是一个Python封装的Doc2X API工具,它提供了本地PDF处理功能,旨在提高PDF在RAG中的召回率。该工具支持多种输出格式,包括文本、Markdown、PDF等,并且可以自定义OCR语言和使用GPU加速。它还支持Doc2X,该服务每日有500页的免费使用额度,特别擅长表格和公式的识别。
利用知识图谱和文档网络增强语言模型性能
Knowledge Graph RAG 是一个开源的Python库,它通过创建知识图谱和文档网络来增强大型语言模型(LLM)的性能。这个库允许用户通过图谱结构来搜索和关联信息,从而为语言模型提供更丰富的上下文。它主要应用于自然语言处理领域,尤其是在文档检索和信息抽取任务中。
快速构建自定义后台操作软件的开发者平台
Dropbase是一个为开发者设计的平台,旨在快速且无痛地构建自定义的内部工具和后台操作软件。它通过自然语言声明应用、UI预览、拖放调整、输入行为生成代码、代码运行和追踪调试等功能,帮助开发者摆脱低代码/无代码开发的局限。Dropbase支持与现有的CRM、计费和支持工具集成,提供如管理面板、审批仪表板、数据编辑器、云控制台和通知系统等多样化的内部软件组件,并且完全使用Python编写,提供代码的灵活性和重用性。
一个用于Lumina模型的Python包装器
ComfyUI-LuminaWrapper是一个开源的Python包装器,用于简化Lumina模型的加载和使用。它支持自定义节点和工作流,使得开发者能够更便捷地集成Lumina模型到自己的项目中。该插件主要面向希望在Python环境中使用Lumina模型进行深度学习或机器学习的开发者。
一个交互式绘图应用,用于数学方程的绘制和计算。
AI Math Notes 是一个开源的交互式绘图应用程序,允许用户在画布上绘制数学方程。应用程序利用多模态大型语言模型(LLM)计算并显示结果。该应用程序使用Python开发,利用Tkinter库创建图形用户界面,使用PIL进行图像处理。灵感来源于Apple在2024年全球开发者大会(WWDC)上展示的'Math Notes'。
使用Dream Machine API生成视频的Python脚本。
Dream Machine API是一个Python脚本,使用Dream Machine API来生成视频,并异步检查视频生成状态,输出最新生成的视频链接。它需要Python 3.7+环境和requests、aiohttp库支持。用户需要登录LumaAI的Dream Machine网站获取access_token以使用该脚本。
创建和操作具有循环、记忆和工具的认知语言代理。
Mentals AI是一个工具,旨在通过简单的Markdown语法创建和操作具有循环、记忆和各种工具的代理。它允许用户专注于代理的逻辑,而无需编写Python或其他语言的底层代码,从而重新定义了未来AI应用的基础框架。
AI对编程的辅助,提升代码效率。
aider 是一款集成在终端的AI配对编程工具,它允许开发者与大型语言模型(LLMs)进行配对编程,以编辑本地Git仓库中的代码。aider 与 GPT-4o 和 Claude 3 Opus 等模型配合使用效果最佳,并且可以连接到几乎所有的LLM。它通过自动提交代码变更,并使用合理的提交信息来帮助开发者提高编程效率。aider 支持多种流行编程语言,包括 Python、JavaScript、TypeScript 等,并且能够处理大型代码库中的协调变更。
构建与Writer全栈生成式AI平台完全集成的AI应用和工作流程。
Writer AI Studio是一个全栈生成式AI平台,它允许用户构建与Writer平台完全集成的AI应用和工作流程。它提供了无代码工具,使任何人都能够构建自动化重复任务、生成资产或回答公司数据问题的应用。此外,它还提供了开源的Python框架Writer Framework,以及Writer API,用于将Writer的生成式AI技术集成到您自己的应用程序或服务中。
为Windows、macOS和Ubuntu提供GPT计算机助手
gpt-computer-assistant是一个为Windows、macOS和Ubuntu操作系统设计的应用程序,旨在提供一个替代的ChatGPT应用。它允许用户通过Python库轻松安装,并计划提供原生安装脚本(.exe)。该产品由Upsonic Tiger支持,是一个为大型语言模型(LLM)代理提供功能中心的平台。产品的主要优点包括跨平台兼容性、易于安装和使用,以及未来将支持本地模型。
将炫酷的视错觉动画引入ComfyUI
ComfyUI Animated Optical Illusions 是一款为ComfyUI用户界面设计的视觉插件,它通过动画视错觉效果,增强了用户的视觉体验,为界面设计带来了创新和趣味性。该插件采用Python语言开发,具有高度的可定制性和互动性,适合那些寻求在界面设计中添加新颖元素的开发者和设计师。
一款支持80+编程语言的AI代码生成模型
Codestral-22B-v0.1是由Mistral AI Team开发的大型语言模型,它经过了80多种编程语言的训练,包括Python、Java、C、C++、JavaScript和Bash等。该模型能够根据指令生成代码,或对代码片段进行解释、重构等。它还支持Fill in the Middle (FIM)功能,用于预测代码中的中间部分,特别适合软件开发工具的插件使用,如VS Code。该模型目前没有内容审查机制,但开发团队正在寻求社区合作,以实现在需要内容审查的环境中部署。
高效的检索增强生成研究工具包
FlashRAG是一个Python工具包,用于检索增强生成(RAG)研究的复现和开发。它包括32个预处理的基准RAG数据集和12种最先进的RAG算法。FlashRAG提供了一个广泛且可定制的框架,包括检索器、重排器、生成器和压缩器等RAG场景所需的基本组件,允许灵活组装复杂流程。此外,FlashRAG还提供了高效的预处理阶段和优化的执行,支持vLLM、FastChat等工具加速LLM推理和向量索引管理。
在本地使用 LLMs 根据自然语言提示生成音乐。
MusicGPT 是一款允许在任何平台上以高性能方式在本地运行最新音乐生成 AI 模型的应用程序。它支持文本条件音乐生成、旋律条件音乐生成以及不确定长度 / 无限音乐流。产品优势在于无需安装重型依赖如 Python 或机器学习框架,能够本地运行 AI 模型,提供自然语言提示生成音乐的功能。
© 2024 AIbase 备案号:闽ICP备08105208号-14