代码生成模型的高效微调、推理和评估工具,专为处理代码生成任务的挑战而设计,提供显著的性能提升,包括高效的注意力实现、极速推理和简化的评估流程

FastCode | #工具
高性能并发内容寻址磁盘缓存工具,为 Rust 语言提供同步和异步 API 支持的缓存系统,优化异步操作,适用于需要高速数据访问和缓存管理的场景

cacache |#工具
自动化Python到Mojo代码转换工具,可将Python代码自动转换为Mojo编程语言,支持基础数据类型转换及函数和类结构转换,适用于需要将Python代码迁移到Mojo语言的开发者

py2mojo | #工具
大型语言模型资源集合:为Dan Becker和Hamel Husain举办的“精通大型语言模型:端到端微调和部署”研讨会聚合的资源,包含算法、微调、模型、多模态、部署等方面的内容
树状目录结构命令行工具,提供现代化的文件目录展示,支持git忽略规则、自定义别名、彩色输出,增强了经典的tree命令

tre | #命令行 #工具
持续更新的中文指令微调数据集,支持双语微调和数据修正。

本数据集包括中文和英文的混合数据集,方便双语微调,以及后续做持续的数据修正。

原始的Alpaca英文数据集也存在不少的问题,个别的数学类的sample是错的,有少部分output字段需要修正,一些的标签没有对齐等。本数据集会对原始的数据集进行修改和修正。再此基础上,翻译出对应的中文版本,中文版基本是原始sample的翻译,但是对于一些比如押韵类、时态类的一些instruction,直接翻译导致韵脚丢失,时态不一致等。需要对应的进行人工改写。主要分为以下几个方面:

修改原始英文数据集的一些问题
翻译为中文数据集
调整直译导致的一些sample
code等一些特殊的输出不进行翻译
对齐一些特殊的标签 或者拒绝生成等输出

Alpaca中文指令微调数据集 | #数据集
Box64Droid:在Android上运行x86_64应用程序,支持Box64、Box86、Wine Stable 8.0、DXVK、D8VK,原为Box4Droid的Box64分支
Awesome-VLM-AD-ITS:自动驾驶与智能交通系统中的视觉语言模型研究,包含最新研究进展和论文,涵盖感知理解、导航规划、决策控制等多个领域
TiledCUDA:高效的CUDA核模板库,提供cutlass CuTe的封装,实现更高效的融合操作 | #模板
minbpe:用于大型语言模型(LLM)分词的简洁干净的字节对编码(BPE)算法实现,支持自定义训练和与GPT-4分词器的比较验证
Make-An-Audio 2音频生成助手:基于文本条件的扩散概率模型,能生成高保真音频,适用于文本到音频的生成任务,提供预训练模型和开源实现
Firebase Genkit:AI驱动应用开发框架,支持构建、测试、部署和监控AI功能,优化云环境和代码中心设计,免费开源,集成Firebase或Google Cloud服务,支持TypeScript和Go语言 | #框架
KVCachePapers:深度学习领域中键值缓存技术的研究论文集合,专注于Transformer模型解码效率和内存优化,促进模型性能提升和资源优化
抹茶CSS:一个纯CSS的语义化样式库,用于快速原型设计和简化网页开发流程,无需JavaScript和复杂配置
Back to Top