现代数据库不够直观,关系型表格设计复杂且难以扩展,图数据库又难以直接操作,开发者常常在两者之间左右为难。

Gel 是一个全新的图关系型数据库,融合了关系数据库、图数据库和 ORM 的优点,采用更贴近现代编程思维的「类型+链接」模型,不再依赖传统的外键和表结构。| #数据库

它用简洁易懂的类型定义替代了复杂的表结构,支持强类型、索引、约束、计算属性和存储过程,还带来创新的链接属性和顶级 JSON 支持。

Gel 的查询语言 EdgeQL 重新设计了 SQL,返回结构化对象,天然支持深度关联查询,无需繁琐的 JOIN,查询嵌套和子查询也变得简单优雅。

关键特性:

- 类型驱动的 schema,易读易写,符合现代编程习惯
- 支持多语言客户端,配套 CLI 工具,开发体验极佳
- 强大且灵活的 EdgeQL 查询语言,支持复杂数据操作
- 支持数据迁移和管理,内置云端托管方案
- 兼具 ORM 和数据库功能,减少中间层复杂度

适合需要处理复杂关联数据、追求高效开发的团队和个人,让数据库设计和使用回归本质,助力下一代应用开发
SpatialVID:突破视频空间理解瓶颈的超大规模、多维度数据集
| #数据集

• 收录21000+小时野外视频,经过层级筛选提纯,生成270万片段,涵盖7089小时动态内容,规模远超现有公开数据集。
• 每帧视频均含详尽空间标注:相机位姿、深度图、动态遮罩、结构化描述及运动指令,助力动态场景的三维重建与理解。
• 精细注释丰富真实世界多样性,提升模型泛化能力与实际应用效果,填补真实动态场景高质量大规模数据空白。
• 提供完整开源代码与训练权重,支持一键环境搭建与全流程自动化:评分、注释、描述生成,方便研究复现与二次开发。
• 兼容多款主流3D视觉模型与分割工具,基于Apache-2.0协议,科研与商业均可灵活使用。
• 配套下载脚本支持HuggingFace及YouTube原始视频获取,方便快速构建定制训练集。
TexVerse:一个涵盖超85万高质量3D模型及高分辨率材质的大型开放数据集,专为视觉计算、图形学研究与应用打造。| #数据集

• 数据规模:858,669个独特3D模型,包含158,518个基于物理渲染(PBR)材质模型,支持2K、4K、8K超高清纹理。
• 多样变体:每个模型含所有高分辨率变体,累计1,659,097个3D实例,满足细粒度需求。
• 动画与骨骼:专门子集包含69,138个绑定骨骼模型与54,430个动画模型,保留用户原始文件格式,确保骨骼与动画完整性。
• 细致标注:涵盖整体特征、结构组件及精细特征,便于深入分析与训练。
• 开放授权:所有模型均采用Creative Commons许可,支持广泛共享与再利用。
• 下载方式:高分辨率纹理集中托管于TexVerse,1K纹理另有独立资源,动画与骨骼数据联合托管,资源详见metadata文件。

TexVerse为三维内容创作与AI视觉应用提供了坚实数据基础,是推动高精度3D理解与生成的宝贵资源。
一个专门面向长视频生成的电影级数据集,特点是包含完整电影长度的视频、连贯的故事情节和多场景叙事,确保角色外观和音频在不同场景中的一致性,并提供分层的数据结构,包含高层电影信息和详细的镜头级描述

MovieBench | #数据集
4篇系列博客介绍矢量数据库 | link | #数据库

Vector databases (Part 1): 它们各自的不同之处在哪里?
Vector databases (Part 2): 了解其内部结构
Vector databases (Part 3): 并非所有索引都是一样的
Vector databases (Part 4): 分析权衡
数据科学项目模板,重点是易复现和易维护

该模板允许你:

给你的项目创建一个可读的结构
提交代码时自动运行测试
在运行时强制执行类型提示
提交前检查代码中的问题
有效地管理项目中的依赖关系
为可重复的任务创建简短易读的命令
仅重新运行管道的修改组件
自动记录你的代码
观察并自动化你的代码

项目地址 | #模板 #数据科学
一个用于传输中的嵌套、非结构化、多模态数据的库,包括文本、图像、音频、视频、3D 网格等。它允许深度学习工程师使用 Pythonic API 高效地处理、嵌入、搜索、推荐、存储和传输多模态数据。

🚪 跨/多模态世界的大门:用于表示复杂/混合/嵌套文本、图像、视频、音频、3D 网格数据的超表现力数据结构。吉娜的基础数据结构,CLIP-即服务,DALL·E流,迪斯科艺术等

🧑‍🔬 数据科学强国:通过CPU/GPU上的Torch/TensorFlow/ONNX/PaddlePaddle,大大加快数据科学家在嵌入、k-NN匹配、查询、可视化和评估方面的工作。

🚡 传输中的数据:针对网络通信进行了优化,随时可以在线连接,在 Protobuf、bytes、base64、JSON、CSV、DataFrame 中进行快速和压缩的序列化。非常适合流式传输和内存不足数据。

🔎 一站式k-NN:主流矢量数据库的统一一致的API,允许最近的邻居搜索,包括Elasticsearch,Redis,ANNLite,Qdrant,Weaviate。

👒 对于现代应用程序:GraphQL 支持使您的服务器在请求和响应时具有多功能性;内置的数据验证和 JSON 架构 (OpenAPI) 可帮助您构建可靠的 Web 服务。

🐍 Pythonic 体验:设计得像 Python 列表一样简单。如果你知道如何Python,你就知道如何DocArray。直观的习语和类型注释简化了您编写的代码。

🛸 与IDE集成:在Jupyter笔记本和Google Colab上实现漂亮的打印和可视化;PyCharm & VS Code 中的全面自动完成和类型提示。

DocArray由三个简单的概念组成:

文档:一种数据结构,用于轻松表示嵌套的非结构化数据。
DocumentArray:用于高效访问、操作和理解多个文档的容器。
数据类:用于直观地表示多模态数据的高级 API。

DocArray | #数据库
一个稳定、快速、内嵌的 NoSQL 数据库,支持多种数据结构,包含 String、List、Hash、Set、Sorted Set。类似于 Redis,但是可以选择将 value 存储到磁盘中。

这也是个教学项目,在b站有教学《使用 Go 写一个数据库》 系列视频,共6期 ​​​

主要特性:

兼容 Redis 协议
支持丰富的数据结构,包含 String、List、Hash、Set、Sorted Set
内嵌使用,维护成本低
高性能,对读写负载的应用都适合
数据不局限于内存容量

项目地址 | #数据库
系列博客《Git数据库内幕》

一共5篇,本博客系列将介绍Git的内部结构,以帮助提高工程系统的效率。

第一部分讨论Git如何使用自定义压缩技术将其数据存储在包文件中。
第二部分为探讨了Git提交历史作为数据库。
第三部分为文件历史查询。
第四部分为分布式同步。
第五部分为可扩展性。

Blog | #数据库
immudb是一个具有内置密钥和验证的数据库,它可以跟踪敏感数据的变化,历史记录的完整性将由客户端保护,而无需信任数据库。它可以作为键值存储和/或关系数据库(SQL)运行。

传统的数据库事务和日志是可变的,因此无法确定数据是否已被破坏。immudb是不可变的,可以添加现有记录的新版本,但决不能更改或删除记录。这让我们可以存储关键数据,而不必担心被篡改。

存储在 immudb 中的数据在密码学上是一致且可验证的。与区块链不同,immudb 每秒可以处理数百万笔交易,既可以用作轻量级服务,也可以作为库嵌入到您的应用程序中。immudb 可以在任何地方运行,包括物联网设备、笔记本电脑、服务器、本地或云中。

immudb可以用作键值存储或关系数据结构,并支持事务和BLOB,因此对用例没有限制。我们使用immudb保护和篡改明显的日志数据、传感器数据、敏感数据、事务、软件构建方案、规则库数据,甚至是视频流。

项目地址 | #数据库
一个稳定、快速、内嵌的NoSQL数据库,支持多种数据结构,包含String、List、Hash、Set、Sorted Set。

rosedb类似于Redis,但是可以选择将value存储到磁盘中。

主要特性:
📌 兼容Redis协议
📌 支持丰富的数据结构,包含String、List、Hash、Set、Sorted Set
📌 内嵌使用,维护成本低
📌 高性能,对读写负载的应用都适合
📌 数据不局限于内存容量

rosedb | #数据库
抗疫研学— #医学 专业电子资源

PubMed 是由美国国家医学图书馆的国家生物技术信息中心开发的生物医学文献数据库查询系统,收录了来自MEDLINE、生命科学期刊和在线图书的3000多万篇生物医学文献,并提供生物化学与细胞生物学等相关生物医学的资讯。PubMed可以通过Mesh主题词进行检索,内容附有指向全文的链接,Books(相关图书)可链接到相关参考书籍的文摘页。同时PubMed提供Nucleotide、Protein、Genome、Structure、Popset、Taxonomy、OMIM等生物医药相关数据库的查询方式

SinoMed中国生物医学文献数据库 整合了中国生物医学文献数据库(CBM)全文版、中国生物医学文献学术分析、北京协和医学院博硕学位论文库、中国医学科普文献数据库等多种资源,是集检索、开放获取、个性化定题服务、全文传递服务于一体的生物医学中外文整合文献服务系统。其收录了1978以来1800多种中国生物医学期刊,以及汇编、会议论文的文献题录800余万篇,全部题录均进行主题标引和分类标引等规范化加工处理,覆盖基础医学、临床医学、预防医学、药学、口腔医学、中医学及中药学等生物医学的各个专业领域。

MEDLINE是美国国家医学图书馆(National Library of Medicine)编辑出版的国际综合生物医学信息书目 #数据库 ,是当今世界上最大也是最权威的生物医学文献数据库,收录有关医药、护理、牙科、兽医、医疗保健制度、临床科学等方面的权威医学信息。MEDLINE采用了包含树、树层次结构、副标题的MeSH(医学主题词表)索引方法,可从4,800多种医学期刊中检索文献。MEDLINE可通过EBSCO、Web of Science、OCLC平台访问。

进入页面后请选择“One-stop search for all EBSCOhost databases”选项,进入搜索页面后点击搜素框上方的“Choose Databases”选择MEDLINE数据库。

LWW/Lippincott Williams & Wilkins医学期刊库(OVID平台),一家专业医学出版社,为全球众多医师、专业临床医生、护理人员和医科学生提供高质量全文资源。LWW医学期刊库覆盖了生物学和医学等领域,目前我校师生可通过OVID平台访问该数据库近500种期刊。OVID公司是著名的、以医学为主要学科内容的电子产品商,该校师生还可通过OVID平台访问Journal of Bone and Joint Surgery(JBJS)骨与关节外科杂志从1993年至今的数据。

The Cochrane Library循证医学是国际Cochrane协作网的主要产品,由Wiley公司出版发行,汇集了全球最佳医学研究的综合性成果,被公认为循证医疗健康领域的“金标准”,是一个提供高质量证据的数据库,是临床研究证据的主要来源。目前我馆购买了The Cochrane Library 循证医学数据库的所有资源的全部年度访问权

ProQuest Health & Medical Complete 是ProQuest公司开发的医学全文数据库,全文以PDF或文本加图像格式存储,收录1969年以来4441种重要的基础医学、临床医学、卫生健康方面等专业期刊,涵盖护理学、内科学、儿科学、神经学、药理学、心脏病学、物理治疗以及新增的公共卫生和卫生管理等

The New England Journal of Medicine (NEJM)/新英格兰医学杂志 由马萨诸塞州医学会( Massachusetts Medical Society)所出版的同行评审医学期刊和综合性医学期刊,其内容涉及20 多个专业学科领域。现刊部分包含约31,000篇文章,以及55,000个图片,音频,视频等

中华医学会杂志社是以编辑出版中华医学会主办的各类医学期刊为主要任务的全国性医学期刊出版机构,截至目前中华医学会主办的医学期刊已达140余种,发行至世界60多个国家和地区

JoVE实验视频期刊数据库 JoVE出版社于2006年创办JoVE实验视频期刊,致力于以视频方式展现生物学、医学和化学等学科领域的研究过程与成果。实验视频来源于哈佛大学、斯坦福大学等世界著名高校及学术研究机构的实验室。目前该馆购买了9个学科专辑:Biology、Neuroscience、Medicine、Chemistry、Immunology and Infection、Developmental Biology、Bioengineering、Behavior、Cancer Research。

ASM/美国微生物学会期刊 美国微生物学会的期刊是微生物学领域最杰出的出版物,全面促进基础和临床微生物学领域的各项研究,其出版文章数量超过微生物学领域全部论文量的1/4,文章引用量几乎占所有微生物学论文引用数量的42%。目前此馆购买了ASM数据库所有期刊的年度访问权

Bentham Science 药学全文期刊数据库 Bentham Science出版公司,作为国际STM出版社之一,所有期刊均被权威文摘/索引机构收录,学科范围覆盖有药学、医学以及专利等。目前我校可使用Bentham Science数据库2009年以来127种期刊;34种OA图书;250多种OA期刊

USMLEasy/美国职业医师资格考试医学数据库 USMLEasy是美国医师资格考试备考的权威网站,提供美国职业医师资格考试Step 1,Step 2CK和Step3的所有备考资料,含有数以千计的在线考试题目,涉及美国职业医师资格考试的所有学科和知识点。所有问题都来自McGraw-Hill出版的权威系列考试辅导书籍,其中包括PreTest系列、LANGE和Q&A系列。数据库可模拟Step 1和 Step 2 CK的考试的出题模式,模拟实际考试

NMR库/有机化合物核磁共振碳谱数据库 NMR库由上海微谱信息技术有限公司出版,为药学、化学等学科从事天然产物研究、合成和药物开发的研究人员提供信息查询服务,以便快速确定已知化合物和新化合物的结构。微谱数据库收录化合物102余万个,包含收录化合物名称、分子式及文献信息的化合物信息库和收录有机化合物的碳谱数据及结构图的碳谱库,两个子库动态关联
Learn Data Science For Free
免费学习 #数据科学 资源
这个存储库包含了一个人从头到尾学习数据科学所需的免费资源,分为四个主要部分。

第1部分:路线图。作者整理的数据科学路线图2021年版(见上图)

第2部分:免费在线课程

第3部分:500个数据科学项目

第4部分:100+本免费机器学习书籍

这个存储库是分散在互联网上的不同资源的组合。之所以要建立这样一个数据库,是为了把所有有价值的资源按顺序组合起来,从而帮助每一个初学者寻找免费的、结构化的数据科学学习资源,希望它能帮助许多负担不起高额学费的人。该存储库应根据新的免费资源的可用性不断更新
MusicNet:带标注的古典 #音乐 #数据集 (330+),标注了每个音符的精确时间,演奏每个音符的乐器,以及这些音符在乐曲韵律结构中的位置 #机器学习 #数据库
入口,该仓库收集汇总了一些与 #算法 竞赛、 #数据结构 有关的课件、论文、书籍、网站、习题
中国海关出版社在疫情防控期间特开放(输入用户名同密码:guest,可免费访问一个月),收录近代海关通令的全文 #数据库 供研究者使用。
旧海关刊载中国近代史料数据库之第一期通令数据库收录了1861年至1949年间由外籍总税务司签发的中国近代海关正式行政公文的汇总,涉及中国近代海关及中国近代社会的方方面面。它真实记录了近代海关有关方针政策、人事任免、机构设置、规章制度、业务拓展等所有海关重大事件的起因、过程、结果及影响,其内容还涉及当时中外政府的重大动向,中国政府的内政外交及社会的重大变革,是研究中国近代海关及近代社会变迁不可缺少的重要档案。
黑洞资源笔记
酷炫数据 #可视化 #工具 iCharts是基于云端的趋势预测视觉分析平台,它可以快速地将复杂的商业信息、大规模调查数据和动态数据研究的结果可视化。它非常的快速简便,但却可以根据实时数据创造出富有冲击力的视觉智能图像,并且可以为你带来全方位信息聚合和信息对比。 Gliffy可以帮助你制作专业级流程图、组织图、UML分析图(Unified Modeling Language,统一建模语言,译注)、线框图、技术制图等等,而且它兼容所有的浏览器。Gliffy使用HTML5编辑器,速度是Flash的两倍。它提供一…
酷炫数据 #可视化 #工具 #数据集
HighCharts
通过HighCharts你可以为网站项目制作交互式图表。它的用户非常广泛(全世界最大的100家公司里面有61家以及成千上万的开发人员都在使用)。如果是为个人网站或非盈利组织使用这个软件,它将是免费的。HighCharts是建立在HTML5上的,在现代的浏览器包括移动、平板设备上运行,也支持过时的IE浏览器(IE6之后的都可以)。它同时也是动态的,你可以自由添加、移除、修改数据列(Series)和关键点(Points)。这款app支持多种类型的图表:折现图、样条曲线、面积图、曲线面积图、柱状图、条状图、饼状图和散点图等等。
ZingChart是一个强大的库,为用户提供了快速创造漂亮的图表、操作面板和信息图表的可能性。你可以在上百种图表类型中自由选择,你的设计和个性化要求不会受到任何限制。你也可以使你的用户通过交互式图表特性参与到你的作品之中。
D3.js是数据驱动文件(Data-Driven Documents)的缩写,他通过使用HTML\CSS和SVG来渲染精彩的图表和分析图。D3对网页标准的强调足以满足在所有主流浏览器上使用的可能性,使你免于被其他类型架构所捆绑的苦恼,它可以将视觉效果很棒的组件和数据驱动方法结合在一起。
Polymaps 如果你在找一款可同时使用位图和SVG矢量地图的JavaScript库,那么Polymaps正是你需要的。它为地图提供的多级缩放数据集方面表现非常迅速,并且可支持矢量数据的多种视觉表现形式。更棒的是,Polymaps可以在很大的尺度范围上加载数据。它使用的是球形墨卡托投影的tile格式,因此快到弹指间便可发布信息。
Dipity也是一款做时间轴的工具,用于管理网站上的时间和日期相关内容非常有效。用户可以创造并分享他们精彩的交互式时间轴,内容形式多种多样,包括音频、视频和图像甚至社交媒体频道。它对纸媒从业者、记者和博主来说简直必不可少。
Visual.ly是一个综合图库和信息图表生成器。它的工具很简单,却可创造出亮眼的数据展示作品。另外,你还可以在它的平台上分享你的图像。他能在内容上比一般的视觉分析工具表达更深入
WolframAlpha把自己称作计算型知识引擎、谷歌在分析领域的劲敌。它最棒的一点是在显示图表时可以不需要任何配置就响应数据请求。如果你用的是公开的数据,那么你只需一个简单的小部件生成器就能在你的网页上轻松加入可视化数据。
InstantAtlas让信息分析师和研究者得以创建交互式动态分配图报告,并结合统计数据和地图数据来优化数据可视化效果。如果你正在寻找一个可以制图的数据映射工具,那么恭喜你,就是它了。
Timeline.js会让你爱上制作漂亮的时间轴,因为它的操作非常简单直观。这是一款支持40种语言的开源工具,通过它你可以建立自己的可视化互动时间轴,还可从各种途径置入到媒体中,目前已支持Twitter、Flickr、Google Maps、YouTube、Vimeo、Vine、Dailymotion、Wikipedia、SoundCloud等
 
 
Back to Top