假设要下载如下的数据集：

  • https://hf-mirror.com/datasets/sradc/chunked-shuffled-wikipedia20220301en-bookcorpusopen

需要使用hf-mirror提供的工具hfd来下载，具体使用命令如下：

wget https://hf-mirror.com/hfd/hfd.sh
chmod a+x hfd.sh
export HF_ENDPOINT=https://hf-mirror.com
./hfd.sh sradc/chunked-shuffled-wikipedia20220301en-bookcorpusopen --dataset --tool aria2c -x 4

这样就能将数据集下载到当前目录。

可能会报错缺少aria2c之类的工具，就用linux命令安装一下。

其他下载方法可参考：https://hf-mirror.com/

下载大模型的其他方式见：https://blog.csdn.net/ybdesire/article/details/134204332

# 人工智能
Logo
DAMO开发者矩阵

DAMO开发者矩阵，由阿里巴巴达摩院和中国互联网协会联合发起，致力于探讨最前沿的技术趋势与应用成果，搭建高质量的交流与分享平台，推动技术创新与产业应用链接，围绕“人工智能与新型计算”构建开放共享的开发者生态。

更多推荐

cover

AI与大模型新闻日报 | 2026-08-02

avatar DAMO开发者矩阵

应对“讲解浅”的挑战：史馆讲解机器人如何承接课程化教学价值

首先需要明确，中小学史馆与商业博物馆、规划馆在核心诉求上存在本质差异。后者的观众主要是成人散客，追求通识化的知识与体验；而前者的观众主体是按班级组织的学生，接待形态是高度结构化的批量接待。这意味着，对讲解机器人的要求必须从“通用展厅”模式，转向深度适配“未成年人聚集 + 教学场景 + 批量接待”三大特征的教育服务模式。在这种模式下，学校和师生真正在意的，不再仅仅是机器人是否能流畅移动、声音是否清晰

avatar DAMO开发者矩阵

首尔地铁到站_seoul-subway-arrival

以下为本文档的中文说明seoul-subway-arrival 是一个提供韩国首尔地铁实时到站信息查询的技能。该技能通过接入首尔地铁的开放数据 API（Seoul Open Data API），为开发者提供便捷的地铁运行状态查询接口，是开发首尔出行相关应用的理想工具。使用场景包括：开发首尔城市出行导航应用提供实时地铁到站信息、在智能语音助手或聊天机器人中集成地铁到站查询功能、为日常通勤者提供个性化

avatar DAMO开发者矩阵