This branch is up to date withyangjianxin1/CLIP-Chinese:master. README 项目描述 微信公众号【YeungNLP】文章:CLIP-Chinese:中文多模态对比学习预训练模型,文章内可获取140w中文图文对预训练数据,以及中文CLIP预训练权重。 CLIP是由OpenAI提出的一种多模态对比学习方法,原模型使用了4亿个图文对进行对比学习训练,...
2023.11.30 Chinese-CLIP添加了转换Pytorch模型为coreml格式的转换脚本,用于部署。(感谢@manymuch贡献代码 ️) 2023.9.8 Chinese-CLIP支持了基于ModelScope库的知识蒸馏微调功能。(感谢阿里云PAI团队@wuziheng和@Jaskr616同学贡献代码 ️) 2023.5.9 Chinese-CLIP适配Pytorch2.0。 2023.3.20 新增对比学习的梯度累积支持...
中文CLIP预训练模型. Contribute to qyt2011/CLIP-Chinese development by creating an account on GitHub.
cd Chinese-CLIP/ export CUDA_VISIBLE_DEVICES=0 export PYTHONPATH=${PYTHONPATH}:`pwd`/cn_clip # ${DATAPATH}的指定,请参考Readme"代码组织"部分创建好目录,尽量使用相对路径:https://github.com/OFA-Sys/Chinese-CLIP#代码组织 checkpoint_path=${DATAPATH}/pretrained_weights/clip_cn_vit-b-16.pt # ...
Chinese-CLIP: arxiv.org/abs/2211.0133 Github:github.com/OFA-Sys/Chin 1.CLIP模型 CLIP全名Contrastive Language-Image Pretraining,在2021年由OpenAI提出,其核心理念为图文对比学习预训练,是一种多模态学习模型,旨在将图像和文本进行关联,它可以快速实现图文特征相似度计算、跨模态检索、零样本图片分类等任务。 与...
通过知识蒸馏的功能,可以使用大模型(如较大规模版本的Chinese-CLIP或其他ModelScope支持的图像表征模型)蒸馏较小规模Chinese-CLIP,进一步提升Chinese-CLIP的图像检索(图到图召回)能力。使用的Teacher model由ModelScope提供,Chinese-CLIP全系列目前均已上线ModelScope。 环境准备 Turing、Ampere、Ada、Hopper架构的Nvidia GPU...
ZH-CLIP: A Chinese CLIP Model Models You can downloadZH-CLIPmodel from🤗 thu-ml/zh-clip-vit-roberta-large-patch14. The model structure is shown below: Vision encoder network structure is the same asopenai/clip-vit-large-patch14, and initialize withlaion/CLIP-ViT-L-14-laion2B-s32B-b8...
RainZs / Chinese-CLIP Public forked from OFA-Sys/Chinese-CLIP Notifications Fork 0 Star 0 Code Pull requests Actions Projects Security Insights Files master .github assets cn_clip examples run_scripts .gitignore MIT-LICENSE.txt README.md README_En.md Results.md deployment.md ...
地址:github.com/OFA-Sys/Chinese-CLIP本项目为CLIP模型的中文版本,使用大规模中文数据进行训练(~2亿图文对),旨在帮助用户快速实现中文领域的图文特征&相似度计算、跨模态检索、零样本图片分类等任务。 û收藏 55 2 ñ50 转发到微博 转发到私信 全部 热门 关注的人 陌生人...
forked fromOFA-Sys/Chinese-CLIP NotificationsYou must be signed in to change notification settings Fork0 Star0 Code Pull requests Actions Projects Security Insights Additional navigation options Files master .github assets cn_clip examples run_scripts ...