ACG2Vec——ACG 相关深度学习应用(以图搜图、插画评分、文本搜图等)

ACG2vec全称为Anime Comics Games to vector 。本 repo 会持续维护一些基于二次元相关的深度学习领域实践与探索。

在线预览(目前包含文本搜索、以图搜图、文本搜图、图片分数预测):https://cheerfun.dev/acg2vec/

开源仓库:https://github.com/OysterQAQ/ACG2vec

演示页前端开源仓库:https://github.com/wewewe131/acg2vec-frontend

以上两个仓库求个 star QAQ🌟🌟🌟

目前模块包括:

  • model:深度神经网络模型模块,目前包括
    • acgvoc2vec:基于从维基百科动漫列表、萌娘百科、Bangumi 、pixiv 、AnimeList 等来源获取清洗处理抽取的 510w 语句对微调的 sentence-transformers 模型,生成二次元相关文本的特征向量,用于各种下游任务(标签推荐,标签搜索,推荐系统等)

      可以使用 Huggingface 在线体验:https://huggingface.co/OysterQAQ/ACGVoc2vec

    • dclip:使用 danburoo2021 数据集对 clip ( ViT-L/14 )模型进行微调。

      可以使用 Huggingface 在线体验:https://huggingface.co/OysterQAQ/DanbooruCLIP

    • pix2score:基于 resnet101 的多任务模型,用于预测动漫插图的收藏数、浏览数与琴瑟级别
    • illust2vec:从DeepDanbooru模型去除预测头并对末尾层做均值池化的图片语义特征抽取模型
  • webapp:对外提供 web 服务模块。目前包括开箱即用的二次元插画标签预测服务、以图搜图服务、插画特征抽取服务、文本特征抽取服务
  • docker:基于容器化的部署模块,包括了部署所需要的配置文件与资源文件

💡预览

语义文本搜索

image-20230725185441532

语义图像搜索

image-20230725190057379

插画综合评分预测

image-20230725185608823

以图搜图

image-20230725185702808

原创文章,作者:mantou,如若转载,请注明出处:https://v2ez.com/818.html

(0)
mantoumantou
上一篇 2023年8月4日
下一篇 2023年8月23日

相关推荐

  • GPTs 导航站,可向量检索,有 Chrome 插件

    展示所有的第三方 GPTs 应用,可向量检索👇 https://gpts.works 浏览器插件 在 ChatGPT Explore 页面侧边栏展示第三方 GPTs 应用👇 Chr…

    2023年11月14日
  • Mac下的邮箱客户端测评

    对于邮箱客户端来说,我更关注是否自带翻译功能,另外推送是否及时。 1,mail 自带的客户端,但是存在占用大量内存的bug,至今未修复。 自带翻译:❌ 推送及时:❌ 中文搜索:✅ …

    2023年6月25日
  • 通过 Jekyll 在 GitHub Pages 上搭建博客系统

    谈到博客,可能很多小伙伴有过搭建的冲动或者经历,但是能坚持下来,不停更的却寥寥无几。我想告诉大家的是,一个博客最重要的是内容,任何人都可以写博文,但是如果写出来的博文对自己都没有多…

    2024年11月30日
  • Optimizilla :无损在线压缩图片工具

    前言 因为经常给博客做配图,所以发现Optimizilla在线图片压缩服务,博主认为十分好用,压缩率高,压缩后的画质依然很佳。 操作接口非常简单、易用,无须额外下载或安装任何软件,…

    2021年4月3日
  • QQ 截图工具独立版安装使用

    前言 之前截图一直使用的QQ截图,相比于微信截图,QQ截图还支持长截图,总体来说,QQ截图是我使用过的最好的截图工具 。但是现在公司不让用微信、QQ、钉钉等通讯软件,要求使用公司自…

    工具软件 2025年3月6日
  • 「知了」开源音乐服务

    知了」是一个开源的音乐服务, 可以部署在任何 Linux/Windows/macOS 设备上, 主要有以下特点: 完全开源和数据完全掌控 知了分为服务端和客户端, 代码完全开源. …

    2022年12月24日
  • IP.IM 全新的 IP 查询网站

    稳定服务了几个月,再来跟大家分享一下 IP.IM 域名简单好记,支持 CURL 访问 curl ip.im curl ip.im/info curl ip.im/8.8.8.8 最…

    工具软件 2024年1月3日
  • Windows 快捷启动工具

    软件是用 Electron 做的,轻喷。。。 闲来无事做的,正好自己有这个需求,就做个这么一个软件,我是做 Java 后端的,没搞过桌面端,所以用了 Electron ,开发速度确…

    2022年12月23日
  • Bandicam(6.0.4.2024)已授权VIP绿色特别版-视频录制神器

    Bandicam与Fraps、Dxtory被广大游戏视频录制爱好者合称为世界三大游戏录制神器。其中Bandicam优势明显,绝对是广大视频录制爱好者的首选! Bandicam是一款…

    2022年10月20日
  • Freewind自由之风 Typecho博客主题

    简介:一款功能性较强的Typecho博客主题,仅700多k的体积,拥有相册、说说、时间轴、友链、更换配色等功能 站点一定要设置伪静态,至于怎么设置自行百度一下,很简单;一定要在永久…

    2022年12月29日

发表回复

登录后才能评论