ACG2Vec——ACG 相关深度学习应用(以图搜图、插画评分、文本搜图等)

ACG2vec全称为Anime Comics Games to vector 。本 repo 会持续维护一些基于二次元相关的深度学习领域实践与探索。

在线预览(目前包含文本搜索、以图搜图、文本搜图、图片分数预测):https://cheerfun.dev/acg2vec/

开源仓库:https://github.com/OysterQAQ/ACG2vec

演示页前端开源仓库:https://github.com/wewewe131/acg2vec-frontend

以上两个仓库求个 star QAQ🌟🌟🌟

目前模块包括:

  • model:深度神经网络模型模块,目前包括
    • acgvoc2vec:基于从维基百科动漫列表、萌娘百科、Bangumi 、pixiv 、AnimeList 等来源获取清洗处理抽取的 510w 语句对微调的 sentence-transformers 模型,生成二次元相关文本的特征向量,用于各种下游任务(标签推荐,标签搜索,推荐系统等)

      可以使用 Huggingface 在线体验:https://huggingface.co/OysterQAQ/ACGVoc2vec

    • dclip:使用 danburoo2021 数据集对 clip ( ViT-L/14 )模型进行微调。

      可以使用 Huggingface 在线体验:https://huggingface.co/OysterQAQ/DanbooruCLIP

    • pix2score:基于 resnet101 的多任务模型,用于预测动漫插图的收藏数、浏览数与琴瑟级别
    • illust2vec:从DeepDanbooru模型去除预测头并对末尾层做均值池化的图片语义特征抽取模型
  • webapp:对外提供 web 服务模块。目前包括开箱即用的二次元插画标签预测服务、以图搜图服务、插画特征抽取服务、文本特征抽取服务
  • docker:基于容器化的部署模块,包括了部署所需要的配置文件与资源文件

💡预览

语义文本搜索

image-20230725185441532

语义图像搜索

image-20230725190057379

插画综合评分预测

image-20230725185608823

以图搜图

image-20230725185702808

原创文章,作者:mantou,如若转载,请注明出处:https://v2ez.com/818.html

(0)
mantoumantou
上一篇 2023年8月4日
下一篇 2023年8月23日

相关推荐

  • 改hosts不生效?教你清理Chrome的DNS缓存

    在进行web开发的时候,我们经常会修改hosts文件进行测试,但是偶尔会发现改了hosts文件并不能立刻生效。这是由于浏览器自身对DNS(域名指向)是有进行缓存的,除了缓存之外,由…

    2021年11月14日
  • 开源的 Chrome 翻译插件

    我的这个翻译插件叫做“可可翻译”,从零开发到现在也已经过了 3 年了,最近也是获得了第一批 Edge 商店的 Featured badge(特别推荐徽章),当然在 Chrome 商…

    2023年8月2日
  • Optimizilla :无损在线压缩图片工具

    前言 因为经常给博客做配图,所以发现Optimizilla在线图片压缩服务,博主认为十分好用,压缩率高,压缩后的画质依然很佳。 操作接口非常简单、易用,无须额外下载或安装任何软件,…

    2021年4月3日
  • 沉浸式翻译+DeepSeek

    准备工作: 安装沉浸式翻译: 沉浸式翻译 – 双语对照网页翻译插件 | PDF翻译 | 视频字幕翻译 164 一个干净的魔法,开全局(不过多解释了看图) 以前还没让用手…

    2024年4月9日
  • WordPress牛年灯笼挂件

    节日了,给网站加一个灯笼也算是对节日的庆祝。牛年新气象。 原版地址:https://u.mr90.top/posts/8914/ 我做成了一个插件,并且调整了一下灯笼大小

    工具软件 2021年3月4日
  • MayMayBlog, AIBot(ChatGPT 镜像站)

    直达地址: https://maymay5.com/newchatgpt.html 我一直在对标 OpenAI 官方制作镜像站(虽然没办法做到人家专业公司那么强大,但也在尽可能跟随…

    2023年10月12日
  • FydeOS for 树莓派 5 桌面系统

    如你们所知,FydeOS 对 Raspberry Pi 的热爱始终如一。Chromium OS 、openFyde 以及 FydeOS 在 Raspberry Pi SBC 上的顺…

    2024年1月26日
  • Windows 快捷启动工具

    软件是用 Electron 做的,轻喷。。。 闲来无事做的,正好自己有这个需求,就做个这么一个软件,我是做 Java 后端的,没搞过桌面端,所以用了 Electron ,开发速度确…

    2022年12月23日
  • 京东抢购助手(无门槛 win 版客户端)

    京东抢购助手 1.缺货上架自动加购物车下单 2.定时加购物车下单 主要功能 开箱即用的软件(仅windows) web操作界面(跨平台) 登陆京东商城(www.jd.com) 手机…

    2022年3月20日
  • 10 年的音乐播放器,第 11 年有了 AI 加持!

    有图有真相!  AI 功能也得有个图 ~  接着说说有啥特性 稳定、易用: 一键安装,各流行平台均有打包(如 Arch Linux, Windows, macOS 等) 有各媒体资…

    2025年2月7日

发表回复

登录后才能评论