ACG2Vec——ACG 相关深度学习应用(以图搜图、插画评分、文本搜图等)

ACG2vec全称为Anime Comics Games to vector 。本 repo 会持续维护一些基于二次元相关的深度学习领域实践与探索。

在线预览(目前包含文本搜索、以图搜图、文本搜图、图片分数预测):https://cheerfun.dev/acg2vec/

开源仓库:https://github.com/OysterQAQ/ACG2vec

演示页前端开源仓库:https://github.com/wewewe131/acg2vec-frontend

以上两个仓库求个 star QAQ🌟🌟🌟

目前模块包括:

  • model:深度神经网络模型模块,目前包括
    • acgvoc2vec:基于从维基百科动漫列表、萌娘百科、Bangumi 、pixiv 、AnimeList 等来源获取清洗处理抽取的 510w 语句对微调的 sentence-transformers 模型,生成二次元相关文本的特征向量,用于各种下游任务(标签推荐,标签搜索,推荐系统等)

      可以使用 Huggingface 在线体验:https://huggingface.co/OysterQAQ/ACGVoc2vec

    • dclip:使用 danburoo2021 数据集对 clip ( ViT-L/14 )模型进行微调。

      可以使用 Huggingface 在线体验:https://huggingface.co/OysterQAQ/DanbooruCLIP

    • pix2score:基于 resnet101 的多任务模型,用于预测动漫插图的收藏数、浏览数与琴瑟级别
    • illust2vec:从DeepDanbooru模型去除预测头并对末尾层做均值池化的图片语义特征抽取模型
  • webapp:对外提供 web 服务模块。目前包括开箱即用的二次元插画标签预测服务、以图搜图服务、插画特征抽取服务、文本特征抽取服务
  • docker:基于容器化的部署模块,包括了部署所需要的配置文件与资源文件

💡预览

语义文本搜索

image-20230725185441532

语义图像搜索

image-20230725190057379

插画综合评分预测

image-20230725185608823

以图搜图

image-20230725185702808

原创文章,作者:mantou,如若转载,请注明出处:https://v2ez.com/818.html

(0)
mantoumantou
上一篇 2023年8月4日
下一篇 2023年8月23日

相关推荐

  • Windows 快捷启动工具

    软件是用 Electron 做的,轻喷。。。 闲来无事做的,正好自己有这个需求,就做个这么一个软件,我是做 Java 后端的,没搞过桌面端,所以用了 Electron ,开发速度确…

    2022年12月23日
  • 通过 Jekyll 在 GitHub Pages 上搭建博客系统

    谈到博客,可能很多小伙伴有过搭建的冲动或者经历,但是能坚持下来,不停更的却寥寥无几。我想告诉大家的是,一个博客最重要的是内容,任何人都可以写博文,但是如果写出来的博文对自己都没有多…

    2024年11月30日
  • 改hosts不生效?教你清理Chrome的DNS缓存

    在进行web开发的时候,我们经常会修改hosts文件进行测试,但是偶尔会发现改了hosts文件并不能立刻生效。这是由于浏览器自身对DNS(域名指向)是有进行缓存的,除了缓存之外,由…

    2021年11月14日
  • IP.IM 全新的 IP 查询网站

    稳定服务了几个月,再来跟大家分享一下 IP.IM 域名简单好记,支持 CURL 访问 curl ip.im curl ip.im/info curl ip.im/8.8.8.8 最…

    工具软件 2024年1月3日
  • 小众需求的窗口截图工具: MEShot 窗口截图

    MEShot 是一款简单的桌面窗口截图工具,可以直接截取当前活动的窗口图片,也可以带水印截图,支持边缘阴影,支持快捷键截图。 MEShot 只截图窗口,完全不用考虑窗口后的背景或者…

    2025年8月10日
  • 10分钟搭建一个PDF工具箱——Stirling PDF

    日常办公的时候经常会用到 PDF,很多时候我们都需要对它进行一些处理操作, 比如添加水印(图片只是举个例子,这玩意儿不是我做的 = =):   这一期我们就来搭建一个免费…

    2024年6月13日
  • 图片放大工具

    使用评价最高的 Nomos8k 模型,自己用了一下效果确实还可以。 https://0v0.ai/upscaler 预览一下:从模糊变成清晰的图片  

    2024年11月13日
  • Freewind自由之风 Typecho博客主题

    简介:一款功能性较强的Typecho博客主题,仅700多k的体积,拥有相册、说说、时间轴、友链、更换配色等功能 站点一定要设置伪静态,至于怎么设置自行百度一下,很简单;一定要在永久…

    2022年12月29日
  • MayMayBlog, AIBot(ChatGPT 镜像站)

    直达地址: https://maymay5.com/newchatgpt.html 我一直在对标 OpenAI 官方制作镜像站(虽然没办法做到人家专业公司那么强大,但也在尽可能跟随…

    2023年10月12日
  • 开源的 Chrome 翻译插件

    我的这个翻译插件叫做“可可翻译”,从零开发到现在也已经过了 3 年了,最近也是获得了第一批 Edge 商店的 Featured badge(特别推荐徽章),当然在 Chrome 商…

    2023年8月2日

发表回复

登录后才能评论