File size: 6,836 Bytes
f3f67f2
 
 
12e43f2
 
f3f67f2
12e43f2
 
 
 
 
 
 
 
 
 
 
 
 
5830068
12e43f2
5830068
 
 
 
 
 
12e43f2
5830068
12e43f2
5830068
12e43f2
5830068
 
 
 
 
12e43f2
5830068
12e43f2
5830068
 
 
 
 
12e43f2
5830068
12e43f2
5830068
 
 
 
 
 
12e43f2
5830068
 
 
 
12e43f2
5830068
12e43f2
5830068
12e43f2
5830068
 
 
12e43f2
5830068
12e43f2
5830068
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
12e43f2
5830068
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
12e43f2
5830068
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
 
12e43f2
5830068
 
 
12e43f2
 
 
5830068
f3f67f2
5830068
 
 
12e43f2
5830068
 
 
12e43f2
5830068
 
 
 
12e43f2
5830068
12e43f2
5830068
 
 
 
 
 
 
12e43f2
5830068
 
 
 
 
12e43f2
5830068
12e43f2
5830068
 
 
 
12e43f2
5830068
12e43f2
5830068
 
 
 
 
12e43f2
5830068
 
 
 
12e43f2
 
5830068
12e43f2
5830068
12e43f2
5830068
 
 
 
12e43f2
5830068
 
 
12e43f2
5830068
 
 
 
 
 
 
 
 
 
 
 
 
 
12e43f2
5830068
12e43f2
5830068
 
 
 
 
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
75
76
77
78
79
80
81
82
83
84
85
86
87
88
89
90
91
92
93
94
95
96
97
98
99
100
101
102
103
104
105
106
107
108
109
110
111
112
113
114
115
116
117
118
119
120
121
122
123
124
125
126
127
128
129
130
131
132
133
134
135
136
137
138
139
140
141
142
143
144
145
146
147
148
149
150
151
152
153
154
155
156
157
158
159
160
161
162
163
164
165
166
167
168
169
170
171
172
173
174
175
176
177
178
179
180
181
182
183
184
185
186
187
188
189
190
191
192
193
194
195
196
197
198
199
200
201
202
203
204
205
206
207
208
209
210
211
212
213
214
215
216
217
218
219
220
221
222
223
224
225
226
227
228
229
230
231
232
233
234
235
236
237
238
239
240
241
242
243
244
245
246
247
248
249
250
251
252
253
254
255
256
---
license: mit
language:
  - zh
  - en
pipeline_tag: image-classification
tags:
  - image-classification
  - binary-classification
  - mobilenetv3
  - pytorch
  - acg
  - anime
  - comic
  - game
  - computer-vision

---

# IsACG - ACG风格图像分类模型

<p align="center">
  <a href="https://huggingface.co/moyanjdc/IsACG"><img src="https://img.shields.io/badge/%F0%9F%A4%97%20Hugging%20Face-Model%20Hub-yellow"></a>
  <a href="https://pytorch.org/"><img src="https://img.shields.io/badge/PyTorch-2.7-red.svg"></a>
  <a href="https://github.com/moyanjdc/IsACG/blob/main/LICENSE"><img src="https://img.shields.io/badge/License-MIT-blue.svg"></a>
  <a href="https://github.com/moyanjdc/IsACG"><img src="https://img.shields.io/badge/GitHub-Repository-black"></a>
</p>

IsACG是一个轻量级的二分类图像分类模型系列,专门用于判断图像是否为ACG(动画、漫画、游戏)或二次元风格。项目基于PyTorch实现,提供完整的训练、评估和部署流程。

## 🌟 模型特色

- **🎯 高精度**: 在ACG识别任务上达到99%准确率
- **⚡ 轻量快速**: 参数量仅2.5M-5.5M,推理速度快
- **🔄 多格式支持**: 原生PyTorch、ONNX格式,便于部署
- **📱 多端适用**: 支持CPU、GPU、移动端部署
- **🔗 完整工具链**: 包含数据预处理、训练、评估、转换和部署的全套工具

## 模型版本

| 版本 | 架构              | 参数 | 准确率 | 特点                   |
| ---- | ----------------- | ---- | ------ | ---------------------- |
| v1   | MobileNetV3-Large | 5.5M | ~99.1% | 高精度,适合服务器部署 |
| v1s  | MobileNetV3-Small | 2.5M | ~98.9% | 轻量快速,适合移动端   |
| v2   | MobileNetV3-Small | 2.5M | ~97.5% | 改进泛化能力           |

## 🎯 使用场景

### ✅ 推荐使用
- 动漫/漫画内容过滤
- 游戏截图识别
- 二次元风格检测
- 内容审核系统
- 图像分类管道

### ⚠️ 注意事项
- 主要针对风格识别,而非内容理解
- 对于高度风格化的图像(如3D渲染动漫)可能误判
- 建议图像分辨率不低于256×256

## 快速开始

### 安装依赖

```bash
uv sync
```

### 使用预训练模型

1. **下载模型**   - 从[Hugging Face仓库](https://huggingface.co/moyanjdc/IsACG/)下载预训练模型
   - 将模型文件放入`models/release/`目录

2. **命令行推理**```bash
python isacg.py --model_path models/release/IsACG_v1s_98.94%.onnx --image_path your_image.jpg
```

3. **Web界面**```bash
python webapp.py
```
访问 http://localhost:8080 使用图形界面

4. **API服务**```bash
python onnx_server.py
```
使用POST请求调用 `/predict` 接口

## 完整使用流程

### 1. 数据准备

```bash
# 准备原始数据
# 正样本(ACG风格)放在 dataset/yes/
# 负样本(非ACG风格)放在 dataset/no/

# 运行预处理
python pre_process.py
```

### 2. 训练模型

```bash
# 基本训练
python train.py --model_name mobilenet_v3_small --epochs 20 --batch_size 32

# 使用预训练权重
python train.py --model_name mobilenet_v3_small --use_pretrained

# 启用TensorBoard监控
python train.py --model_name mobilenet_v3_large --use_tensorboard
```

### 3. 模型转换与优化

```bash
# 转换为ONNX格式
python conv.py checkpoint.pth -v 1s -a 98.94

# 模型量化(减少模型大小)
python qua.py
```

### 4. 模型分析

```bash
# 查看模型检查点信息
python look.py checkpoint.pth
```

## 项目结构

```
IsFirefly/
├── model.py              # 模型定义
├── train.py              # 训练脚本
├── dataset.py            # 数据加载
├── isacg.py              # 推理评估
├── conv.py               # 模型转换(PyTorch→ONNX)
├── qua.py                # 模型量化
├── webapp.py             # Gradio Web界面
├── onnx_server.py        # Flask API服务
├── pre_process.py        # 数据预处理
├── make_unplash.py       # Unplash数据下载工具
├── look.py               # 模型检查点分析
├── pyproject.toml        # 项目配置
└── README.md             # 说明文档
```

## API接口说明

### REST API (onnx_server.py)

```python
# 请求示例
curl -X POST -F "file=@image.jpg" http://localhost:5000/predict

# 响应格式
{
    "predicted_class": "acg",
    "confidence": 0.9945,
    "success": true
}
```

### Python API

```python
from isacg import TorchInference, ONNXInference
from PIL import Image

# 使用PyTorch模型
predictor = TorchInference("model.pth", device="cuda")
result = predictor.predict(Image.open("image.jpg"))

# 使用ONNX模型
predictor = ONNXInference("model.onnx", device="cuda")
result = predictor.predict("image.jpg")
```

## 训练配置

### 超参数
- 输入尺寸:512×512
- 学习率:1e-3
- 优化器:Adam
- 损失函数:交叉熵损失
- 学习率调度:ReduceLROnPlateau
- 数据增强:随机旋转、水平翻转、日晒效果

### 数据增强
项目包含多种数据增强技术,提高模型泛化能力:
- 随机旋转 (±25度)
- 随机水平翻转 (p=0.5)
- 随机日晒效果 (p=0.5)

### 性能指标

| 设备            | 推理速度     | 内存占用 | 推荐用途 |
| --------------- | ------------ | -------- | -------- |
| CPU (E5-2673V3) | ~25FPS  | ~200MB   | 本地测试 |
| GPU (GTX 750)  | ~40FPS   | ~500MB   | 生产部署 |

## 📝 技术细节

### 模型架构
- **基础网络**: MobileNetV3-Large/Small
- **输入尺寸**: 512×512
- **输出**: 二分类(0: 非ACG, 1: ACG)
- **参数量**: 2.5M (v1s/v2) / 5.5M (v1)

### 训练数据
- **正样本**: 50,00+ ACG图像(动漫、漫画、游戏)(来自@Scighost/爬虫)
- **负样本**: 50,00+ 真实照片、插画等(来自Unplash)
- **数据增强**: 随机旋转、翻转、色彩调整


## 贡献指南

欢迎贡献代码、数据或文档改进:

1. Fork本仓库
2. 创建特性分支
3. 提交更改
4. 发起Pull Request

## 许可证

本项目采用MIT许可证。详见LICENSE文件。

## 致谢

- 感谢PyTorch和TorchVision团队
- 特别感谢[@Scighost](https://github.com/Scighost)老师的铯图(25%的训练集)
- 感谢[Unplash](https://unsplash.com/)提供的真实图片图片数据集
- 感谢开源社区的支持

## 联系方式

- 项目主页:https://github.com/moyanj/IsACG
- 问题反馈:GitHub Issues
- 模型下载:[Hugging Face Hub](https://huggingface.co/moyanjdc/IsACG/)

---

*注:本项目主要用于教育和研究目的。商业使用请确保遵守相关法律法规和版权要求。*

<p align="center">
  Made with ❤️ by <a href="https://github.com/moyanjdc">moyanjdc</a> · 
  <a href="https://huggingface.co/moyanjdc/IsACG">HF Hub</a> · 
  <a href="https://github.com/moyanjdc/IsACG">GitHub</a>
</p>