[自行打包] 个人收集精品杂图3 [2500p+9.1g][百度盘]

西域烤鱼干

tinbg 发表于 2024-7-12 19:13
# V, n9 ]( X1 t& X; O+ O, O大哥，你这个头像很爱啊，像ai又想vam，有没有出处

抖音上有很多

uuuuyyyyy

为啥我一直密码错误ヽ(`Д´)ﾉ

不如离弃

好看

cndeng

感谢分享，大佬辛苦了。

lattess

有一部分图重复了，写了一段代码来解决这个问题，有一张图片似乎有问题，困扰了我好久为什么一直报错，求哈希值函数加个异常解决了，大家可以留着以后备用lol
import os
import imagehash
from PIL import Image

, t: r# M: |# Tdef compute_image_hash(image_path):
    # image = Image.open(image_path)
! Y& v) S1 Z4 J1 P3 ]' N    # return imagehash.average_hash(image)
    try:
$ {* z5 Q: x8 L; h        with Image.open(image_path) as image:
& @& g" n  M4 r& z1 P            return imagehash.average_hash(image)
    except (OSError, IOError) as e:
        print(f"处理图像 {image_path} 时出错: {e}")
9 n4 W- f; v2 ^        return None
% c( H5 D5 @; o0 O4 m7 ^( Y
def remove_duplicates(image_folder):
1 ^1 Z, p/ |0 }! F( n) w* a    hash_dict = {}
( z- {  b0 E6 q    duplicates = []
! L8 Q( |. n" e
9 r) L+ [9 b0 E$ j2 E& M2 N    for filename in os.listdir(image_folder):
  v( J) s- `5 J  O9 T4 W# k        if filename.endswith(('.png', '.jpg', '.jpeg', '.bmp', '.gif')):
" B: d6 X$ O  S$ Y& S( e            image_path = image_folder + "\\" + filename
# l$ I9 b; }/ g# U            image_hash = compute_image_hash(image_path)
* O1 p8 ~! ^0 O5 ~
+ W+ W, p* X1 R# z5 Q/ @) \            if image_hash in hash_dict:
/ Y$ S6 J% b; K9 m                duplicates.append(image_path)
5 r( T, B8 w8 X  {: H$ _7 g            else:
! }) s/ U+ a1 p! W; q2 ]3 ~                hash_dict[image_hash] = image_path
7 R, i) G1 b/ t        else:
            pass

    for duplicate in duplicates:
        os.remove(duplicate)
        print(f"Removed duplicate image: {duplicate}")

) b5 w5 F; T. T  {0 a    print("Duplicate removal complete.")

image_folder = 'D:/data/baidu/去重训练文件夹' #换成自己的文件夹
remove_duplicates(image_folder)

lattess

lattess 发表于 2024-7-23 16:25
有一部分图重复了，写了一段代码来解决这个问题，有一张图片似乎有问题，困扰了我好久为什么一直报错，求哈 ...

0 ?& p* S  ~- b2 L8 S( b: z有问题的图片名为1558571_114.png

一言九鼎

tinbg 发表于 2024-7-12 19:13
0 S7 H6 ^5 E1 N8 ?! y- s* l大哥，你这个头像很爱啊，像ai又想vam，有没有出处

2 ^& @& f& l8 F0 S# l一眼ai