[自行打包] 个人收集精品杂图3 [2500p+9.1g][百度盘]

西域烤鱼干

tinbg 发表于 2024-7-12 19:13
" ]* i# ^' ~, S8 D大哥，你这个头像很爱啊，像ai又想vam，有没有出处

抖音上有很多

uuuuyyyyy

为啥我一直密码错误ヽ(`Д´)ﾉ

不如离弃

好看

cndeng

" @4 Z  ^  P% V6 n' g感谢分享，大佬辛苦了。

lattess

有一部分图重复了，写了一段代码来解决这个问题，有一张图片似乎有问题，困扰了我好久为什么一直报错，求哈希值函数加个异常解决了，大家可以留着以后备用lol
import os
/ ^2 K) P5 {' [  E( q+ g/ K9 ]0 @import imagehash
from PIL import Image

def compute_image_hash(image_path):
8 i" j; L' r3 e! w    # image = Image.open(image_path)
5 Z7 h2 J9 \: t3 r, m$ W; W    # return imagehash.average_hash(image)
    try:
        with Image.open(image_path) as image:
            return imagehash.average_hash(image)
0 l) |) N* H2 h$ f* t    except (OSError, IOError) as e:
; N8 ^9 E- J4 E8 C7 `0 ^- O        print(f"处理图像 {image_path} 时出错: {e}")
( r! l, H7 @. o0 t+ W, F' j: O        return None

def remove_duplicates(image_folder):
$ x5 U% ]4 S6 Q  u1 |    hash_dict = {}
. h2 v, H( ]$ G8 ]. U8 h# O- J    duplicates = []
, T! r3 G  k+ y* @4 j3 c
    for filename in os.listdir(image_folder):
        if filename.endswith(('.png', '.jpg', '.jpeg', '.bmp', '.gif')):
            image_path = image_folder + "\\" + filename
            image_hash = compute_image_hash(image_path)
' k0 r3 b& Z: J9 d9 Z6 P4 t
$ Y- K+ `3 Q, G2 d            if image_hash in hash_dict:
                duplicates.append(image_path)
# S( Z. B9 e* ]            else:
                hash_dict[image_hash] = image_path
        else:
            pass
/ @5 ^, e: x. p, u
    for duplicate in duplicates:
, E! _/ J1 E1 O$ M3 k' e6 c        os.remove(duplicate)
        print(f"Removed duplicate image: {duplicate}")

    print("Duplicate removal complete.")

image_folder = 'D:/data/baidu/去重训练文件夹' #换成自己的文件夹
* i" u$ S# F: cremove_duplicates(image_folder)

lattess

lattess 发表于 2024-7-23 16:25
" [( Z4 U( {( v$ k9 E* `/ k% g有一部分图重复了，写了一段代码来解决这个问题，有一张图片似乎有问题，困扰了我好久为什么一直报错，求哈 ...

有问题的图片名为1558571_114.png

一言九鼎

tinbg 发表于 2024-7-12 19:13
' h( o" |% Q0 f+ K& s4 v$ l8 }大哥，你这个头像很爱啊，像ai又想vam，有没有出处

一眼ai
4 q8 C' J$ d% b! h, `* i