[自行打包] 个人收集精品杂图3 [2500p+9.1g][百度盘]

西域烤鱼干

tinbg 发表于 2024-7-12 19:13
大哥，你这个头像很爱啊，像ai又想vam，有没有出处

. `( M! \5 V) ], Y1 x抖音上有很多

uuuuyyyyy

为啥我一直密码错误ヽ(`Д´)ﾉ

不如离弃

好看

cndeng

2 F# }. J% _9 ^2 I" |0 U/ J/ p感谢分享，大佬辛苦了。

lattess

有一部分图重复了，写了一段代码来解决这个问题，有一张图片似乎有问题，困扰了我好久为什么一直报错，求哈希值函数加个异常解决了，大家可以留着以后备用lol
import os
import imagehash
from PIL import Image

def compute_image_hash(image_path):
    # image = Image.open(image_path)
    # return imagehash.average_hash(image)
/ b+ \* v! z( P- u. z    try:
        with Image.open(image_path) as image:
            return imagehash.average_hash(image)
3 ~1 i1 q3 m! u2 l9 x    except (OSError, IOError) as e:
        print(f"处理图像 {image_path} 时出错: {e}")
$ y: s% z$ n# @4 g) j8 C. u' v        return None
; d. D. m5 h) s1 E0 p6 ~) _
def remove_duplicates(image_folder):
' G8 z$ |( ^0 o8 T1 W    hash_dict = {}
7 T3 I. G& P9 [    duplicates = []
8 C8 J- U1 V# F7 [2 ^0 _7 V" C
    for filename in os.listdir(image_folder):
2 e2 T! m! s3 `" ~        if filename.endswith(('.png', '.jpg', '.jpeg', '.bmp', '.gif')):
& d* B9 y0 C1 h$ c            image_path = image_folder + "\\" + filename
, e/ \& A/ u7 F% _            image_hash = compute_image_hash(image_path)
. N  d$ k, X; b3 v
% ^$ Y, l8 b& _. ^: Y            if image_hash in hash_dict:
                duplicates.append(image_path)
- {8 a9 P# C7 u3 g! r9 U7 P            else:
                hash_dict[image_hash] = image_path
        else:
8 a) Z/ n7 |1 G            pass
' r2 V; |: p3 e# C
$ b" e- ~+ ]3 K    for duplicate in duplicates:
! o2 p) w# u0 t& T" c( g        os.remove(duplicate)
' v0 r6 t- h) E4 o$ e" l; m' q        print(f"Removed duplicate image: {duplicate}")
" Y: B! H- V: c) S
    print("Duplicate removal complete.")

! f+ w; @2 w& |; simage_folder = 'D:/data/baidu/去重训练文件夹' #换成自己的文件夹
remove_duplicates(image_folder)

lattess

lattess 发表于 2024-7-23 16:25
6 R/ n- F0 c4 \! ?  M& x& @有一部分图重复了，写了一段代码来解决这个问题，有一张图片似乎有问题，困扰了我好久为什么一直报错，求哈 ...

; q4 R# T$ y! U* Q/ f有问题的图片名为1558571_114.png

一言九鼎

tinbg 发表于 2024-7-12 19:13
2 p0 b; Q! @4 I大哥，你这个头像很爱啊，像ai又想vam，有没有出处

一眼ai