校园春色亚洲色图_亚洲视频分类_中文字幕精品一区二区精品_麻豆一区区三区四区产品精品蜜桃

主頁 > 知識庫 > Python列表刪除重復元素與圖像相似度判斷及刪除實例代碼

Python列表刪除重復元素與圖像相似度判斷及刪除實例代碼

熱門標簽:江蘇房產(chǎn)電銷機器人廠家 荊州云電銷機器人供應商 電信營業(yè)廳400電話申請 外呼不封號系統(tǒng) 遼寧400電話辦理多少錢 悟空智電銷機器人6 溫州旅游地圖標注 幫人做地圖標注收費算詐騙嗎 蘇州電銷機器人十大排行榜

發(fā)現(xiàn)問題

項目需要,需要刪除文件夾中的冗余圖片。涉及圖像文件名的操作,圖像文件名存儲在list中

python list刪除元素有remove()和pop(),remove()對元素進行操作,pop()對索引進行操作,并會返回pop掉的值。一個只會從列表移除一個數(shù)

一.如果已經(jīng)有了一個列表l,令h=l,對l操作時同時會影響h,貌似原因是內(nèi)存共享的,正確的方法是h=l.copy()

二.測試時,發(fā)現(xiàn)一個問題,如下面代碼和結(jié)果:

item=2時,并沒有把2全部刪掉,后面重復的3也沒有刪去。

**查閱一些資料后發(fā)現(xiàn):list的遍歷是基于下標的不是基于元素,你刪掉一個元素后,列表就發(fā)生了變化,所有的元素都往前移動了一個位置,假設要刪除重的2,一個列表中索引為4,對應的值為2,索引為5,對應的值為2,索引為6,對應的值為3,當前循環(huán)刪掉索引4時對應的值2之后,索引4的值為2,索引5,值為3,下一次循環(huán),本來要再刪一個2,但此時索引為5對應的為3,就漏掉了一個2。

解決方案:

(1)倒序循環(huán)遍歷:

(2)實際用的方法,判斷到重復元素后,將那個item復制為0或‘0',相當于用一個標識符占住重復元素的位置,循環(huán)時先判斷是否為‘0',最后通過

list = list(set(list))

list.remove('0')

即可

附圖像去冗余算法,判斷圖像相似通過,感知哈希算法和三通道直方圖,及圖像尺寸

from img_similarity import runtwoImageSimilaryFun
import os
from PIL import Image
import shutil
import time
import numpy as np
 
def similar(path1, path2):
    img1 = Image.open(path1)
    img2 = Image.open(path2)
    w1 = img1.size[0] # 圖片的寬
    h1 = img2.size[1]  # 圖片的高
    w2 = img2.size[0] # 圖片的寬
    h2 = img2.size[1]  # 圖片的高
    w_err = abs(w1 - w2)/w1
    h_err = abs(h1 - h2)/h1
    if w_err > 0.1 or h_err >0.1:
        return 0
    else:
        phash, color_hist = runtwoImageSimilaryFun(path1, path2)
        if phash =8 or color_hist >=0.9:
            return 1
        else:
            return 0
 
 
path = './crop_img'
result_imgdirs_path = './removed_repeat_img'
folderlist = os.listdir(path)
folderlist.sort()
for item in folderlist:
    folder_path = path + '/' + item
    new_folder_path = result_imgdirs_path + '/' + item
    os.makedirs(new_folder_path)
 
    imglist = os.listdir(folder_path)
    imglist.sort()
 
    time_start = time.time()
 
    for i,item1 in enumerate(imglist):
        if item1 == '0':
            continue
        path1 = folder_path + '/' + item1
        for j, item2 in enumerate(imglist[i + 1:]):
            if item2 == '0':
                continue
            path2 = folder_path + '/' + item2
            t = similar(path1, path2)
            if t:
                #將判斷為相似的圖片在trans_list中的名字置‘0',代表不需要復制
                imglist[i+j+1] = '0'
 
    imglist = list(set(imglist))
    imglist.remove('0')
 
    time_end = time.time()
    time_c = time_end - time_start
    print('{} similarity judgement list time cost {}s'.format(item, time_c))
 
 
    time_start = time.time()
    #移動圖片
    for item3 in imglist:
        ori_img_path = folder_path + '/' + item3
        new_img_path = new_folder_path + '/' + item3
        shutil.copy(ori_img_path, new_img_path)
 
    time_end = time.time()
    time_c = time_end - time_start # 運行所花時間
    print('{} move image time cost {}s'.format(item, time_c))

img_similarity.py

import cv2
import numpy as np
from PIL import Image
import requests
from io import BytesIO
import matplotlib
 
matplotlib.use('TkAgg')
import matplotlib.pyplot as plt
 
 
def aHash(img):
    # 均值哈希算法
    # 縮放為8*8
    img = cv2.resize(img, (8, 8))
    # 轉(zhuǎn)換為灰度圖
    gray = cv2.cvtColor(img, cv2.COLOR_BGR2GRAY)
    # s為像素和初值為0,hash_str為hash值初值為''
    s = 0
    hash_str = ''
    # 遍歷累加求像素和
    for i in range(8):
        for j in range(8):
            s = s + gray[i, j]
    # 求平均灰度
    avg = s / 64
    # 灰度大于平均值為1相反為0生成圖片的hash值
    for i in range(8):
        for j in range(8):
            if gray[i, j] > avg:
                hash_str = hash_str + '1'
            else:
                hash_str = hash_str + '0'
    return hash_str
 
 
def dHash(img):
    # 差值哈希算法
    # 縮放8*8
    img = cv2.resize(img, (9, 8))
    # 轉(zhuǎn)換灰度圖
    gray = cv2.cvtColor(img, cv2.COLOR_BGR2GRAY)
    hash_str = ''
    # 每行前一個像素大于后一個像素為1,相反為0,生成哈希
    for i in range(8):
        for j in range(8):
            if gray[i, j] > gray[i, j + 1]:
                hash_str = hash_str + '1'
            else:
                hash_str = hash_str + '0'
    return hash_str
 
 
def pHash(img):
    # 感知哈希算法
    # 縮放32*32
    img = cv2.resize(img, (32, 32))  # , interpolation=cv2.INTER_CUBIC
    # 轉(zhuǎn)換為灰度圖
    gray = cv2.cvtColor(img, cv2.COLOR_BGR2GRAY)
    # 將灰度圖轉(zhuǎn)為浮點型,再進行dct變換
    dct = cv2.dct(np.float32(gray))
    # opencv實現(xiàn)的掩碼操作
    dct_roi = dct[0:8, 0:8]
 
    hash = []
    avreage = np.mean(dct_roi)
    for i in range(dct_roi.shape[0]):
        for j in range(dct_roi.shape[1]):
            if dct_roi[i, j] > avreage:
                hash.append(1)
            else:
                hash.append(0)
    return hash
 
 
def calculate(image1, image2):
    # 灰度直方圖算法
    # 計算單通道的直方圖的相似值
    hist1 = cv2.calcHist([image1], [0], None, [256], [0.0, 255.0])
    hist2 = cv2.calcHist([image2], [0], None, [256], [0.0, 255.0])
    # 計算直方圖的重合度
    degree = 0
    for i in range(len(hist1)):
        if hist1[i] != hist2[i]:
            degree = degree + \

                     (1 - abs(hist1[i] - hist2[i]) / max(hist1[i], hist2[i]))
        else:
            degree = degree + 1
    degree = degree / len(hist1)
    return degree
 
 
def classify_hist_with_split(image1, image2, size=(256, 256)):
    # RGB每個通道的直方圖相似度
    # 將圖像resize后,分離為RGB三個通道,再計算每個通道的相似值
    image1 = cv2.resize(image1, size)
    image2 = cv2.resize(image2, size)
    sub_image1 = cv2.split(image1)
    sub_image2 = cv2.split(image2)
    sub_data = 0
    for im1, im2 in zip(sub_image1, sub_image2):
        sub_data += calculate(im1, im2)
    sub_data = sub_data / 3
    return sub_data
 
 
def cmpHash(hash1, hash2):
    # Hash值對比
    # 算法中1和0順序組合起來的即是圖片的指紋hash。順序不固定,但是比較的時候必須是相同的順序。
    # 對比兩幅圖的指紋,計算漢明距離,即兩個64位的hash值有多少是不一樣的,不同的位數(shù)越小,圖片越相似
    # 漢明距離:一組二進制數(shù)據(jù)變成另一組數(shù)據(jù)所需要的步驟,可以衡量兩圖的差異,漢明距離越小,則相似度越高。漢明距離為0,即兩張圖片完全一樣
    n = 0
    # hash長度不同則返回-1代表傳參出錯
    if len(hash1) != len(hash2):
        return -1
    # 遍歷判斷
    for i in range(len(hash1)):
        # 不相等則n計數(shù)+1,n最終為相似度
        if hash1[i] != hash2[i]:
            n = n + 1
    return n
 
 
def getImageByUrl(url):
    # 根據(jù)圖片url 獲取圖片對象
    html = requests.get(url, verify=False)
    image = Image.open(BytesIO(html.content))
    return image
 
 
def PILImageToCV():
    # PIL Image轉(zhuǎn)換成OpenCV格式
    path = "/Users/waldenz/Documents/Work/doc/TestImages/t3.png"
    img = Image.open(path)
    plt.subplot(121)
    plt.imshow(img)
    print(isinstance(img, np.ndarray))
    img = cv2.cvtColor(np.asarray(img), cv2.COLOR_RGB2BGR)
    print(isinstance(img, np.ndarray))
    plt.subplot(122)
    plt.imshow(img)
    plt.show()
 
 
def CVImageToPIL():
    # OpenCV圖片轉(zhuǎn)換為PIL image
    path = "/Users/waldenz/Documents/Work/doc/TestImages/t3.png"
    img = cv2.imread(path)
    # cv2.imshow("OpenCV",img)
    plt.subplot(121)
    plt.imshow(img)
 
    img2 = Image.fromarray(cv2.cvtColor(img, cv2.COLOR_BGR2RGB))
    plt.subplot(122)
    plt.imshow(img2)
    plt.show()
 
 
def bytes_to_cvimage(filebytes):
    # 圖片字節(jié)流轉(zhuǎn)換為cv image
    image = Image.open(filebytes)
    img = cv2.cvtColor(np.asarray(image), cv2.COLOR_RGB2BGR)
    return img
 
 
def runAllImageSimilaryFun(para1, para2):
    # 均值、差值、感知哈希算法三種算法值越小,則越相似,相同圖片值為0
    # 三直方圖算法和單通道的直方圖 0-1之間,值越大,越相似。 相同圖片為1
    # t1,t2   14;19;10;  0.70;0.75
    # t1,t3   39 33 18   0.58 0.49
    # s1,s2  7 23 11     0.83 0.86  挺相似的圖片
    # c1,c2  11 29 17    0.30 0.31
 
    if para1.startswith("http"):
        # 根據(jù)鏈接下載圖片,并轉(zhuǎn)換為opencv格式
        img1 = getImageByUrl(para1)
        img1 = cv2.cvtColor(np.asarray(img1), cv2.COLOR_RGB2BGR)
 
        img2 = getImageByUrl(para2)
        img2 = cv2.cvtColor(np.asarray(img2), cv2.COLOR_RGB2BGR)
    else:
        # 通過imread方法直接讀取物理路徑
        img1 = cv2.imread(para1)
        img2 = cv2.imread(para2)
 
    hash1 = aHash(img1)
    hash2 = aHash(img2)
    n1 = cmpHash(hash1, hash2)
    print('均值哈希算法相似度aHash:', n1)
 
    hash1 = dHash(img1)
    hash2 = dHash(img2)
    n2 = cmpHash(hash1, hash2)
    print('差值哈希算法相似度dHash:', n2)
 
    hash1 = pHash(img1)
    hash2 = pHash(img2)
    n3 = cmpHash(hash1, hash2)
    print('感知哈希算法相似度pHash:', n3)
 
    n4 = classify_hist_with_split(img1, img2)
    print('三直方圖算法相似度:', n4)
 
    n5 = calculate(img1, img2)
    print("單通道的直方圖", n5)
    print("%d %d %d %.2f %.2f " % (n1, n2, n3, round(n4[0], 2), n5[0]))
    print("%.2f %.2f %.2f %.2f %.2f " % (1 - float(n1 / 64), 1 -
                                         float(n2 / 64), 1 - float(n3 / 64), round(n4[0], 2), n5[0]))
 
    plt.subplot(121)
    plt.imshow(Image.fromarray(cv2.cvtColor(img1, cv2.COLOR_BGR2RGB)))
    plt.subplot(122)
    plt.imshow(Image.fromarray(cv2.cvtColor(img2, cv2.COLOR_BGR2RGB)))
    plt.show()
 
 
def runtwoImageSimilaryFun(para1, para2):
    # 均值、差值、感知哈希算法三種算法值越小,則越相似,相同圖片值為0
    # 三直方圖算法和單通道的直方圖 0-1之間,值越大,越相似。 相同圖片為1
    # t1,t2   14;19;10;  0.70;0.75
    # t1,t3   39 33 18   0.58 0.49
    # s1,s2  7 23 11     0.83 0.86  挺相似的圖片
    # c1,c2  11 29 17    0.30 0.31
 
    if para1.startswith("http"):
        # 根據(jù)鏈接下載圖片,并轉(zhuǎn)換為opencv格式
        img1 = getImageByUrl(para1)
        img1 = cv2.cvtColor(np.asarray(img1), cv2.COLOR_RGB2BGR)
 
        img2 = getImageByUrl(para2)
        img2 = cv2.cvtColor(np.asarray(img2), cv2.COLOR_RGB2BGR)
    else:
        # 通過imread方法直接讀取物理路徑
        img1 = cv2.imread(para1)
        img2 = cv2.imread(para2)
 
 
    hash1 = pHash(img1)
    hash2 = pHash(img2)
    n3 = cmpHash(hash1, hash2)
 
    n4 = classify_hist_with_split(img1, img2)
 
    return n3, n4
 
 
 
if __name__ == "__main__":
    p1 = '/Users/Desktop/11/24.jpeg'
    p2 = '/Users/Desktop/11/25.jpeg'
    runAllImageSimilaryFun(p1, p2)

總結(jié)

到此這篇關于Python列表刪除重復元素與圖像相似度判斷及刪除的文章就介紹到這了,更多相關Python列表刪除重復元素內(nèi)容請搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關文章希望大家以后多多支持腳本之家!

您可能感興趣的文章:
  • python中必會的四大高級數(shù)據(jù)類型(字符,元組,列表,字典)
  • Python 統(tǒng)計列表中重復元素的個數(shù)并返回其索引值的實現(xiàn)方法
  • Python基礎詳解之列表復制
  • Python 把兩層列表展開平鋪成一層(5種實現(xiàn)方式)
  • 淺談Python列表嵌套字典轉(zhuǎn)化的問題
  • Python隨機函數(shù)random隨機獲取數(shù)字、字符串、列表等使用詳解
  • Python列表排序方法reverse、sort、sorted詳解
  • Python3 列表list合并的4種方法
  • python獲取指定時間段內(nèi)特定規(guī)律的日期列表
  • python實現(xiàn)合并兩個有序列表的示例代碼
  • python求列表對應元素的乘積和的實現(xiàn)
  • Python統(tǒng)計列表元素出現(xiàn)次數(shù)的方法示例
  • python 合并列表的八種方法
  • python 列表元素左右循環(huán)移動 的多種解決方案
  • Python列表排序 list.sort方法和內(nèi)置函數(shù)sorted用法
  • 淺談Python基礎之列表那些事兒

標簽:宿遷 黃山 喀什 三沙 臺灣 欽州 景德鎮(zhèn) 濟南

巨人網(wǎng)絡通訊聲明:本文標題《Python列表刪除重復元素與圖像相似度判斷及刪除實例代碼》,本文關鍵詞  Python,列表,刪除,重復,元素,;如發(fā)現(xiàn)本文內(nèi)容存在版權問題,煩請?zhí)峁┫嚓P信息告之我們,我們將及時溝通與處理。本站內(nèi)容系統(tǒng)采集于網(wǎng)絡,涉及言論、版權與本站無關。
  • 相關文章
  • 下面列出與本文章《Python列表刪除重復元素與圖像相似度判斷及刪除實例代碼》相關的同類信息!
  • 本頁收集關于Python列表刪除重復元素與圖像相似度判斷及刪除實例代碼的相關信息資訊供網(wǎng)民參考!
  • 推薦文章
    校园春色亚洲色图_亚洲视频分类_中文字幕精品一区二区精品_麻豆一区区三区四区产品精品蜜桃
    日韩精品中文字幕在线一区| 国产精品18久久久久久久久久久久 | 99视频热这里只有精品免费| 日韩精品中文字幕一区二区三区| 美女视频免费一区| 精品国产一区二区三区不卡 | 麻豆国产欧美一区二区三区| 欧美日韩亚洲综合| 天堂一区二区在线| 国产日韩欧美不卡| 91亚洲男人天堂| 亚洲国产综合人成综合网站| 欧美一区二区久久久| 成人黄色软件下载| 午夜精品久久久久久| 久久久一区二区三区捆绑**| 色哟哟国产精品| 狠狠色综合播放一区二区| 国产欧美一区二区精品忘忧草| 日本高清无吗v一区| 国产一区二区在线电影| 亚洲男人的天堂av| 欧美日韩一区久久| 99久精品国产| 菠萝蜜视频在线观看一区| 麻豆国产精品一区二区三区| 国产精品传媒入口麻豆| 精品日韩99亚洲| 欧美视频一区二区| 色久综合一二码| 日本va欧美va瓶| 青娱乐精品视频| ...av二区三区久久精品| 欧美成人乱码一区二区三区| 91香蕉国产在线观看软件| 国产一区二区三区四区在线观看| 卡一卡二国产精品| 男女激情视频一区| 偷窥少妇高潮呻吟av久久免费| 一区二区三区四区蜜桃| 一区二区三区视频在线观看| 亚洲日本免费电影| 成人欧美一区二区三区视频网页| 国产精品成人免费在线| 一区二区三区小说| 麻豆91在线观看| 国产成人免费视频一区| 99国产精品国产精品久久| 欧美日韩中文字幕精品| 久久奇米777| 亚洲欧洲韩国日本视频| 亚洲小说春色综合另类电影| 乱中年女人伦av一区二区| 国产成人精品一区二区三区网站观看| 国产成人av一区二区| 成人av中文字幕| 欧美一区二区三区喷汁尤物| 国产精品网站导航| 精品一区二区三区免费视频| 91福利精品视频| 日本一区二区三区四区在线视频 | 亚洲国产成人私人影院tom | 国产女人18水真多18精品一级做| 一区二区三区高清| 成人sese在线| 日本一区二区三区在线观看| 日一区二区三区| 欧美色精品天天在线观看视频| 国产精品成人免费| 成人精品在线视频观看| 日韩一级黄色片| 日日夜夜精品免费视频| 欧美在线视频全部完| 亚洲欧洲av在线| 粉嫩aⅴ一区二区三区四区| 欧美成va人片在线观看| 日韩精品亚洲一区二区三区免费| 欧美亚洲动漫制服丝袜| 亚洲综合久久久| 欧美日韩亚洲高清一区二区| 亚洲午夜激情av| 制服.丝袜.亚洲.另类.中文| 天堂成人免费av电影一区| 在线观看网站黄不卡| 日韩精品一卡二卡三卡四卡无卡| 日韩一区二区三区视频在线观看| 美女在线视频一区| 国产片一区二区| 欧美午夜影院一区| 国产综合一区二区| 一区二区日韩电影| 日韩欧美视频一区| 国产一区二区看久久| 国产精品福利一区| 日韩欧美中文字幕公布| 成人免费高清视频在线观看| 亚洲综合男人的天堂| www国产精品av| 欧美精品一二三| 一本大道久久a久久精品综合| 琪琪久久久久日韩精品| 亚洲综合区在线| 26uuu欧美日本| 欧美三级乱人伦电影| 国产精品自拍av| 日韩av在线发布| 亚洲男人的天堂av| 最新成人av在线| 国产精品电影院| 自拍视频在线观看一区二区| 日韩欧美成人一区二区| 欧美日韩在线精品一区二区三区激情| 国产精品888| 丁香婷婷深情五月亚洲| 国产成人在线电影| 97久久超碰国产精品| 不卡一二三区首页| 91蝌蚪porny九色| 欧洲生活片亚洲生活在线观看| 成人app软件下载大全免费| 99精品视频一区二区| 色成人在线视频| 在线电影国产精品| 国产欧美综合色| 亚洲一区在线观看免费| 日韩精品乱码免费| 久久99国内精品| 高清久久久久久| 欧美日精品一区视频| 欧美mv日韩mv亚洲| 欧美韩国日本不卡| 亚洲一区免费观看| 麻豆精品视频在线| 在线免费观看不卡av| 91麻豆精品国产91久久久资源速度| 欧美美女一区二区三区| 久久久国产精品午夜一区ai换脸| 国产精品久久久99| 韩国成人福利片在线播放| 99久久免费国产| 日韩精品一区二区三区中文精品| 国产婷婷一区二区| 蜜桃视频第一区免费观看| 99精品在线免费| 中文字幕一区视频| 国产mv日韩mv欧美| 日韩精品一区二区三区视频播放| 一区二区三区四区乱视频| 国产suv精品一区二区三区 | 欧美精品自拍偷拍| 国产精品理伦片| 成人v精品蜜桃久久一区| 国产视频在线观看一区二区三区| 麻豆国产91在线播放| 欧美成人一区二区三区片免费| 亚洲综合区在线| 日本韩国一区二区| 亚洲超碰97人人做人人爱| 欧洲另类一二三四区| 性做久久久久久免费观看欧美| 色狠狠综合天天综合综合| 亚洲精品国产一区二区三区四区在线 | 日韩亚洲欧美成人一区| 国产一区美女在线| 亚洲欧洲国产日韩| 色综合欧美在线视频区| 亚洲国产成人av| 精品久久一区二区三区| 成人的网站免费观看| 亚洲高清免费视频| 日韩精品一区二区三区在线| 高清国产一区二区| 亚洲国产综合人成综合网站| 欧美一卡二卡三卡四卡| av不卡免费电影| 免费观看在线综合色| 久久久久久免费网| 欧美日韩一区二区三区在线| 国产在线播精品第三| 一区二区三区毛片| 久久久久久久久久久电影| 欧美性猛交xxxxxxxx| 成人网在线免费视频| 蜜桃视频一区二区| 日本中文一区二区三区| 一区二区三区精品视频| 中文字幕一区二区三区四区不卡 | 99久久99久久精品国产片果冻| 青青草97国产精品免费观看 | 日韩中文欧美在线| 国产婷婷色一区二区三区在线| 欧美日韩激情一区二区三区| 99久久婷婷国产综合精品| 国产乱码字幕精品高清av | 三级成人在线视频| 亚洲视频一区二区免费在线观看| 日韩美女在线视频 | 在线播放亚洲一区| 日韩一区二区三区在线视频| 欧美网站一区二区|