সম্ভাব্য সমাধান হিসাবে আপনি কোনও সরঞ্জামকে মেটাডেটা তথ্য ছাড়াই সঙ্কুচিত স্ট্রিমে ( pcm, wav) রূপান্তর করতে এবং তারপরে তুলনা করতে পারেন। রূপান্তরকরণের জন্য আপনি আপনার পছন্দ মতো যে কোনও সফটওয়্যার ব্যবহার করতে পারেন ffmpeg, soxবা avidemux।
উদাহরণস্বরূপ আমি ffmpeg দিয়ে এটি কীভাবে করি
বলুন যে আমার কাছে উদাহরণস্বরূপ 2 টি পৃথক মেটাডেটা যুক্ত ফাইল রয়েছে:
$ diff Original.mp3 Possible-dup.mp3 ; echo $?
Binary files Original.mp3 and Possible-dup.mp3 differ
ব্রুট ফোর্স তুলনা অভিযোগ তারা পৃথক।
তারপরে আমরা কেবল রূপান্তরিত করি এবং শরীরকে পৃথক করি:
$ diff <( ffmpeg -loglevel 8 -i Original.mp3 -map_metadata -1 -f wav - ) <( ffmpeg -loglevel 8 -i Possible-dup.mp3 -map_metadata -1 -f wav - ) ; echo $?
0
অফ কোর্সের ; echo $?অংশটি কেবল রিটার্ন কোডটি দেখার জন্য প্রদর্শনের উদ্দেশ্যে।
একাধিক ফাইল প্রক্রিয়াজাতকরণ (ট্রান্সভার্স ডিরেক্টরি)
আপনি সংগ্রহ সদৃশ চেষ্টা চান এটা ক্যালকুলেট চেকসাম মূল্য আছে (যে কোন মত crc, md5, sha2, sha256) ডেটা এবং তারপর ঠিক আছে দুর্ঘটনায় পাবেন।
যদিও এটির প্রশ্নের আওতার বাইরে, আমি ডিরেক্টরি সম্পর্কিত অ্যাকাউন্টে কেবলমাত্র মেটাডেটা বিবেচনা না করেই ফাইলগুলির নকলগুলি কীভাবে সন্ধান করতে পারি সে সম্পর্কে কিছু সহজ পরামর্শ দেব।
- প্রথমে প্রতিটি ফাইলে ডেটার হ্যাশ গণনা করুন (এবং পরবর্তী প্রসেসিংয়ের জন্য ফাইলে রাখুন):
for file in *.mp3; do printf "%s:%s\n" "$( ffmpeg -loglevel 8 -i "$file" -map_metadata -1 -f wav - | sha256sum | cut -d' ' -f1 )" "$file"; done > mp3data.hashes
ফাইলটি দেখতে এমন হবে: যে
$ cat mp3data.hashes
ad48913a11de29ad4639253f2f06d8480b73d48a5f1d0aaa24271c0ba3998d02:file1.mp3
54320b708cea0771a8cf71fac24196a070836376dd83eedd619f247c2ece7480:file2.mp3
1d8627a21bdbf74cc5c7bc9451f7db264c167f7df4cbad7d8db80bc2f347110f:Original.mp3
8918674499b90ace36bcfb94d0d8ca1bc9f8bb391b166f899779b373905ddbc1:Other-dup.mp3
8918674499b90ace36bcfb94d0d8ca1bc9f8bb391b166f899779b373905ddbc1:Other.mp3
1d8627a21bdbf74cc5c7bc9451f7db264c167f7df4cbad7d8db80bc2f347110f:Possible-dup.mp3
কোনও আরডিবিএমএস সেখানে সমষ্টিগত গণনা এবং এই জাতীয় ডেটা নির্বাচন করতে খুব সহায়ক হবে। তবে খাঁটি কমান্ড-লাইন সমাধানটি চালিয়ে যান আপনি আরও সহজ পদক্ষেপগুলি করতে চাইতে পারেন।
সদৃশ হ্যাশগুলি দেখুন যদি কোনও হয় (এটি কীভাবে কাজ করে তা দেখানোর জন্য অতিরিক্ত পদক্ষেপ, ডুপগুলি সন্ধানের জন্য প্রয়োজন হয় না):
$ count.by.regexp.awk '([0-9a-f]+):' mp3data.hashes
[1:54320b708cea0771a8cf71fac24196a070836376dd83eedd619f247c2ece7480]=1
[1:1d8627a21bdbf74cc5c7bc9451f7db264c167f7df4cbad7d8db80bc2f347110f]=2
[1:ad48913a11de29ad4639253f2f06d8480b73d48a5f1d0aaa24271c0ba3998d02]=1
- এবং সমস্ত একসাথে সামগ্রী দ্বারা নকল ফাইল তালিকাবদ্ধ :
$ grep mp3data.hashes -f <( count.by.regexp.awk '([0-9a-f]+):' mp3data.hashes | grep -oP '(?<=\[1:).{64}(?!]=1$)' ) | sort
1d8627a21bdbf74cc5c7bc9451f7db264c167f7df4cbad7d8db80bc2f347110f:Original.mp3
1d8627a21bdbf74cc5c7bc9451f7db264c167f7df4cbad7d8db80bc2f347110f:Possible-dup.mp3
8918674499b90ace36bcfb94d0d8ca1bc9f8bb391b166f899779b373905ddbc1:Other-dup.mp3
8918674499b90ace36bcfb94d0d8ca1bc9f8bb391b166f899779b373905ddbc1:Other.mp3
count.by.regexp.awk regexpawk নিদর্শন গণনা করার জন্য একটি সহজ স্ক্রিপ্ট।