আক্ষরিক সহস্রাধিক পিডিএফ সহ আমার একটি বিশাল বড় লিগ্যাসি সাইট রয়েছে যা কখনও কখনও ডাটাবেসে অ্যাকাউন্ট করে থাকে তবে প্রায়শই কেবল পৃষ্ঠায় লিঙ্ক থাকে এবং সাইটের বেশিরভাগ ডিরেক্টরিতে সঞ্চিত থাকে।
আমি আমার সাইটের সমস্ত লিঙ্কগুলি অনুসরণ করার জন্য একটি পিএইচপি ক্রলার লিখেছি এবং তারপরে আমি এটির সাথে ডিরেক্টরি কাঠামোর ডাম্পের সাথে তুলনা করছি, তবে কি আরও সহজ কিছু আছে?