আমি আমার সাইটে কেবলমাত্র একটি ভবিষ্যদ্বাণীপূর্ণ অনুসন্ধান (নীচের উদাহরণ দেখুন) বৈশিষ্ট্য যুক্ত করেছি যা একটি উবুন্টু সার্ভারে চলে। এটি সরাসরি একটি ডাটাবেস থেকে চালানো হয়। আমি প্রতিটি অনুসন্ধানের জন্য ফলাফলটি ক্যাশে করতে চাই এবং এটি যদি উপস্থিত থাকে তবে তা তৈরি করুন।
আমার এক ডিরেক্টরিতে পৃথক ফাইলের 10 মিলিয়ন ফলাফলের সম্ভাব্য সীরা সংরক্ষণ করতে কোনও সমস্যা হবে কি? বা এগুলি ফোল্ডারে বিভক্ত করার পরামর্শ দেওয়া হচ্ছে?
উদাহরণ:
5
এটি বিভক্ত করা ভাল। যে ডিরেক্টরিটি সেই ডিরেক্টরিটির বিষয়বস্তু তালিকাভুক্ত করার চেষ্টা করে তা সম্ভবত এটির শ্যুটিং করার সিদ্ধান্ত নেবে।
—
মুরু
সুতরাং আপনার যদি ইতিমধ্যে একটি ডাটাবেস থাকে তবে কেন এটি ব্যবহার করবেন না? আমি নিশ্চিত যে ডিবিএমএস ফাইল সিস্টেমের তুলনায় কয়েক মিলিয়ন রেকর্ড পরিচালনা করতে সক্ষম হবে। আপনি যদি ফাইল সিস্টেমটি ব্যবহারে অবিচ্ছিন্ন হয়ে থাকেন তবে কোনও ধরণের হ্যাশ ব্যবহার করে আপনাকে একটি বিভাজন স্কিম নিয়ে আসতে হবে, এই মুহুর্তে আইএমএইচও এটি ডিবি ব্যবহার করে কম কাজ করবে বলে মনে হচ্ছে।
—
রোডএমআর
আপনার মডেলটি আরও ভাল ফিট করতে পারে এমন ক্যাচিংয়ের জন্য অন্য একটি বিকল্প ম্যাকচেড বা পুনরায় করা যেতে পারে। এগুলি কী ভ্যালু স্টোর (যাতে তারা একক ডিরেক্টরি হিসাবে কাজ করে এবং আপনি কেবল নামেই আইটেমগুলিতে অ্যাক্সেস করেন)। রেডিস অবিরাম থাকে (পুনরায় চালু করার সময় ডেটা হারাবে না) যেখানে মেমক্যাচ করা আরও অস্থায়ী আইটেমগুলির জন্য।
—
স্টিফেন অসটারমিলার
এখানে মুরগি ও ডিমের সমস্যা রয়েছে। সরঞ্জাম বিকাশকারীরা প্রচুর সংখ্যক ফাইল সহ ডিরেক্টরি পরিচালনা করে না কারণ লোকেরা তা করে না। এবং লোকেরা প্রচুর সংখ্যক ফাইল দিয়ে ডিরেক্টরি তৈরি করে না কারণ সরঞ্জামগুলি এটিকে ভাল সমর্থন করে না। উদাহরণস্বরূপ আমি একসময় বুঝতে পারি (এবং আমি এটি এখনও সত্য বলে বিশ্বাস করি),
os.listdirপাইথনের জেনারেটর সংস্করণ তৈরি করার একটি বৈশিষ্ট্য অনুরোধটি এই কারণে স্পষ্টভাবে অস্বীকার করা হয়েছিল।
আমার নিজের অভিজ্ঞতা থেকে আমি লিনাক্স ২.6-এ একটি ডিরেক্টরিতে 32 কে ফাইলের ওপরে যাওয়ার সময় ভাঙ্গা দেখেছি। অবশ্যই এই বিন্দুটি ছাড়িয়ে টিউন করা সম্ভব, তবে আমি এটির প্রস্তাব দেব না। কেবলমাত্র উপ-ডিরেক্টরিগুলির কয়েকটি স্তরগুলিতে বিভক্ত করুন এবং এটি আরও ভাল হবে। ব্যক্তিগতভাবে আমি এটি প্রতি ডিরেক্টরি 10,000 এর মধ্যে সীমাবদ্ধ করতাম যা আপনাকে 2 স্তর সরবরাহ করবে।
—
ওল্ফ
