অন্যরা যে উত্তর দিয়েছে সেগুলি সম্প্রসারণ করতে:
কম্পিউটারগুলি আদর্শভাবে প্রদর্শন করা উচিত এমন প্রচুর অক্ষর সহ আমরা প্রচুর ভাষা পেয়েছি। ইউনিকোড প্রতিটি অক্ষরকে একটি অনন্য নম্বর বা কোড পয়েন্ট বরাদ্দ করে।
কম্পিউটারগুলি বাইটের মতো সংখ্যার সাথে ডিল করে ... এখানে কিছুটা ইতিহাস এড়িয়ে যাওয়া এবং মেমরির সমাধানের বিষয়গুলি উপেক্ষা করে 8-বিট কম্পিউটারগুলি 8-বিট বাইটকে সবচেয়ে বড় সংখ্যাগত ইউনিট হিসাবে মনে করবে যা সহজেই হার্ডওয়্যারে উপস্থাপিত হয়, 16-বিট কম্পিউটারগুলি প্রসারিত হবে যে দুটি বাইট, এবং আরও।
পুরানো চরিত্রের এনকোডিংগুলি যেমন এএসসিআইআই (পূর্ব-পূর্ব) 8-বিট যুগের, এবং সেই সময়কার কম্পিউটারে অর্থাত্ ইংরেজিকে 0 থেকে 127 (b বিট) পর্যন্ত সংখ্যায় ক্রম করার চেষ্টা করুন। বর্ণমালায় 26 টি অক্ষর সহ মূলধন এবং অ-মূলধন উভয় আকারে, সংখ্যা এবং বিরাম চিহ্নগুলি, যা বেশ কার্যকরভাবে কাজ করেছিল। অন্যান্য, অ-ইংরাজী ভাষার জন্য এএসসিআইআই একটি অষ্টম বিট দ্বারা প্রসারিত হয়েছে, তবে এই সম্প্রসারণ দ্বারা উপলব্ধ অতিরিক্ত 128 নম্বর / কোড পয়েন্টগুলি ভাষার প্রদর্শিত হওয়ার উপর নির্ভর করে বিভিন্ন অক্ষরে ম্যাপ করা হবে। আইএসও -8859 মান এই ম্যাপিংয়ের সর্বাধিক সাধারণ রূপ; আইএসও -8859-1 এবং আইএসও -8859-15 (এছাড়াও আইএসও-ল্যাটিন -1, লাতিন 1, এবং হ্যাঁ 8859 আইএসও স্ট্যান্ডার্ডের দুটি পৃথক সংস্করণও রয়েছে)।
আপনি যখন একাধিক ভাষার অক্ষর উপস্থাপন করতে চান তবে এটি পর্যাপ্ত নয়, সুতরাং সমস্ত উপলভ্য অক্ষরকে একক বাইটে ক্র্যামিং করা কার্যকর হবে না।
মূলত দুটি ভিন্ন ধরণের এনকোডিং রয়েছে: একটি আরও বিট যুক্ত করে মান সীমা প্রসারিত করে। এই এনকোডিংগুলির উদাহরণগুলি ইউসিএস 2 (2 বাইট = 16 বিট) এবং ইউসিএস 4 (4 বাইট = 32 বিট) হবে। এএসসিআইআই এবং আইএসও -8859 স্ট্যান্ডার্ডের মতো তারা সহজাতভাবে একই সমস্যায় ভুগছেন, কারণ তাদের মান সীমাটি এখনও সীমাবদ্ধ, এমনকি সীমাটি চূড়ান্তভাবে বেশি হলেও।
অন্য ধরণের এনকোডিংটিতে অক্ষর প্রতি পরিবর্তনীয় সংখ্যক বাইট ব্যবহার করা হয় এবং এর জন্য সর্বাধিক পরিচিত এনকোডিংগুলি হ'ল ইউটিএফ এনকোডিং। সমস্ত ইউটিএফ এনকোডিংগুলি প্রায় একই পদ্ধতিতে কাজ করে: আপনি একটি ইউনিট আকার চয়ন করেন, যা ইউটিএফ -8 এর জন্য 8 বিট, ইউটিএফ -16 16 বিট, এবং ইউটিএফ -32 এর 32 টি বিট রয়েছে। স্ট্যান্ডার্ডটি এই বিটগুলির কয়েকটিটিকে পতাকা হিসাবে সংজ্ঞায়িত করে: যদি সেগুলি সেট করা থাকে, তবে পরবর্তী ইউনিটকে এককের ক্রমানুসারে একই অক্ষরের অংশ হিসাবে বিবেচনা করা হবে। যদি সেগুলি সেট না করা থাকে তবে এই ইউনিটটি একটি চরিত্রকে পুরোপুরি উপস্থাপন করে। সুতরাং সর্বাধিক প্রচলিত (ইংরেজি) অক্ষরগুলি কেবলমাত্র ইউটিএফ -8 (ইউটিএফ -16 এ দুটি, ইউটিএফ -32-এ 4) কেবল একটি বাইট দখল করে, তবে অন্যান্য ভাষার অক্ষরগুলি ছয়টি বাইট বা আরও বেশি দখল করতে পারে।
মাল্টি-বাইট এনকোডিংগুলি (আমার উপরের ব্যাখ্যার পরে মাল্টি-ইউনিট বলতে হবে) এর সুবিধাটি হ'ল তারা তুলনামূলকভাবে স্থান-দক্ষ, তবে ডাউনসাইড যেগুলি অপারেশনগুলি যেমন সাবস্ট্রিংগুলি, তুলনা ইত্যাদির সন্ধান ইত্যাদির জন্য ইউনিকোড কোডে অক্ষরগুলি ডিকোড করতে হয় এই জাতীয় ক্রিয়াকলাপ সম্পাদন করার আগে পয়েন্টগুলি (যদিও কিছু শর্টকাট রয়েছে)।
ইউসিএস স্ট্যান্ডার্ড এবং ইউটিএফ স্ট্যান্ডার্ড উভয়ই ইউনিকোডে সংজ্ঞায়িত কোড পয়েন্টগুলি এনকোড করে। তত্ত্ব অনুসারে, এই এনকোডিংগুলি যে কোনও সংখ্যার (এনকোডিং সমর্থন করে এমন সীমার মধ্যে) এনকোড করতে ব্যবহৃত হতে পারে - তবে অবশ্যই এই এনকোডিংগুলি ইউনিকোড কোড পয়েন্টগুলি এনকোড করার জন্য তৈরি করা হয়েছিল। এবং এটাই তাদের মধ্যে আপনার সম্পর্ক।
উইন্ডোজ তথাকথিত "ইউনিকোড" স্ট্রিংগুলিকে ইউটিএফ -16 স্ট্রিং হিসাবে পরিচালনা করে, যখন বেশিরভাগ ইউনিক্স আজকাল ইউটিএফ -8 এ ডিফল্ট হয়। ইউটিএফ -8-তে ইউনিট আকার ASCII এর মতো হওয়ায় HTTP এর মতো যোগাযোগের প্রোটোকলগুলি ইউটিএফ -8 এর সাথে সবচেয়ে ভাল কাজ করার প্রবণতা রয়েছে এবং এ জাতীয় বেশিরভাগ প্রোটোকল ASCII যুগে নকশা করা হয়েছিল। অন্যদিকে, ইউটিএফ -16 সমস্ত জীবিত ভাষার প্রতিনিধিত্ব করার সময় সেরা গড় স্থান / প্রসেসিং কর্মক্ষমতা দেয় ।
ইউনিকোড স্ট্যান্ডার্ড 32 বিটগুলিতে প্রতিনিধিত্ব করার চেয়ে কম কোড পয়েন্টগুলি সংজ্ঞায়িত করে। সুতরাং সমস্ত ব্যবহারিক উদ্দেশ্যে, ইউটিএফ -32 এবং ইউসিএস 4 একই এনকোডিং হয়ে গেছে, আপনি ইউটিএফ -32-তে মাল্টি-ইউনিট অক্ষরগুলির সাথে ডিল করার সম্ভাবনা কম।
আশা করি কিছু বিবরণ পূরণ করে।
