সুতরাং আমাদের এক্সএসএস ফিল্টারিং পরীক্ষা করার জন্য আমাদের কাছে এক্সএসএস চিট শীট রয়েছে - তবে সৌম্য পৃষ্ঠার উদাহরণ ছাড়াও আমার ইউটিএফ -8 কোড মিসবিহিং ডেটা পরিচালনা করতে পারে তা নিশ্চিত করার জন্য আমি কোনও খারাপ বা ত্রুটিযুক্ত টেস্ট ডেটা খুঁজে পাচ্ছি না।
পরীক্ষার জন্য আমি কোথায় কিছু ভাল উহ .. খারাপ ডেটা পেতে পারি? বা চরগুলির একটি জটিল ক্রম কী?
~𝘈Ḇ𝖢𝕯٤ḞԍНǏ𝙅ƘԸⲘ𝙉০Ρ𝗤Ɍ𝓢ȚЦ𝒱Ѡ𝓧ƳȤѧᖯć𝗱ễ𝑓𝙜Ⴙ𝞲𝑗𝒌ļṃʼnо𝞎𝒒ᵲꜱ𝙩ừ𝗏ŵ𝒙𝒚ź1234567890!@#$%^&*()-_=+[{]};:'",<.>/?~ АḂ ꞠꓧȊ𝐉𝜥ꓡ𝑀𝑵Ǭ𝙿𝑄Ŗ𝑆𝒯𝖴𝘝𝘞ꓫŸ𝜡ả𝘢ƀ𝖼ḋếᵮℊ𝙝 Ꭵ𝕛 Ꭵ𝕛 кιṃ դ ⱺ𝓅𝘲𝕣𝖘ŧ𝑢ṽẉ𝘅 ყ ž1234567890! @ # $% ^ & * () -_ = + [{]}; : '', <।> /? ~Ѧ𝙱ƇᗞΣℱԍҤ١𝔍К𝓛𝓜ƝȎ𝚸𝑄Ṛ𝓢ṮṺƲᏔꓫ𝚈𝚭𝜶Ꮟçძ𝑒𝖿𝗀ḧ𝗂𝐣ҝɭḿ𝕟𝐨𝝔𝕢ṛ𝓼тú𝔳ẃ⤬𝝲𝗓1234567890!@#$%^&*()-_=+[{]};:'",<.>/?𝖠Β𝒞𝘋𝙴𝓕ĢȞỈ𝕵ꓗʟ𝙼ℕ 𝖠Β𝒞𝘋𝙴𝓕ĢȞỈ𝕵ꓗʟ𝙼ℕ০𝚸𝗤 Հꓢ ṰǓⅤ𝔚 Ⲭ𝑌𝙕𝘢𝕤
উত্তর:
পরীক্ষা করে দেখুন মার্কুস কুন এর হল UTF-8 ডিকোডার চাপ পরীক্ষা
আরও দেখুন চীনা অক্ষর সহ একটি ফাইল কীভাবে জানতে পারে যে প্রতি চরিত্রের জন্য কতগুলি বাইট ব্যবহার করতে হবে? - সন্দেহ নেই, অন্যান্য এসও প্রশ্নগুলিও সহায়তা করবে help
ইউটিএফ -8 এ আপনি নিম্নলিখিত ধরণের বাইট পাবেন:
Binary Hex Comments
0xxxxxxx 0x00..0x7F Only byte of a 1-byte character encoding
10xxxxxx 0x80..0xBF Continuation bytes (1-3 continuation bytes)
110xxxxx 0xC0..0xDF First byte of a 2-byte character encoding
1110xxxx 0xE0..0xEF First byte of a 3-byte character encoding
11110xxx 0xF0..0xF4 First byte of a 4-byte character encoding
(শেষ লাইনটি 0xF0..0xF7 পড়তে হবে বলে মনে হচ্ছে; তবে, ইউনিকোডের 21-বিট পরিসর (U +0000 - U + 10FFFF) এর অর্থ হল যে সর্বোচ্চ বৈধ মান 0xF4; মান 0xF5..0xF7 এর মধ্যে উপস্থিত হতে পারে না বৈধ ইউটিএফ -8।)
বাইটগুলির একটি নির্দিষ্ট ক্রমটি বৈধ ইউটিএফ -8 এর অর্থ কিনা তা দেখার অর্থ আপনার সম্পর্কে চিন্তা করা দরকার:
বৈধ ইউটিএফ -8 এ, বাইটস 0xF5..0xFF ঘটতে পারে না।
কিছু চরিত্রের জন্য একাধিক সম্ভাব্য উপস্থাপনা রয়েছে। উদাহরণস্বরূপ, ইউনিকোড অক্ষর U +0000 (ASCII NUL) প্রতিনিধিত্ব করতে পারে:
0x00
0xC0 0x80
0xE0 0x80 0x80
0xF0 0x80 0x80 0x80
তবে, ইউনিকোড স্ট্যান্ডার্ডটি পরিষ্কারভাবে জানিয়েছে যে শেষ তিনটি বিকল্প গ্রহণযোগ্য নয় কারণ সেগুলি ন্যূনতম নয়। এটি এমনটি ঘটে যে বাইটস 0xC0 এবং 0xC1 কখনই বৈধ ইউটিএফ -8 এ উপস্থিত হতে পারে না কারণ কেবলমাত্র অক্ষরগুলির দ্বারা এনকোড করা যেতে পারে 0x00..0x7F পরিসরে একক বাইট অক্ষর হিসাবে ন্যূনতমভাবে এনকোড করা হয়েছে।
বেসিক মাল্টি-ল্যাঙ্গুয়াল প্লেন (বিএমপি) এর মধ্যে ইউনিকোড মান ইউ + ডি 800 - ইউ + ডিএফএফএফটি ইউটিএফ -16 সারোগেটের জন্য সংরক্ষিত এবং বৈধ ইউটিএফ -8 এ এনকোড প্রদর্শিত হতে পারে না। যদি তারা ইউটিএফ -8 এ বৈধ হয় (যা আমি জোর দিয়ে বলছি, তারা নয়) তবে সার্োগেটগুলি এনকোড করা হবে:
সুতরাং, আপনার বিএডি ডেটাতে এই বিভিন্ন প্রেসক্রিপশন লঙ্ঘনকারী নমুনাগুলি থাকা উচিত।
নোট করুন যে একটি বাইট-অর্ডার চিহ্ন (বিওএম) ইউ + এফএফএফ, ওরফে শূন্য-প্রস্থের নন-ব্রেক স্পেস (জেডডাব্লুএনবিএসপি), ইউটিএফ -8 এ বিনা কোডবিহীন উপস্থিত হতে পারে না - বৈধ ইউটিএফ -8 এ বাইটস 0xFF এবং 0xFE অনুমোদিত নয়। একটি এনকোডেড জেডডাব্লুএনবিএসপি একটি ইউটিএফ -8 ফাইলে 0xEF 0xBB 0xBF হিসাবে উপস্থিত হতে পারে, তবে বিওএমটি ইউটিএফ -8-তে সম্পূর্ণরকম অতিরিক্ত প্রয়োজন is
ইউনিকোডে কিছু ননচার্যাকারও রয়েছে। ইউ + এফএফএফই এবং ইউ + এফএফএফএফ হ'ল এই জাতীয় দুটি ননক্র্যাক্টর (এবং প্রতিটি প্লেনের শেষ দুটি কোড পয়েন্ট, ইউ + 1FFF, ইউ + 1 এফএফএফ, ইউ + 2 এফএফএফই, ইউ + 2 এফএফএফএফ, ইউ + 10 এফএফএফই, ইউ + 10 এফএফএফএফ অন্যান্য) )। এগুলি সাধারণত ইউনিকোড ডেটাতে ডেটা এক্সচেঞ্জের জন্য উপস্থিত না হওয়া উচিত, তবে ব্যক্তিগত ব্যবহারে উপস্থিত হতে পারে। ইউনিকোডে ননচার্যাক্টরের বরং জটিল ইতিহাস সহ প্রচুর বোকা বিবরণের জন্য ইউনিকোড এফএকিউ লিঙ্কটি দেখুন। ( ধনাত্মক # 9: ননচার্যাক্টরদের সম্পর্কে স্পষ্টতা , যা জানুয়ারী 2013 এ প্রকাশিত হয়েছিল, এর শিরোনামের পরামর্শ অনুযায়ী যা করে - অ-অক্ষরগুলির অর্থ পরিষ্কার করে))
হোমগ্লাইফসের কোনও পাঠ্যকে সত্যই অদ্ভুত UTF8 স্ট্রিংয়ে রূপান্তর করতে আপনি জেফ্রি বার্গামিনি থেকে এই সহজ অনলাইন সরঞ্জামটি ব্যবহার করতে পারেন ।
একটি সাধারণ
আপনি এখানে কাজ করতে পারবেন না, আপনার জন্য সবচেয়ে ভাল কাজ করতে পারেন, আপনি শ্রম এবং ম্যাগাজিনের মত কাজ করতে পারেন।
এই মত হয়ে:
Ȋṕšᶙṁ ḍỡḽǭᵳ ʂǐť ӓṁệẗ, ĉṓɲṩḙċťᶒțûɾ ấɖḯƥĭṩčįɳġ ḝłįʈ, șếᶑ ᶁⱺ ẽḭŭŝḿꝋď ṫĕᶆᶈṓɍ ỉñḉīḑȋᵭṵńť ṷŧ ḹẩḇőꝛế éȶ đꝍꞎôꝛȇ ᵯáꞡᶇā ąⱡîɋṹẵ ąⱡîɋṹẵ
উইকিপিডিয়ায় ইউটিএফ -8 নিবন্ধটিতে বাইট সিকোয়েন্সগুলি বৈধ / অবৈধ কী তা সম্পর্কে একটি ভাল সারাংশ রয়েছে। আরও একটি নিবন্ধ যা পড়ার মতো তা হ'ল ডাব্লু 3 সি আই 18 এন এফএকিউ: বহুভাষিক ফর্ম ।
আমার মাথার উপরে:
0xff এবং 0xfe
একক উচ্চ-বিট বাইট
লো-বাইট চরিত্রগুলির একাধিক বাইট উপস্থাপনা - প্রারম্ভিক চেকগুলি নালকে পাচারের একটি ভাল উপায়
বাইট-অর্ডার চিহ্নগুলি - আপনি কি সেগুলি উপেক্ষা করছেন?