পোস্টগ্র্রেএসকিউএল 8.4.9 এ 'মাইসকিल्डম্প - কম্প্যাটিবল = পোস্টগ্রিসক্ল' এর আউটপুট আমদানির চেষ্টা করার জন্য আমি গত 8 ঘন্টা অতিবাহিত করেছি এবং আমি এই নির্দিষ্ট সমস্যা সম্পর্কে ইতিমধ্যে এখানে এবং অন্য কোথাও কমপক্ষে 20 টি বিভিন্ন থ্রেড পড়েছি, কিন্তু খুঁজে পাইনি no বাস্তব ব্যবহারযোগ্য উত্তর যা কাজ করে।
মাইএসকিউএল 5.1.52 ডেটা ফেলে দেওয়া হয়েছে:
mysqldump -u root -p --compatible=postgresql --no-create-info --no-create-db --default-character-set=utf8 --skip-lock-tables rt3 > foo
গন্তব্য হিসাবে PostgreSQL 8.4.9 সার্ভার
'Psql -U rt_user -f foo' দিয়ে ডেটা লোড করা রিপোর্ট করছে (এর মধ্যে অনেকগুলি এখানে একটি উদাহরণ রয়েছে):
psql:foo:29: ERROR: invalid byte sequence for encoding "UTF8": 0x00
HINT: This error can also happen if the byte sequence does not match the encoding expected by the server, which is controlled by "client_encoding".
নিম্নলিখিত অনুসারে, ইনপুট ফাইলটিতে কোনও NULL (0x00) অক্ষর নেই।
database-dumps:rcf-temp1# sed 's/\x0/ /g' < foo > nonulls
database-dumps:rcf-temp1# sum foo nonulls
04730 2545610 foo
04730 2545610 nonulls
database-dumps:rcf-temp1# rm nonulls
তেমনি, পার্লের সাথে অন্য একটি চেক কোনও নূলে নেই:
database-dumps:rcf-temp1# perl -ne '/\000/ and print;' foo
database-dumps:rcf-temp1#
ত্রুটির বর্ণনায় "এইচআইএনটি" হিসাবে, আমি 'ক্লায়েন্ট_এনকোডিং' কে 'ইউটিএফ 8' তে সেট করার জন্য প্রতিটি সম্ভাব্য উপায় চেষ্টা করেছি এবং আমি সফল হয়েছি তবে আমার সমস্যা সমাধানের দিকে এর কোনও প্রভাব নেই।
database-dumps:rcf-temp1# psql -U rt_user --variable=client_encoding=utf-8 -c "SHOW client_encoding;" rt3
client_encoding
-----------------
UTF8
(1 row)
database-dumps:rcf-temp1#
নিখুঁত, এখনও:
database-dumps:rcf-temp1# psql -U rt_user -f foo --variable=client_encoding=utf-8 rt3
...
psql:foo:29: ERROR: invalid byte sequence for encoding "UTF8": 0x00
HINT: This error can also happen if the byte sequence does not match the encoding expected by the server, which is controlled by "client_encoding".
...
"হোয়েলের মতে" সঠিক উত্তরটি বাদ দিয়ে যা শুনতে শুনতে চমত্কার হবে, এবং জেনেও যে আমি খুব কমই এই কদাচিৎ-রেফারেন্সযুক্ত ডেটার জন্য কোনও অ-এসসিআইআই অক্ষর সংরক্ষণ করার বিষয়ে সত্যই চিন্তা করি না, আপনার কী পরামর্শ আছে?
আপডেট: আমদানির সময় একই ডাম্প ফাইলের কেবলমাত্র ASCII- র সংস্করণে আমি একই ত্রুটি পেয়েছি। সত্যই মন-বগল:
database-dumps:rcf-temp1# # convert any non-ASCII character to a space
database-dumps:rcf-temp1# perl -i.bk -pe 's/[^[:ascii:]]/ /g;' mysql5-dump.sql
database-dumps:rcf-temp1# sum mysql5-dump.sql mysql5-dump.sql.bk
41053 2545611 mysql5-dump.sql
50145 2545611 mysql5-dump.sql.bk
database-dumps:rcf-temp1# cmp mysql5-dump.sql mysql5-dump.sql.bk
mysql5-dump.sql mysql5-dump.sql.bk differ: byte 1304850, line 30
database-dumps:rcf-temp1# # GOOD!
database-dumps:rcf-temp1# psql -U postgres -f mysql5-dump.sql --variable=client_encoding=utf-8 rt3
...
INSERT 0 416
psql:mysql5-dump.sql:30: ERROR: invalid byte sequence for encoding "UTF8": 0x00
HINT: This error can also happen if the byte sequence does not match the encod.
INSERT 0 455
INSERT 0 424
INSERT 0 483
INSERT 0 447
INSERT 0 503
psql:mysql5-dump.sql:36: ERROR: invalid byte sequence for encoding "UTF8": 0x00
HINT: This error can also happen if the byte sequence does not match the encod.
INSERT 0 502
INSERT 0 507
INSERT 0 318
INSERT 0 284
psql:mysql5-dump.sql:41: ERROR: invalid byte sequence for encoding "UTF8": 0x00
HINT: This error can also happen if the byte sequence does not match the encod.
INSERT 0 382
INSERT 0 419
INSERT 0 247
psql:mysql5-dump.sql:45: ERROR: invalid byte sequence for encoding "UTF8": 0x00
HINT: This error can also happen if the byte sequence does not match the encod.
INSERT 0 267
INSERT 0 348
^C
প্রশ্নের মধ্যে থাকা একটি সারণী হিসাবে সংজ্ঞায়িত করা হয়েছে:
Table "public.attachments"
Column | Type | Modifie
-----------------+-----------------------------+--------------------------------
id | integer | not null default nextval('atta)
transactionid | integer | not null
parent | integer | not null default 0
messageid | character varying(160) |
subject | character varying(255) |
filename | character varying(255) |
contenttype | character varying(80) |
contentencoding | character varying(80) |
content | text |
headers | text |
creator | integer | not null default 0
created | timestamp without time zone |
Indexes:
"attachments_pkey" PRIMARY KEY, btree (id)
"attachments1" btree (parent)
"attachments2" btree (transactionid)
"attachments3" btree (parent, transactionid)
ডিবি স্কিমার কোনও অংশের জন্য টাইপ পরিবর্তন করার স্বাধীনতা আমার নেই। এটি করার ফলে সম্ভবত সফ্টওয়্যার ইত্যাদির ভবিষ্যতের আপগ্রেডগুলি নষ্ট হবে etc.
সম্ভবত সমস্যা কলামটি 'পাঠ্য' টাইপের 'সামগ্রী' (সম্ভবত অন্যান্য টেবিলের অন্যরাও)। আমি পূর্ববর্তী গবেষণা থেকে ইতিমধ্যে জানি, পোস্টগ্রাইএসকিউএল 'পাঠ্য' মানগুলিতে NULL অনুমতি দেবে না। তবে, দয়া করে উপরে দেখুন যেখানে সেড এবং পার্ল উভয়ই কোনও নুল অক্ষর প্রদর্শন করে না এবং তারপরে আরও নীচে যেখানে আমি সমস্ত ডাম্প ফাইল থেকে সমস্ত নন-এসসিআইআই অক্ষর ফেলা করেছি তবে এটি এখনও বাধা দেয়।
head -29 foo | tail -1 | cat -v
ব্যবহার হতে পারে।