অবস্থা আমি PostgreSQL 9.2 ডাটাবেসের যা বেশ প্রচন্ডভাবে সব সময় আপডেট করা হয় না। সিস্টেমটি তাই I / O আবদ্ধ এবং আমি বর্তমানে অন্য একটি আপগ্রেড করার কথা বিবেচনা করছি, কোথায় উন্নতি শুরু করতে হবে সে সম্পর্কে আমার কিছু দিকনির্দেশ দরকার।
গত 3 মাসে পরিস্থিতি কেমন দেখায় তার একটি চিত্র এখানে দেওয়া হয়েছে:
আপনি দেখতে পাচ্ছেন, বেশিরভাগ ডিস্ক ব্যবহারের জন্য অপারেশন অ্যাকাউন্টগুলি আপডেট করুন। পরিস্থিতিটি আরও বিস্তারিত 3 ঘন্টা উইন্ডোতে কীভাবে দেখায় তার আরও একটি চিত্র এখানে:
আপনি দেখতে পাচ্ছেন, শীর্ষ লেখার হার 20MB / s এর কাছাকাছি
সফ্টওয়্যার
সার্ভারটি উবুন্টু 12.04 এবং পোস্টগ্রেস্কল 9.2 চলছে। আপডেটের ধরণ আইডি দ্বারা চিহ্নিত পৃথক সারিগুলিতে সাধারণত ছোট আপডেট হয়। যেমন UPDATE cars SET price=some_price, updated_at = some_time_stamp WHERE id = some_id। আমি যতটা সম্ভব মনে করি ততই মুছে ফেলেছি এবং অপ্টিমাইজড করেছি এবং সার্ভার কনফিগারেশন (উভয় লিনাক্স কার্নেল এবং পোস্টগ্রিস কনফারেন্স) বেশ অপ্টিমাইজড।
হার্ডওয়্যার হার্ডওয়্যারটি একটি ডেডিকেটেড সার্ভার যা 32 জিবি ইসিসি র্যাম, 4x 600 গিগাবাইট 15.000 আরপিএম এসএএস ডিস্ক একটি রেড 10 অ্যারে, বিবিইউ সহ একটি এলএসআই রেইড কন্ট্রোলার দ্বারা নিয়ন্ত্রিত এবং একটি ইন্টেল সিওন ই 3-1245 কোয়াডকোয়ার প্রসেসর।
প্রশ্নাবলি
- এই ক্যালিবারের একটি সিস্টেম (পড়ুন / লেখেন) এর জন্য গ্রাফগুলি দ্বারা সম্পাদিত পারফরম্যান্স কি যুক্তিসঙ্গত?
- অতএব আমি কি একটি হার্ডওয়্যার আপগ্রেড করার দিকে বা সফ্টওয়্যারটির গভীর তদন্ত (কর্নেল টুইট, কনফেসস, কোয়েরি ইত্যাদি) সম্পর্কে ফোকাস করব?
- যদি কোনও হার্ডওয়্যার আপগ্রেড করা হয়, তবে ডিস্কের সংখ্যাটি কী পারফরম্যান্সের কী?
------------------------------হালনাগাদ------------------- ----------------
আমি এখন আমার ডাটাবেস সার্ভারকে পুরানো 15 কে এস এস ডিস্কের পরিবর্তে চারটি ইন্টেল 520 এসএসডি দিয়ে আপগ্রেড করেছি। আমি একই রাইড কন্ট্রোলার ব্যবহার করছি। বিষয়গুলি বেশ উন্নত হয়েছে, আপনি নীচের শিখর থেকে দেখতে পাচ্ছেন I / O এর পারফরম্যান্স প্রায় 6-10 বার উন্নতি হয়েছে - এবং এটি দুর্দান্ত!
তবে আমি নতুন এসএসডি-র উত্তর এবং I / O ক্ষমতা অনুসারে 20-50 গুণ উন্নতির মতো আরও কিছু আশা করছিলাম। সুতরাং এখানে আরেকটি প্রশ্ন যায়।
নতুন প্রশ্ন আমার বর্তমান কনফিগারেশনে এমন কি কিছু আছে যা আমার সিস্টেমের আই / ও পারফরম্যান্সকে সীমাবদ্ধ করে (কোথায় বাধা?)
আমার কনফিগারেশন:
/etc/postgresql/9.2/main/postgresql.conf
data_directory = '/var/lib/postgresql/9.2/main'
hba_file = '/etc/postgresql/9.2/main/pg_hba.conf'
ident_file = '/etc/postgresql/9.2/main/pg_ident.conf'
external_pid_file = '/var/run/postgresql/9.2-main.pid'
listen_addresses = '192.168.0.4, localhost'
port = 5432
unix_socket_directory = '/var/run/postgresql'
wal_level = hot_standby
synchronous_commit = on
checkpoint_timeout = 10min
archive_mode = on
archive_command = 'rsync -a %p postgres@192.168.0.2:/var/lib/postgresql/9.2/wals/%f </dev/null'
max_wal_senders = 1
wal_keep_segments = 32
hot_standby = on
log_line_prefix = '%t '
datestyle = 'iso, mdy'
lc_messages = 'en_US.UTF-8'
lc_monetary = 'en_US.UTF-8'
lc_numeric = 'en_US.UTF-8'
lc_time = 'en_US.UTF-8'
default_text_search_config = 'pg_catalog.english'
default_statistics_target = 100
maintenance_work_mem = 1920MB
checkpoint_completion_target = 0.7
effective_cache_size = 22GB
work_mem = 160MB
wal_buffers = 16MB
checkpoint_segments = 32
shared_buffers = 7680MB
max_connections = 400
/etc/sysctl.conf
# sysctl config
#net.ipv4.ip_forward=1
net.ipv4.conf.all.rp_filter=1
net.ipv4.icmp_echo_ignore_broadcasts=1
# ipv6 settings (no autoconfiguration)
net.ipv6.conf.default.autoconf=0
net.ipv6.conf.default.accept_dad=0
net.ipv6.conf.default.accept_ra=0
net.ipv6.conf.default.accept_ra_defrtr=0
net.ipv6.conf.default.accept_ra_rtr_pref=0
net.ipv6.conf.default.accept_ra_pinfo=0
net.ipv6.conf.default.accept_source_route=0
net.ipv6.conf.default.accept_redirects=0
net.ipv6.conf.default.forwarding=0
net.ipv6.conf.all.autoconf=0
net.ipv6.conf.all.accept_dad=0
net.ipv6.conf.all.accept_ra=0
net.ipv6.conf.all.accept_ra_defrtr=0
net.ipv6.conf.all.accept_ra_rtr_pref=0
net.ipv6.conf.all.accept_ra_pinfo=0
net.ipv6.conf.all.accept_source_route=0
net.ipv6.conf.all.accept_redirects=0
net.ipv6.conf.all.forwarding=0
# Updated according to postgresql tuning
vm.dirty_ratio = 10
vm.dirty_background_ratio = 1
vm.swappiness = 0
vm.overcommit_memory = 2
kernel.sched_autogroup_enabled = 0
kernel.sched_migration_cost = 50000000
/etc/sysctl.d/30-postgresql-shm.conf
# Shared memory settings for PostgreSQL
# Note that if another program uses shared memory as well, you will have to
# coordinate the size settings between the two.
# Maximum size of shared memory segment in bytes
#kernel.shmmax = 33554432
# Maximum total size of shared memory in pages (normally 4096 bytes)
#kernel.shmall = 2097152
kernel.shmmax = 8589934592
kernel.shmall = 17179869184
# Updated according to postgresql tuning
আউটপুট MegaCli64 -LDInfo -LAll -aAll
Adapter 0 -- Virtual Drive Information:
Virtual Drive: 0 (Target Id: 0)
Name :
RAID Level : Primary-1, Secondary-0, RAID Level Qualifier-0
Size : 446.125 GB
Sector Size : 512
Is VD emulated : No
Mirror Data : 446.125 GB
State : Optimal
Strip Size : 64 KB
Number Of Drives per span:2
Span Depth : 2
Default Cache Policy: WriteBack, ReadAhead, Direct, Write Cache OK if Bad BBU
Current Cache Policy: WriteBack, ReadAhead, Direct, Write Cache OK if Bad BBU
Default Access Policy: Read/Write
Current Access Policy: Read/Write
Disk Cache Policy : Disk's Default
Encryption Type : None
Is VD Cached: No
synchronous_commit: '
synchronous_commit = offএ ডক্স পড়ার পর postgresql.org/docs/9.2/static/wal-async-commit.html । (3)। আপনার কনফিগারেশন দেখতে কেমন? যেমন। এই ক্যোয়ারির ফলাফল:SELECT name, current_setting(name), source FROM pg_settings WHERE source NOT IN ('default', 'override');