লিনাক্স e1000e (ইন্টেল নেটওয়ার্কিং ড্রাইভার) সমস্যাগুলি, আমি কোথায় শুরু করব?


23

আমার বর্তমানে e1000eউবুন্টু মাভেরিকের (একেবারেই কাজ না করা) সমস্যা রয়েছে (1.0.0-কে 4), আবার শুরু করার পরে আমি ডেমসগে অনেকগুলি জিনিস পাচ্ছি:

[ 9085.820197] e1000e 0000:02:00.0: PCI INT A disabled
[ 9089.907756] e1000e: Intel(R) PRO/1000 Network Driver - 1.0.2-k4
[ 9089.907762] e1000e: Copyright (c) 1999 - 2009 Intel Corporation.
[ 9089.907797] e1000e 0000:02:00.0: Disabling ASPM  L1
[ 9089.907827] e1000e 0000:02:00.0: PCI INT A -> GSI 16 (level, low) -> IRQ 16
[ 9089.907857] e1000e 0000:02:00.0: setting latency timer to 64
[ 9089.908529] e1000e 0000:02:00.0: irq 44 for MSI/MSI-X
[ 9089.908922] e1000e 0000:02:00.0: Disabling ASPM L0s 
[ 9089.908954] e1000e 0000:02:00.0: (unregistered net_device): PHY reset is blocked due to SOL/IDER session.
[ 9090.024625] e1000e 0000:02:00.0: eth0: (PCI Express:2.5GB/s:Width x1) 00:0a:e4:3e:ce:74
[ 9090.024630] e1000e 0000:02:00.0: eth0: Intel(R) PRO/1000 Network Connection
[ 9090.024712] e1000e 0000:02:00.0: eth0: MAC: 2, PHY: 2, PBA No: 005302-003
[ 9090.109492] e1000e 0000:02:00.0: irq 44 for MSI/MSI-X
[ 9090.164219] e1000e 0000:02:00.0: irq 44 for MSI/MSI-X

এবং, একটি গুচ্ছ

[ 2128.005447] e1000e 0000:02:00.0: eth0: Detected Hardware Unit Hang:
[ 2128.005452]   TDH                  <89>
[ 2128.005454]   TDT                  <27>
[ 2128.005456]   next_to_use          <27>
[ 2128.005458]   next_to_clean        <88>
[ 2128.005460] buffer_info[next_to_clean]:
[ 2128.005463]   time_stamp           <6e608>
[ 2128.005465]   next_to_watch        <8a>
[ 2128.005467]   jiffies              <6f929>
[ 2128.005469]   next_to_watch.status <0>
[ 2128.005471] MAC Status             <80080703>
[ 2128.005473] PHY Status             <796d>
[ 2128.005475] PHY 1000BASE-T Status  <4000>
[ 2128.005477] PHY Extended Status    <3000>
[ 2128.005480] PCI Status             <10>

আমি সর্বশেষ স্থিতিশীল কম্পাইল করার সিদ্ধান্ত নিয়েছে e1000eথেকে 1.2.17, এখন পেয়ে করছি:

[ 9895.678050] e1000e: Intel(R) PRO/1000 Network Driver - 1.2.17-NAPI
[ 9895.678055] e1000e: Copyright(c) 1999 - 2010 Intel Corporation.
[ 9895.678098] e1000e 0000:02:00.0: Disabling ASPM  L1
[ 9895.678129] e1000e 0000:02:00.0: PCI INT A -> GSI 16 (level, low) -> IRQ 16
[ 9895.678162] e1000e 0000:02:00.0: setting latency timer to 64
[ 9895.679136] e1000e 0000:02:00.0: irq 44 for MSI/MSI-X
[ 9895.679160] e1000e 0000:02:00.0: Disabling ASPM L0s 
[ 9895.679192] e1000e 0000:02:00.0: (unregistered net_device): PHY reset is blocked due to SOL/IDER session.
[ 9895.791758] e1000e 0000:02:00.0: eth0: (PCI Express:2.5GB/s:Width x1) 00:0a:e4:3e:ce:74
[ 9895.791766] e1000e 0000:02:00.0: eth0: Intel(R) PRO/1000 Network Connection
[ 9895.791850] e1000e 0000:02:00.0: eth0: MAC: 3, PHY: 2, PBA No: 005302-003
[ 9895.892464] e1000e 0000:02:00.0: irq 44 for MSI/MSI-X
[ 9895.948175] e1000e 0000:02:00.0: irq 44 for MSI/MSI-X
[ 9895.949111] ADDRCONF(NETDEV_UP): eth0: link is not ready
[ 9895.954694] e1000e: eth0 NIC Link is Up 10 Mbps Full Duplex, Flow Control: RX/TX
[ 9895.954703] e1000e 0000:02:00.0: eth0: 10/100 speed: disabling TSO
[ 9895.955157] ADDRCONF(NETDEV_CHANGE): eth0: link becomes ready
[ 9906.832056] eth0: no IPv6 routers present

সাথে 1.2.20আমি পেয়েছি:

[ 9711.525465] e1000e: Intel(R) PRO/1000 Network Driver - 1.2.20-NAPI
[ 9711.525472] e1000e: Copyright(c) 1999 - 2010 Intel Corporation.
[ 9711.525521] e1000e 0000:02:00.0: Disabling ASPM  L1
[ 9711.525554] e1000e 0000:02:00.0: PCI INT A -> GSI 16 (level, low) -> IRQ 16
[ 9711.525586] e1000e 0000:02:00.0: setting latency timer to 64
[ 9711.526460] e1000e 0000:02:00.0: irq 45 for MSI/MSI-X
[ 9711.526487] e1000e 0000:02:00.0: Disabling ASPM L0s 
[ 9711.526523] e1000e 0000:02:00.0: (unregistered net_device): PHY reset is blocked due to SOL/IDER session.
[ 9711.639763] e1000e 0000:02:00.0: eth0: (PCI Express:2.5GB/s:Width x1) 00:0a:e4:3e:ce:74
[ 9711.639771] e1000e 0000:02:00.0: eth0: Intel(R) PRO/1000 Network Connection
[ 9711.639854] e1000e 0000:02:00.0: eth0: MAC: 3, PHY: 2, PBA No: 005302-003
[ 9712.060770] e1000e 0000:02:00.0: irq 45 for MSI/MSI-X
[ 9712.116195] e1000e 0000:02:00.0: irq 45 for MSI/MSI-X
[ 9712.117098] ADDRCONF(NETDEV_UP): eth0: link is not ready
[ 9712.122684] e1000e: eth0 NIC Link is Up 100 Mbps Full Duplex, Flow Control: RX/TX
[ 9712.122693] e1000e 0000:02:00.0: eth0: 10/100 speed: disabling TSO
[ 9712.123142] ADDRCONF(NETDEV_CHANGE): eth0: link becomes ready
[ 9722.920014] eth0: no IPv6 routers present

তবে, আমি এখনও এগুলি পাচ্ছি

[ 9982.992851] PCI Status             <10>
[ 9984.993602] e1000e 0000:02:00.0: eth0: Detected Hardware Unit Hang:
[ 9984.993606]   TDH                  <5d>
[ 9984.993608]   TDT                  <6b>
[ 9984.993611]   next_to_use          <6b>
[ 9984.993613]   next_to_clean        <5b>
[ 9984.993615] buffer_info[next_to_clean]:
[ 9984.993617]   time_stamp           <24da80>
[ 9984.993619]   next_to_watch        <5d>
[ 9984.993621]   jiffies              <24f200>
[ 9984.993624]   next_to_watch.status <0>
[ 9984.993626] MAC Status             <80080703>
[ 9984.993628] PHY Status             <796d>
[ 9984.993630] PHY 1000BASE-T Status  <4000>
[ 9984.993632] PHY Extended Status    <3000>
[ 9984.993635] PCI Status             <10>
[ 9986.001047] e1000e 0000:02:00.0: eth0: Reset adapter
[ 9986.176202] e1000e: eth0 NIC Link is Up 10 Mbps Full Duplex, Flow Control: RX/TX
[ 9986.176211] e1000e 0000:02:00.0: eth0: 10/100 speed: disabling TSO

আমি নিশ্চিত না যে এটিকে কোথায় সমস্যার সমাধান করা শুরু করব। কোন ধারনা?

এখানে ফলাফল ethtool -d eth0

MAC Registers
-------------
0x00000: CTRL (Device control register)  0x18100248
      Endian mode (buffers):             little
      Link reset:                        reset
      Set link up:                       1
      Invert Loss-Of-Signal:             no
      Receive flow control:              enabled
      Transmit flow control:             enabled
      VLAN mode:                         disabled
      Auto speed detect:                 disabled
      Speed select:                      1000Mb/s
      Force speed:                       no
      Force duplex:                      no
0x00008: STATUS (Device status register) 0x80080703
      Duplex:                            full
      Link up:                           link config
      TBI mode:                          disabled
      Link speed:                        10Mb/s
      Bus type:                          PCI Express
      Port number:                       0
0x00100: RCTL (Receive control register) 0x04048002
      Receiver:                          enabled
      Store bad packets:                 disabled
      Unicast promiscuous:               disabled
      Multicast promiscuous:             disabled
      Long packet:                       disabled
      Descriptor minimum threshold size: 1/2
      Broadcast accept mode:             accept
      VLAN filter:                       enabled
      Canonical form indicator:          disabled
      Discard pause frames:              filtered
      Pass MAC control frames:           don't pass
      Receive buffer size:               2048
0x02808: RDLEN (Receive desc length)     0x00001000
0x02810: RDH   (Receive desc head)       0x00000001
0x02818: RDT   (Receive desc tail)       0x000000F0
0x02820: RDTR  (Receive delay timer)     0x00000000
0x00400: TCTL (Transmit ctrl register)   0x3103F0FA
      Transmitter:                       enabled
      Pad short packets:                 enabled
      Software XOFF Transmission:        disabled
      Re-transmit on late collision:     enabled
0x03808: TDLEN (Transmit desc length)    0x00001000
0x03810: TDH   (Transmit desc head)      0x00000000
0x03818: TDT   (Transmit desc tail)      0x00000000
0x03820: TIDV  (Transmit delay timer)    0x00000008
PHY type:                                IGP2

এবং ethtool -c eth0

Coalesce parameters for eth0:
Adaptive RX: off  TX: off
stats-block-usecs: 0
sample-interval: 0
pkt-rate-low: 0
pkt-rate-high: 0

rx-usecs: 3
rx-frames: 0
rx-usecs-irq: 0
rx-frames-irq: 0

tx-usecs: 0
tx-frames: 0
tx-usecs-irq: 0
tx-frames-irq: 0

rx-usecs-low: 0
rx-frame-low: 0
tx-usecs-low: 0
tx-frame-low: 0

rx-usecs-high: 0
rx-frame-high: 0
tx-usecs-high: 0
tx-frame-high: 0

lspci -vvvএই নিয়ামকের জন্য এখানেও

02:00.0 Ethernet controller: Intel Corporation 82573L Gigabit Ethernet Controller
    Subsystem: Lenovo ThinkPad X60s
    Control: I/O+ Mem+ BusMaster+ SpecCycle- MemWINV- VGASnoop- ParErr- Stepping- SERR+ FastB2B- DisINTx+
    Status: Cap+ 66MHz- UDF- FastB2B- ParErr- DEVSEL=fast >TAbort- <TAbort- <MAbort- >SERR- <PERR- INTx-
    Latency: 0, Cache Line Size: 64 bytes
    Interrupt: pin A routed to IRQ 45
    Region 0: Memory at ee000000 (32-bit, non-prefetchable) [size=128K]
    Region 2: I/O ports at 2000 [size=32]
    Capabilities: [c8] Power Management version 2
        Flags: PMEClk- DSI+ D1- D2- AuxCurrent=0mA PME(D0+,D1-,D2-,D3hot+,D3cold+)
        Status: D0 NoSoftRst- PME-Enable- DSel=0 DScale=1 PME-
    Capabilities: [d0] MSI: Enable+ Count=1/1 Maskable- 64bit+
        Address: 00000000fee0300c  Data: 415a
    Capabilities: [e0] Express (v1) Endpoint, MSI 00
        DevCap: MaxPayload 256 bytes, PhantFunc 0, Latency L0s <512ns, L1 <64us
            ExtTag- AttnBtn- AttnInd- PwrInd- RBE- FLReset-
        DevCtl: Report errors: Correctable+ Non-Fatal+ Fatal+ Unsupported+
            RlxdOrd+ ExtTag- PhantFunc- AuxPwr- NoSnoop+
            MaxPayload 128 bytes, MaxReadReq 512 bytes
        DevSta: CorrErr- UncorrErr- FatalErr- UnsuppReq- AuxPwr+ TransPend-
        LnkCap: Port #0, Speed 2.5GT/s, Width x1, ASPM L0s L1, Latency L0 <128ns, L1 <64us
            ClockPM+ Surprise- LLActRep- BwNot-
        LnkCtl: ASPM Disabled; RCB 64 bytes Disabled- Retrain- CommClk+
            ExtSynch- ClockPM+ AutWidDis- BWInt- AutBWInt-
        LnkSta: Speed 2.5GT/s, Width x1, TrErr- Train- SlotClk+ DLActive- BWMgmt- ABWMgmt-
    Capabilities: [100 v1] Advanced Error Reporting
        UESta:  DLP- SDES- TLP- FCP- CmpltTO- CmpltAbrt- UnxCmplt- RxOF- MalfTLP- ECRC- UnsupReq+ ACSViol-
        UEMsk:  DLP- SDES- TLP- FCP- CmpltTO- CmpltAbrt- UnxCmplt- RxOF- MalfTLP- ECRC- UnsupReq- ACSViol-
        UESvrt: DLP+ SDES- TLP- FCP+ CmpltTO- CmpltAbrt- UnxCmplt- RxOF+ MalfTLP+ ECRC- UnsupReq- ACSViol-
        CESta:  RxErr- BadTLP- BadDLLP- Rollover- Timeout- NonFatalErr-
        CEMsk:  RxErr- BadTLP- BadDLLP- Rollover- Timeout- NonFatalErr-
        AERCap: First Error Pointer: 14, GenCap- CGenEn- ChkCap- ChkEn-
    Capabilities: [140 v1] Device Serial Number 00-0a-e4-ff-ff-3e-ce-74
    Kernel driver in use: e1000e
    Kernel modules: e1000e

আমি এই উজানের দিকে একটি বাগ দায়ের করেছি , কীভাবে আরও দরকারী তথ্য পাবেন তা এখনও ধারণা নেই।

স্ক্রিপ্টটি চালানোর ফলাফল এখানে

ইপ্রোম ফিক্স আপডেট

$ sudo bash fixeep-82573-dspd.sh eth0
eth0: is a "82573L Gigabit Ethernet Controller"
This fixup is applicable to your hardware
Your eeprom is up to date, no changes were made

আমার কি এখনও কিছু করার দরকার আছে? এছাড়াও এখানে আমার EEPROM ডাম্প

$ sudo ethtool -e eth0
Offset      Values
------      ------
0x0000      00 0a e4 3e ce 74 30 0b b2 ff 51 00 ff ff ff ff 
0x0010      53 00 03 02 6b 02 7e 20 aa 17 9a 10 86 80 df 80 
0x0020      00 00 00 20 54 7e 00 00 14 00 da 00 04 00 00 27 
0x0030      c9 6c 50 31 3e 07 0b 04 8b 29 00 00 00 f0 02 0f 
0x0040      08 10 00 00 04 0f ff 7f 01 4d ff ff ff ff ff ff 
0x0050      14 00 1d 00 14 00 1d 00 af aa 1e 00 00 00 1d 00 
0x0060      00 01 00 40 1f 12 07 40 ff ff ff ff ff ff ff ff 
0x0070      ff ff ff ff ff ff ff ff ff ff ff ff ff ff 4a e0

আমি আরও লক্ষ করতে চাই যে আমি eth0বছরের পর বছর ধরে প্রতিদিন ব্যবহার করেছি এবং এখনও পর্যন্ত কোনও সমস্যা হয়নি।


আমি এখানে একটি কিউএনএ পোস্ট করেছি যা সার্ফারফল্ট / প্রশ্নগুলি
কাইল

উত্তর:


19

pcie_aspm=offকার্নেল পরামিতি দিয়ে কার্নেল বুট করার চেষ্টা করুন ।


অ্যামেজিং! এটি ছিল, আমি আবার সংযুক্ত এবং সবকিছু কাজ করছে !!
ইভান ক্যারল

আমি তথ্য একটি সামান্য বিট পাওয়া এখানে
ইভান ক্যারল


2
BTW, আমি যোগ kopt=pcie_aspm=offকরতে /boot/grub/menu.lst- আমি জানি এই মৌলিক আছে (জুড়তে কিভাবে কার্নেল প্যারাম), কিন্তু ঐ যে যে সব জানি না সেখানে খুব এটা আপনি কীড়া ব্যবহার করছেন পারেন। আপনি কেবল pcie_aspm=offআপনার কার্নেল লাইনে যুক্ত করতে পারেন তবে পরবর্তী সুরক্ষা প্রকাশ না পাওয়া পর্যন্ত এটি কেবল তখনই কাজ করে।
ইভান ক্যারল

15

ইন্টেলের ড্রাইভার রিডমি থেকে: downloadmirror.intel.com/9180/eng/README.txt

82573 (ভি / এল / ই) টিএক্স ইউনিট হ্যাং বার্তা

82573 চিপসেটের সাথে বেশ কয়েকটি অ্যাডাপ্টারগুলি E1000 ড্রাইভারের সাথে স্বাভাবিক অপারেশনের সময় "টিএক্স ইউনিট হ্যাং" বার্তা প্রদর্শন করে। টিএসও সক্ষম এবং অক্ষম উভয়ই ইস্যুটি উপস্থিত হয় এবং EEPROM এ সক্ষম এমন একটি পাওয়ার ম্যানেজমেন্ট ফাংশন দ্বারা ঘটে। বিক্রেতাদের কাছে চিপসেটের প্রথম প্রকাশের মধ্যে EEPROM বিট ছিল যা বৈশিষ্ট্যটি সক্ষম করেছে। ইস্যুটি আবিষ্কারের পরে EEPROM এ অক্ষম করা বৈশিষ্ট্যটি সহ নতুন অ্যাডাপ্টারগুলি প্রকাশ করা হয়েছিল।

যদি আপনি কোনও অ্যাডাপ্টারে সমস্যার মুখোমুখি হন এবং চিপসেটটি 82573-ভিত্তিক একটি হয় তবে আপনি যাচাই করতে পারেন যে আপনার অ্যাডাপ্টারের এথ্টোল ব্যবহার করে ঠিক করা দরকার:

 # ethtool -e eth0
 Offset          Values
 ------          ------
 0x0000          00 12 34 56 fe dc 30 0d 46 f7 f4 00 ff ff ff ff
 0x0010          ff ff ff ff 6b 02 8c 10 d9 15 8c 10 86 80 de 83
                                                           ^^

0x001e (ডি) অফসেটে মানটি বিট 0 আনসেট করা আছে। এটি সমস্যাযুক্ত শক্তি সঞ্চয় বৈশিষ্ট্য সক্ষম করে। এই ক্ষেত্রে, EEPROM অফসেট 0x001e এ "df" পড়তে হবে।

একটি এককালীন EEPROM ফিক্স শেল স্ক্রিপ্ট হিসাবে উপলব্ধ। এই স্ক্রিপ্টটি যাচাই করবে যে অ্যাডাপ্টার ঠিক করার জন্য প্রযোজ্য এবং যদি ফিক্সটির প্রয়োজন হয় বা না হয়। যদি সমাধানের প্রয়োজন হয়, এটি EEPROM এ পরিবর্তনটি প্রয়োগ করে এবং চেকসাম আপডেট করে। EEPROM- এ পরিবর্তনগুলি করা হলে ব্যবহারকারীকে ঠিক প্রয়োগের পরে সিস্টেমটি পুনরায় চালু করতে হবে।

লিপির আউটপুট উদাহরণ:

 # bash fixeep-82573-dspd.sh eth0
 eth0: is a "82573E Gigabit Ethernet Controller"
 This fixup is applicable to your hardware
 executing command: ethtool -E eth0 magic 0x109a8086 offset 0x1e value 0xdf
 Change made. You *MUST* reboot your machine before changes take effect!

স্ক্রিপ্টটি http://e1000.sourceforge.net/files/fixeep-82573-dspd.sh এ ডাউনলোড করা যাবে


3

গ্রাভিডিগার হিসাবে, উবুন্টুর জন্য আমার সমাধান ভাগ করে নেওয়ার জন্য আমি এই পুরানো পাছার থ্রেডটি খনন করতে চাই। সর্বশেষতম ইন্টেল নেটওয়ার্ক ড্রাইভার ( লেখার সময় 3.4.0.2 ) ডাউনলোড করুন। এটি সঙ্কুচিত করুন, মেকফিলের একটি লাইনে একটি জিনিস যুক্ত করুন, প্যাচটি পাবেন, প্যাচটি প্রয়োগ করুন, মডিউলটি ইনস্টল করুন, মডিউলটি পুনরায় বুট করুন এবং শেষ পর্যন্ত পুনরায় বুট করুন। শুভকামনা।

wget https://downloadcenter.intel.com/download/15817/Intel-Network-Adapter-Driver-for-PCIe-Intel-Gigabit-Ethernet-Network-Connections-Under-Linux-?product=60019
tar -zxvf e1000e-3.4.0.2.tar.gz
vi e1000e-3.4.0.2/src/Makefile
    ## Locate line 152: EXTRA_CFLAGS += $(CFLAGS_EXTRA)
    ## Append -fno-pie
## Download the patch from https://sourceforge.net/p/e1000/bugs/_discuss/thread/9048ab8e 
## wget/curl won't work here. THANKS SOURCE FORGE.
patch -p0 < e1000e-3.4.0.2-timer-updates.patch
cd e1000e-3.4.0.2/src/
sudo make install
sudo rmmod e1000e && sudo modprobe e1000e
sudo reboot

এই ওয়াডটি উবুন্টু 18.04, কর্নেল 4.15 এ সম্পূর্ণ হয়েছে।


আমি এটি একটি শট দেব এবং এটি ঠিক আছে কিনা দেখুন। আপনি যে সংস্করণটি ব্যবহার করছেন তা আপনি খুঁজে পেতে পারেন modinfo -F version e1000e
ইভান ক্যারল

আমি কৌতূহল হব যে আপনি কি ত্রুটিগুলি 18.04 এর সাথে পেয়েছেন। এটি না চালিয়ে মনে হচ্ছে সমস্যাটি নিজেই সমাধান হয়ে গেছে। আমি রাউটার / ব্যান্ড / ফ্রিকিকেশনের সমস্যা হতে পারে যদিও আমি আর হ্যাঙ্গ পাচ্ছি না
ইভান ক্যারল

1
আহ, ইন্টারফেসটি কেবল সেকেন্ড বা মিনিটের জন্য স্তব্ধ হয়ে থাকবে। অবশেষে, এটি সাধারণত সিস্টেমটি ক্র্যাশ হয়ে যায়।
জাস্টিন

এর জন্য ধন্যবাদ; আমি এটি প্রতিবার ইন্টারফেসটি শুরু করার সময় ওবুন্টু 19.04 এ একটি ইন্টেল নিউক দিয়ে দেখছিলাম। ম্যানুয়ালি ইনস্টল করা ড্রাইভার সহ, আমি এটি আর দেখতে পাচ্ছি না। আমি সবেমাত্র 19.04 এ আপগ্রেড করেছি কারণ আমার রহস্যময় পূর্ণ সিস্টেম হ্যাং ছিল (চালিত)। ভাবছি দুটো বিষয় কি সম্পর্কযুক্ত?
ওয়েজ ফারলং

1

আমি উবুন্টু 18.04.1, 4.15.0-36 কার্নেল এ কোনও ই -1000e দিয়ে একই সমস্যাটি পেয়েছি এবং কিছুই সাহায্য করেনি। আমি ড্রাইভারটি কোনও উন্নতি ছাড়াই সরাসরি ইন্টেল থেকে 3.4.2.1-NAPI এ আপডেট করেছি। এটিতে লিখিত সমস্ত জিনিস এবং অন্যান্য থ্রেড কোনও উপকারে আসেনি। এই উবুন্টু বাগ রিপোর্টটি পড়ার মাধ্যমে অনুমান করে আমি রিংবফারের আকারকে উল্লেখযোগ্যভাবে হ্রাস করার জন্য একটি কার্যকরী হিসাবে চিহ্নিত করেছি:

sudo ethtool -G eth0 rx 256 tx 256

এটি আমার জন্য সমস্যাটি পুরোপুরি সমাধান করে এবং কোনওভাবেই পারফরম্যান্সকে প্রভাবিত করে না বলে মনে হয় (ডেস্কটপ ব্যবহার, কেবলমাত্র বেসিক মানদণ্ডগুলি করেছিল)।

আমাদের সাইট ব্যবহার করে, আপনি স্বীকার করেছেন যে আপনি আমাদের কুকি নীতি এবং গোপনীয়তা নীতিটি পড়েছেন এবং বুঝতে পেরেছেন ।
Licensed under cc by-sa 3.0 with attribution required.