প্রশ্ন ট্যাগ «wget»

আমি নীচের ব্যাশ স্ক্রিপ্টের সমান্তরালভাবে কার্ল পটভূমি প্রক্রিয়াগুলি চালাচ্ছি START=$(date +%s) for i in {1..100000} do curl -s "http://some_url_here/"$i > $i.txt& END=$(date +%s) DIFF=$(( $END - $START )) echo "It took $DIFF seconds" done আমার 49Gb Corei7-920 ডেডিকেটেড সার্ভার রয়েছে (ভার্চুয়াল নয়)। আমি topকমান্ডের মাধ্যমে মেমরির খরচ এবং সিপিইউ ট্র্যাক …

14 linux  performance  bash  curl  wget 

আমি sshআমার সার্ভারে এড করে দৌড়ে এসেছি wget -r -np zzz.aaa/bbb/cccএবং এটি কাজ শুরু করে। তারপর (আমার বাড়ীতে) আমার ইন্টারনেট সংযোগ বিঘ্নিত পেয়েছিলাম এবং আমি অভিমানী চিন্তিত হন যে wgetহয়েছে hupPED কারণ sshকানেকশন বিচ্ছিন্ন হয়েছে এবং তাই টার্মিনাল মারা গিয়েছিল। তবে তারপরে আমি sshআমার সার্ভারে এড করেছিলাম বুঝতে পেরেছিলাম যে …

13 ssh  terminal  wget  signals 

আমি www.website.com/XYZ এর অধীনে লিঙ্কগুলি ক্রল করতে চাই এবং কেবল www.website.com/ABC এর অধীন থাকা লিঙ্কগুলি ডাউনলোড করতে চাই। আমি চাইলে ফাইলগুলি পেতে নিম্নলিখিত উইজেট কমান্ডটি ব্যবহার করছি: wget -I ABC -r -e robots=off --wait 0.25 http://www.website.com/XYZ আমি যখন উইজেট ব্যবহার করি তখন এটি পুরোপুরি কাজ করে। তবে সমস্যাটি হ'ল আমাকে …

13 command-line  wget 

আমি wgetইমেজ ফাইলগুলি ডাউনলোড করতে (পিএইচপি স্ক্রিপ্ট থেকে) ব্যবহার করতে চাই, তবে নির্দিষ্ট আকারে ফাইলগুলি ডাউনলোড করতে চাই না। আমি কি দিয়ে ফাইলের আকার সীমাবদ্ধ করতে পারি wget? তা না হলে এর থেকে উত্তম উপায় কী?

13 files  wget  size 

আমি একটি স্ক্রিপ্ট লিখছি যাতে কোনও ফাইল ডাউনলোড এবং ম্যানিপুলেট করা জড়িত এবং আমি কাজটি করার আগে আমি নিশ্চিত করতে চাই যে ফাইলটি অসম্পূর্ণ নয় (উদাহরণস্বরূপ একটি বাদ দেওয়া সংযোগের কারণে)।

13 files  wget  curl  download  corruption 

আমার একটি সার্ভারে একটি সাইট রয়েছে যা মূলত এইচটিএমএল পৃষ্ঠাগুলি, ছবি এবং শব্দগুলির একগুচ্ছ। আমি সেই সার্ভারে আমার পাসওয়ার্ডটি হারিয়ে ফেলেছি এবং সেখানে সঞ্চিত সমস্ত কিছুই আমাকে গ্রহন করতে হবে। আমি পৃষ্ঠায় পৃষ্ঠায় যেতে পারি এবং সমস্ত কিছু সংরক্ষণ করতে পারি তবে সাইটে 100 টিরও বেশি পৃষ্ঠা রয়েছে। আমি ওএসএক্স …

13 wget 

আমি wgetএভাবে চালাচ্ছি : wget --mirror --adjust-extension --convert-links --no-cookies http://tshepang.net -o log-main আমি এই বার্তার একটি গুচ্ছ পেয়েছি: Last-modified header missing -- time-stamps turned off. আমি মনে করি এর অর্থ হল যে স্থানীয়ভাবে আমার কাছে থাকা সত্ত্বেও পৃষ্ঠাগুলি পুনরায় ডাউনলোড হতে থাকে। দ্রষ্টব্য : আমি এটি চাই যাতে প্রতিবার কমান্ড …

13 wget  web 

আমি একটি স্ট্যাটিক এইচটিএমএল পৃষ্ঠা ডাউনলোড করতে উইজেট ব্যবহার করছি। ডাব্লু 3 সি ভ্যালিডেটর আমাকে জানান যে পৃষ্ঠাটি ইউটিএফ -8 এ এনকোড করা আছে। তবুও আমি ডাউনলোডের পরে যখন ফাইলটি বিড়াল করি তখন আমি একগুচ্ছ বাইনারি ননসেন্স পাই। আমি উবুন্টুতে আছি, এবং আমি ভেবেছিলাম ডিফল্ট এনকোডিংটি ইউটিএফ -8? আমার লোকাল …

12 wget  character-encoding  gzip  http 

আমি একাধিক ফাইলের মধ্যে ছড়িয়ে পড়া ডেটা ডাউনলোড করছি যা একবার প্রকাশিত হলে পরিবর্তিত হয় না। অতএব --timestampingপর্যাপ্ত পরিমাণে কার্যকর নয়, কারণ এটি নিয়মিত যা যা সংস্থান পরিবর্তন হয়েছে তা যাচাই করে যা আমার ক্ষেত্রে সম্পূর্ণ অর্থহীন। --no-clobberপুরোপুরি ফিট হবে। দুর্ভাগ্যক্রমে এটি কোনও --convert-links কারণে কাজ করে না । উভয় …

12 wget  download 

উদাহরণস্বরূপ আমার একটি লিঙ্ক আছে http://www.abc.com/123/def/ghi/jkl.mno। আমি এটি ব্যবহার করে ডাউনলোড করতে চাই wgetবা curlআউটপুট ফাইলটির নাম পেতে চাই def_ghi_jkl.mno, যেখানে অংশটি def_ghiলিঙ্কটি থেকে নেওয়া হয়েছে। আমি এই wgetকমান্ডটি একাধিক ফাইল ডাউনলোড করার জন্য একটি স্ক্রিপ্টে রেখে দেব যাতে এটি আউটপুট ফাইলের নামটি স্পষ্টভাবে দিতে পারে না।

12 filenames  wget  curl 

আমি সিপিইউ, মেমরি, স্টোরেজ (যেমন স্থানীয়ভাবে দূরবর্তী ফাইলের অনুলিপিগুলি সংরক্ষণ না করে) ছাড়াই অতিরিক্ত কোনও চাপ ছাড়াই একটি ড্রপবক্স ফাইল সিস্টেম অন্বেষণ করতে সক্ষম হতে চাই। দেখে মনে হচ্ছে যে অফিসিয়াল ক্লায়েন্ট অনেকগুলি পুনঃব্যবস্থা গ্রাস করেছে (এবং সিঙ্ক করার মতো অযৌক্তিক ক্রিয়াকলাপ করবে) - http://www.lowendtalk.com/discussion/3179/DPbox-memory-usage-on-linux । এক শুধু এটি (বলুন, …

12 wget  fuse  dropbox  hosting-services  protocols 

আপনি যদি ব্রেস প্রসারণটি এর সাথে ব্যবহার করেন তবে আপনি wgetসহজেই ক্রমানুসারে সংখ্যাযুক্ত চিত্রগুলি আনতে পারেন: $ wget 'http://www.iqandreas.com/sample-images/100-100-color/'{90..110}'.jpg' এটা তোলে সংখ্যাযুক্ত প্রথম 10 ফাইল নিয়ে আসে 90.jpgকাছে 99.jpgশুধু জরিমানা, কিন্তু 100.jpgএবং অনওয়ার্ড একটি ফিরতি 404: ফাইল পাওয়া যায়নি ত্রুটি (আমি শুধুমাত্র সার্ভারে সংরক্ষণ করা 100 টি ছবি আছে)। আপনি …

12 bash  shell-script  wget 

wgetমানুষ পৃষ্ঠাটি এই রাজ্য, জন্য ধারার অধীন --random-waitপরামিতি: Some web sites may perform log analysis to identify retrieval programs such as Wget by looking for statistically significant similarities in the time between requests. [...] A 2001 article in a publication devoted to development on a popular consumer platform provided code …

11 wget  man  documentation 

আমি উইজেটের সাথে একটি ইউআরএল কল করছি: /usr/bin/wget --read-timeout=7200 https://site_url/s উইজেট এই ক্ষেত্রে প্রতি 15 মিনিটে একটি জিইটি অনুরোধ সম্পাদন করে, সময়সীমা নির্ধারিত হওয়া সত্ত্বেও, কেন এটি ঘটে? কলটি কেবল একবার করা উচিত, আমি কীভাবে পুনরায় চেষ্টা করার জন্য উইজেট সেট করতে পারি? আমি জানি আপনি সেট করতে পারবেন t=nতবে …

11 linux  rhel  wget 

ইন্টারনেট ইন্টারনেটে দ্রুত সামগ্রী ডাউনলোড করার জন্য উইজেট একটি খুব দরকারী সরঞ্জাম, তবে আমি কী এটি হোস্টিং সাইটগুলি থেকে ডাউনলোড করতে ব্যবহার করতে পারি, যেমন ফ্রেকশেয়ার, আইফাইল.ইট ডিপোজিটফিলস, আপলোড করা, র‌্যাপিডশেয়ার? যদি তা হয় তবে আমি কীভাবে এটি করতে পারি?

11 wget  download  hosting-services