প্রশ্ন ট্যাগ «large-files»

আমি একটি বিশাল টেক্সট ফাইল আছে (> 2GB) এবং আমি শুধু চাই বলুন catলাইন Xথেকে Y(যেমন 57890010 থেকে 57890000)। আমি যা বুঝতে থেকে আমি বংশীধ্বনিতুল্য এটা করতে পারেন headমধ্যে tailবা viceversa, অর্থাত্ head -A /path/to/file | tail -B বা বিকল্পভাবে tail -C /path/to/file | head -D যেখানে A, B, Cএবং …

132 tail  cat  large-files  head 

আমার কাছে বিশাল (70 গিগাবাইট), একটি লাইন , পাঠ্য ফাইল রয়েছে এবং আমি এতে একটি স্ট্রিং (টোকেন) প্রতিস্থাপন করতে চাই। আমি টোকেনটি <unk>অন্য একটি ডামি টোকেন ( গ্লোভ ইস্যু ) দিয়ে প্রতিস্থাপন করতে চাই । আমি চেষ্টা করেছি sed: sed 's/<unk>/<raw_unk>/g' < corpus.txt > corpus.txt.new তবে আউটপুট ফাইলটিতে corpus.txt.newশূন্য-বাইট রয়েছে! …

126 text-processing  sed  large-files 

মাইনের একটি বিশাল (2 GiB অবধি) পাঠ্য ফাইলটিতে এতে প্রতিটি লাইনটির প্রায় 100 টি সঠিক নকল রয়েছে (ফাইলটি CSV- এর মতো ডেটা টেবিল হিসাবে আমার ক্ষেত্রে অকেজো)। আমার যা প্রয়োজন তা হল মূল ক্রম ক্রম বজায় রাখার সময় সমস্ত পুনরাবৃত্তি (মুছে ফেলা তবে এটি একটি তাত্পর্যপূর্ণ পারফরম্যান্স বৃদ্ধির জন্য উত্সর্গ …

126 files  text-processing  large-files 

আমার কাছে মোটামুটি বড় ফাইল (৩৫ জিবি) রয়েছে এবং আমি এই ফাইলটি সিটুতে ফিল্টার করতে চাই (যেমন আমার কাছে অন্য কোনও ফাইলের জন্য পর্যাপ্ত ডিস্কের জায়গা নেই), বিশেষত আমি গ্রেপ করে কিছু প্যাটার্ন উপেক্ষা করতে চাই - এই উপায়টির উপায় কি? অন্য ফাইল ব্যবহার না করে এটি করবেন? ধরা যাক …

54 text-processing  grep  large-files 

আমার কাছে দুটি বড় ফাইল রয়েছে (প্রতিটি 6 জিবি)। তারা \nবিভাজক হিসাবে লাইনফিডগুলি ( ) সহ অরসোর্টড হয় । আমি কীভাবে তাদের পার্থক্য করতে পারি? এটি 24 ঘন্টা নীচে নেওয়া উচিত।

32 performance  diff  large-files 

আমি এটি এসসিপি দিয়ে চেষ্টা করেছি, তবে এটি "নেতিবাচক ফাইলের আকার" বলে। >scp matlab.iso xxx@xxx:/matlab.iso matlab.iso: Negative file size এসএফটিপি ব্যবহারের চেষ্টাও করেছেন, 2 জিবি ফাইল স্থানান্তর না হওয়া পর্যন্ত সূক্ষ্মভাবে কাজ করেছেন, তারপরে বন্ধ করুন: sftp> put matlab.iso Uploading matlab.iso to /home/x/matlab.iso matlab.iso -298% 2021MB -16651.-8KB/s 00:5d o_upload: offset …

27 scp  sftp  large-files 

আমার 25GB টেক্সট ফাইল রয়েছে যা কেবল কয়েকটি লাইনে স্ট্রিং প্রতিস্থাপন করা দরকার। আমি sedসফলভাবে ব্যবহার করতে পারি তবে এটি চালাতে সত্যই দীর্ঘ সময় লাগে। sed -i 's|old text|new text|g' gigantic_file.sql এটি করার কি আরও দ্রুত উপায় আছে?

25 sed  replace  large-files 

আমার ext4একটি (চৌম্বক) হার্ড ড্রাইভে একটি 900 গিগাবাইট পার্টিশন রয়েছে যার কোনও ত্রুটি নেই এবং কোনও খারাপ খাত নেই। খালি lost+foundডিরেক্টরি বাদে পার্টিশনটি সম্পূর্ণ ফাঁকা । সংরক্ষিত ফাইল সিস্টেম ব্লকগুলির সংখ্যা 1% এ সেট করা ব্যতীত ডিফল্ট প্যারামিটার ব্যবহার করে পার্টিশনটি ফর্ম্যাট করা হয়েছিল। আমি xubuntu-15.04-desktop-amd64.isoপার্টিশনের মাউন্ট পয়েন্ট ডিরেক্টরি ব্যবহার …

19 filesystems  ext4  large-files 

আমার প্রায় 100000 ছোট ফাইলের সাথে একটি ডিরেক্টরি রয়েছে (প্রতিটি ফাইলের 1-3 টি লাইন থাকে, প্রতিটি ফাইল একটি পাঠ্য ফাইল)। আকারে ডিরেক্টরিটি খুব বড় নয় (<2 জিবি)। এই ডেটা পেশাদারভাবে পরিচালিত এনএফএস সার্ভারে থাকে। সার্ভারটি লিনাক্স চালায়। আমি মনে করি ফাইল সিস্টেমটি ext3, তবে আমি নিশ্চিতভাবে জানি না। এছাড়াও, সার্ভারে …

19 filesystems  large-files 

আমার কাছে কয়েকটি ফাইল আকারের> 1 জিবি রয়েছে। ফাইলগুলি থেকে আমার শেষ কয়েকটি বাইট সরিয়ে ফেলতে হবে। আমি এটা কিভাবে করবো? আমি ডিস্কের স্থান বাঁচাতে জায়গায় ফাইল সম্পাদনা করতে পছন্দ করি। আমি এইচপি-ইউএক্স এ আছি

18 files  editors  hp-ux  large-files 

ভিডিওর মতো বড় ফাইল এবং ফ্ল্যাক ফর্ম্যাটে অডিও সহ একটি পার্টিশনের জন্য একটি ফাইল-সিস্টেম তৈরি করতে -T লার্জফাইল পতাকা ব্যবহার করা কি কার্যকর ? আমি সেই পতাকাটি এবং এটি ছাড়াই একই পার্টিশনটি পরীক্ষা করেছি এবং এবং টিউন 2fs -l [পার্টিশন] ব্যবহার করে , আমি "ফাইল সিস্টেম বৈশিষ্ট্যগুলি" যাচাই করেছিলাম যে …

17 filesystems  ext4  ext3  large-files  ext2 

: এই অন্য প্রশ্ন হিসাবে একই আত্মা বিড়াল লাইন এক্স বিপুল ফাইলে ওয়াই লাইন : একটি বিশাল পাঠ্য ফাইল থেকে ইমাক্সের (এবং একটি বাফারের উপর দেখানো) প্রদত্ত লাইনের একটি সেট (যেমন লাইন Xএবং মধ্যবর্তী সমস্ত রেখাগুলি) খোলার কোনও উপায় আছে Y? উদাহরণস্বরূপ ফাইল থেকে 57890000 এবং 57890010 লাইনের মধ্যে সমস্ত …

10 emacs  large-files 

আমার কাছে 250 এমবি টেক্সট ফাইল রয়েছে, সমস্ত এক লাইনে। এই ফাইলটিতে আমি aঅক্ষরগুলির সাথে bঅক্ষরগুলি প্রতিস্থাপন করতে চাই : sed -e "s/a/b/g" < one-line-250-mb.txt এটি এতে ব্যর্থ হয়: sed: couldn't re-allocate memory আমার কাছে মনে হয় এই ধরণের টাস্ক বেশি মেমরি বরাদ্দ না করে ইনলাইন সম্পাদন করা যেতে পারে। …

10 text-processing  sed  performance  large-files  out-of-memory