Каковы все распространенные способы чтения файлов в Ruby?

Каковы все распространенные способы чтения файлов в Ruby?

Например, вот один метод:

fileObj = File.new($fileName, "r")
while (line = fileObj.gets)
  puts(line)
end
fileObj.close

Я знаю, что Руби чрезвычайно гибок. Каковы преимущества / недостатки каждого подхода?

File.open("my/file/path", "r") do |f|
  f.each_line do |line|
    puts line
  end
end
# File is closed automatically at end of block

Также возможно явно закрыть файл после того, как описано выше (передать блок, чтобы закрыть openего для вас):

f = File.open("my/file/path", "r")
f.each_line do |line|
  puts line
end
f.close

Самый простой способ, если файл не слишком длинный:

puts File.read(file_name)

Действительно, IO.readили File.readавтоматически закрывать файл, поэтому нет необходимости использовать File.openс блоком.

Остерегайтесь «хлебать» файлы. Это когда вы читаете весь файл в память сразу.

Проблема в том, что он плохо масштабируется. Вы можете разрабатывать код с файлом разумного размера, затем запустить его в производство и вдруг обнаружите, что пытаетесь прочитать файлы размером в гигабайты, и ваш хост зависает, когда пытается прочитать и выделить память.

Строковый ввод-вывод очень быстрый и почти всегда эффективен, как прихлебывание. Это удивительно быстро на самом деле.

Мне нравится использовать:

IO.foreach("testfile") {|x| print "GOT ", x }

или

File.foreach('testfile') {|x| print "GOT", x }

Файл наследуется от IO и foreachнаходится в IO, поэтому вы можете использовать любой из них.

У меня есть некоторые тесты, показывающие влияние попыток чтения больших файлов с помощью readпострочного ввода-вывода в разделе « Почему« выкраивать »файл не является хорошей практикой? ».

Вы можете прочитать файл сразу:

content = File.readlines 'file.txt'
content.each_with_index{|line, i| puts "#{i+1}: #{line}"}

Когда файл большой или может быть большим, обычно лучше обрабатывать его построчно:

File.foreach( 'file.txt' ) do |line|
  puts line
end

Иногда вы хотите получить доступ к дескриптору файла или контролировать чтение:

File.open( 'file.txt' ) do |f|
  loop do
    break if not line = f.gets
    puts "#{f.lineno}: #{line}"
  end
end

В случае двоичных файлов вы можете указать nil-разделитель и размер блока, например:

File.open('file.bin', 'rb') do |f|
  loop do
    break if not buf = f.gets(nil, 80)
    puts buf.unpack('H*')
  end
end

Наконец, вы можете сделать это без блока, например, при обработке нескольких файлов одновременно. В этом случае файл должен быть явно закрыт (улучшено согласно комментарию @antinome):

begin
  f = File.open 'file.txt'
  while line = f.gets
    puts line
  end
ensure
  f.close
end

Ссылки: Файловый API и IO API .

Один простой метод заключается в использовании readlines:

my_array = IO.readlines('filename.txt')

Каждая строка во входном файле будет записана в массиве. Метод обрабатывает открытие и закрытие файла для вас.

file_content = File.read('filename with extension');
puts file_content;

http://www.ruby-doc.org/core-1.9.3/IO.html#method-c-read

Я обычно делаю это:

open(path_in_string, &:read)

Это даст вам весь текст в виде строкового объекта. Работает только под Ruby 1.9.

вернуть последние n строк из your_file.log или .txt

path = File.join(Rails.root, 'your_folder','your_file.log')

last_100_lines = `tail -n 100 #{path}`

Еще более эффективный способ - потоковая передача, запрашивая ядро ​​операционной системы открыть файл, а затем считывать байты из него по крупицам. При чтении файла на строку в Ruby данные берутся из файла по 512 байт за раз и после этого разделяются на «строки».

Буферизуя содержимое файла, количество вызовов ввода / вывода уменьшается при делении файла на логические порции.

Пример:

Добавьте этот класс в ваше приложение в качестве объекта службы:

class MyIO
  def initialize(filename)
    fd = IO.sysopen(filename)
    @io = IO.new(fd)
    @buffer = ""
  end

  def each(&block)
    @buffer << @io.sysread(512) until @buffer.include?($/)

    line, @buffer = @buffer.split($/, 2)

    block.call(line)
    each(&block)
  rescue EOFError
    @io.close
 end
end

Вызовите его и передайте :eachметод блок:

filename = './somewhere/large-file-4gb.txt'
MyIO.new(filename).each{|x| puts x }

Читайте об этом здесь в этом подробном сообщении:

Ruby Magic Slurping & Streaming файлы от AppSignal

content = `cat file`

Я думаю, что этот метод является наиболее "необычным". Может быть, это немного сложно, но работает, если catустановлен.