Ruby脚本';死亡';

Ruby脚本';死亡';,ruby,amazon-web-services,Ruby,Amazon Web Services,我正在从命令行运行ruby脚本。该脚本下载一个文件(15MB),解压它,将其解析为JSON,然后用它填充mysql数据库 当我运行它时,我会收到一条简单的“Killed”消息。发生什么事?我怎样才能找出问题所在 我正在EC2微实例上使用它 谢谢 这是剧本 require 'open-uri' require 'zlib' require 'json' require_relative '../db/db.rb' dl = open('........') ex = Zlib::GzipRea

我正在从命令行运行ruby脚本。该脚本下载一个文件(15MB),解压它,将其解析为JSON,然后用它填充mysql数据库

当我运行它时,我会收到一条简单的“Killed”消息。发生什么事?我怎样才能找出问题所在

我正在EC2微实例上使用它

谢谢

这是剧本

require 'open-uri'
require 'zlib'
require 'json'

require_relative '../db/db.rb'

dl = open('........')
ex = Zlib::GzipReader.new dl
json = JSON.parse ex.read
events = json['resultsPage']['results']['event']

puts "starting to parse #{events.count} event(s)..."
created = 0
updated = 0

events[1..10].each do |event|
    performances = event['performance']
    performances.each do  |performance|
        ar_show = Show.find_or_initialize_by_songkick_id performance['id']
        ar_show.artist_name = performance['displayName']
        ar_show.new_record? ? created += 1 : updated += 1
        ar_show.save!
    end
end

Import.create :updated => updated, :new => created
puts "complete. new: #{created}   -   updated: #{updated}"

几乎可以肯定的是,内存不足,因为微型实例没有太多可用的内存或交换空间。我在Perl程序中遇到过这种情况。动态语言在处理大数据块时会占用大量内存


测试这一理论的最好方法是在不到一个小时的时间内启动一个小的或大的实例(这样你就不用花很多钱),然后在那里尝试脚本。如果它运行,您就知道一个微实例太小,程序无法运行。

只需获取消息“Killed”。如何找到堆栈跟踪?有可能导致OOM(内存不足)死机。检查/var/log/messages是否有错误。我确信EC2管理员出于某种原因杀死了它。喜欢太多的记忆。谢谢。我检查了我的microinstance,它有400 mb的RAM是免费的。我的脚本下载15 MB的数据并将其解析为JSON。你认为这足够让它变大吗?达曼…你是对的。在脚本运行时,我每隔一秒钟就做一次cat/proc/meminfo,空闲内存从416MB增加到6MB。哈哈,是的;我在使用Grunt丑化文件时遇到了同样的问题。我一边睡觉一边跑
;执行cat/proc/meminfo | grep MemFree;完成
有趣的是,看到内存逐渐减少,直到输出为
bash:fork:cannotallocate memory
:D