如何解析 Gemfile 以查找不在源块内的内部 gem？

Question

为了安全起见，Ruby gem 中的 Gemfile 应该始终在 source 块中引用，因此它永远不会尝试从 rubygems.org。我想自动查找人们未能做到这一点的地方，所以想解析 Gemfile，找到任何与我们的内部名称匹配的 gem，并检查 rubygems.org 是不是t 在他们可能的来源列表中。

source 'https://rubygems.org'

gem 'rails'

gem 'my-private-gem1' # this should be in the source block below

source PRIVATE_GEM_REPO do
  gem 'my-private-gem2'
end

我看到你可以解析 Gemfile

Bundler::Definition.build('Gemfile', '', {})

但是在返回的数据结构中找不到任何显示每个 gem

的可用/允许来源的内容

如果我包含 Gemfile.lock 我会看到更多源信息，但这似乎不对，因为每个 gem 都会列出我所有的源，无论它们是否在源块中

Bundler::Definition.build('Gemfile', 'Gemfile.lock', {}).
  locked_gems.
  specs.
  map {|g| [g.full_name, g.source.remotes.map(&:hostname).join(', ')]}
=> ["rails-6.0.3.4", "my.private.gemserver, rubygems.org"],
   ["my-private-gem1-1.0.0", "my.private.gemserver, rubygems.org"],
   ["my-private-gem2-1.0.0", "my.private.gemserver, rubygems.org"]]

关于如何解析 Gemfile 以发现 my-private-gem1 在源块之外的任何想法？

Answer 1

终于弄明白了，只是花了一些时间研究 Bundler 方法 - 并得到了同事的帮助。

Bundler::Definition.
  build('Gemfile', '', nil).
  dependencies.
  map {|dep| [dep.name, dep.source&.remotes&.map(&:hostname)&.join(', ')]}
=>
[["rails", nil],
 ["my-private-gem1", nil],
 ["my-private-gem2", "my.private.gemserver"]]

现在，我可以轻松地在生成的数据结构中搜索未锁定到我的私有 gem 服务器的任何私有 gem。

Answer 2

前言

在我写这个答案时，OP 找到了一个特定于 Bundler 的答案。但是，我在下面提供了一个更通用的解决方案。此解决方案还提供用户反馈，可以更轻松地修复文件。

使用白名单通过列对齐查找候选 Gem

如果您可以安全地假设您的 Gemfile 始终正确缩进，KISS 解决方案可能是简单地识别组定义中未缩进的 gem。例如：

# example Gemfile to test against
GEMFILE = <<~'EOF'
  source 'https://rubygems.org'
  gem 'rails'
  gem 'my-private-gem1' # this should be in the source block below
  source PRIVATE_GEM_REPO do
    gem 'my-private-gem2'
  end
EOF

# gems that are acceptable in a non-group context
whitelist = Regexp.new %w[rails sass-rails webpacker].join(?|)

UngroupedGem   = Struct.new :line_no, :line_txt, :gem_name
ungrouped_gems = []

GEMFILE.lines.each_with_index do |line_txt, line_no|
  next if line_txt =~ whitelist or line_txt !~ /^\s*gem/
  gem_name = line_txt.match(/(?<=(['"]))(.*?)(?=)/)[0]
  ungrouped_gems.append(
    UngroupedGem.new line_no.succ, line_txt, gem_name
  ).compact!
end

# tell the user what actions to take
if ungrouped_gems.any?
  puts "Line No.\tGem Name"
  ungrouped_gems.each { printf "%d\t\t%s\n", _1.line_no, _1.gem_name }
else
  puts "No gems need to be moved."
end

对于这个例子，它会打印：

Line No.  Gem Name
3         my-private-gem1
5         my-private-gem2

这将使您清楚地了解需要移动 Gemfile 中的哪些行，以及涉及哪些特定的 gem。

如何解析 Gemfile 以查找不在源块内的内部 gem？

How do I parse the Gemfile to find internal gems not inside a source block?

ruby

bundler

gemfile

前言

使用白名单通过列对齐查找候选 Gem