6

有没有办法测试在编译具有多个作业的项目时出现的缺失依赖项（-jN where N > 1）？

我经常遇到包，主要是开源包，只要我使用 -j1 或 -jN，构建过程就可以正常工作，其中 N 是相对较低的值，例如 4 或 8，但如果我使用更高的值，例如 48，则有点不常见，由于缺少依赖项而开始失败。

我尝试为自己构建一个 bash 脚本，该脚本将在给定目标的情况下找出所有依赖项，并尝试使用 -j1 显式构建每个依赖项，以验证没有一个依赖项本身缺少依赖项。它似乎适用于小型/中型软件包，但在更重要的软件包上失败，例如 uClibc。

我在这里分享我的脚本，因为有些人可能会更好地理解我通过阅读代码的意思。我也希望存在更强大的解决方案并可以共享回来。

#!/bin/bash
TARGETS=$*
echo "TARGETS=$TARGETS"

for target in $TARGETS
do
    MAKE="make"
    RULE=`make -j1 -n -p | grep "^$target:"`
    if [ -z "$RULE" ]; then
        continue
    fi

    NEWTARGETS=${RULE#* }
    if [ -z "$NEWTARGETS" ]; then
        continue
    fi

    if [ "${NEWTARGETS}" = "${RULE}" ]; then
        # leaf target, we do not want to test.
        continue
    fi

    echo "RULE=$RULE"
#   echo "NEWTARGETS=$NEWTARGETS"
    $0 $NEWTARGETS
    if [ $? -ne 0 ]; then
        exit 1
    fi

    echo "Testing target $target"
    make clean && make -j1 $target 
    if [ $? -ne 0 ]; then
        echo "Make parallel will fail with target $target"
        exit 1
    fi
done
4

1 回答 1

1

我不知道有任何开源解决方案，但这正是ElectricAccelerator的问题，它是 GNU make 的高性能实现，旨在解决。它将并行执行构建并动态检测和纠正缺失的依赖项，以便构建输出与串行运行一样。它可以生成带注释的构建日志，其中包含有关缺失依赖项的详细信息。例如，这个简单的 makefile 在 and 之间有一个未声明的依赖abc关系def：

all: abc def

abc:
        echo PASS > abc

def:
        cat abc

使用 emake 而不是 gmake 和 enable 运行它，--emake-annodetail=history生成的注释文件包括：

<job id="Jf42015c0" thread="f4bfeb40" start="5" end="6" type="rule" name="def" file="Makefile" line="6" neededby="Jf42015f8">
<command line="7">
<argv>cat abc</argv>
<output>cat abc
</output>
<output src="prog">PASS
</output>
</command>
<depList>
<dep writejob="Jf4201588" file="/tmp/foo/abc"/>
</depList>
<timing invoked="0.356803" completed="0.362634" node="chester-1"/>
</job>

特别是该<depList>部分显示此作业Jf42015c0（换句话说，def）依赖于作业Jf4201588，因为后者修改了文件/tmp/foo/abc。

您可以使用ElectricAccelerator Huddle免费试用。

（免责声明：我是 ElectricAccelerator 的架构师）

于 2014-10-01T19:06:01.433 回答