MAKEALL

   1 #!/bin/bash
   2 # Tool mainly for U-Boot Quality Assurance: build one or more board
   3 # configurations with minimal verbosity, showing only warnings and
   4 # errors.
   5 #
   6 # SPDX-License-Identifier:      GPL-2.0+
   7
   8 usage()
   9 {
  10         # if exiting with 0, write to stdout, else write to stderr
  11         local ret=${1:-0}
  12         [ "${ret}" -eq 1 ] && exec 1>&2
  13         cat <<-EOF
  14         Usage: MAKEALL [options] [--] [boards-to-build]
  15
  16         Options:
  17           -a ARCH,   --arch ARCH       Build all boards with arch ARCH
  18           -c CPU,    --cpu CPU         Build all boards with cpu CPU
  19           -v VENDOR, --vendor VENDOR   Build all boards with vendor VENDOR
  20           -s SOC,    --soc SOC         Build all boards with soc SOC
  21           -b BOARD,  --board BOARD     Build all boards with board name BOARD
  22           -l,        --list            List all targets to be built
  23           -m,        --maintainers     List all targets and maintainer email
  24           -M,        --mails           List all targets and all affilated emails
  25           -C,        --check           Enable build checking
  26           -n,        --continue        Continue (skip boards already built)
  27           -r,        --rebuild-errors  Rebuild any boards that errored
  28           -h,        --help            This help output
  29
  30         Selections by these options are logically ANDed; if the same option
  31         is used repeatedly, such selections are ORed.  So "-v FOO -v BAR"
  32         will select all configurations where the vendor is either FOO or
  33         BAR.  Any additional arguments specified on the command line are
  34         always build additionally.  See the boards.cfg file for more info.
  35
  36         If no boards are specified, then the default is "powerpc".
  37
  38         Environment variables:
  39           BUILD_NCPUS      number of parallel make jobs (default: auto)
  40           CROSS_COMPILE    cross-compiler toolchain prefix (default: "")
  41           CROSS_COMPILE_<ARCH> cross-compiler toolchain prefix for
  42                            architecture "ARCH".  Substitute "ARCH" for any
  43                            supported architecture (default: "")
  44           MAKEALL_LOGDIR   output all logs to here (default: ./LOG/)
  45           BUILD_DIR        output build directory (default: ./)
  46           BUILD_NBUILDS    number of parallel targets (default: 1)
  47
  48         Examples:
  49           - build all Power Architecture boards:
  50               MAKEALL -a powerpc
  51               MAKEALL --arch powerpc
  52               MAKEALL powerpc
  53           - build all PowerPC boards manufactured by vendor "esd":
  54               MAKEALL -a powerpc -v esd
  55           - build all PowerPC boards manufactured either by "keymile" or "siemens":
  56               MAKEALL -a powerpc -v keymile -v siemens
  57           - build all Freescale boards with MPC83xx CPUs, plus all 4xx boards:
  58               MAKEALL -c mpc83xx -v freescale 4xx
  59         EOF
  60         exit ${ret}
  61 }
  62
  63 SHORT_OPTS="ha:c:v:s:b:lmMCnr"
  64 LONG_OPTS="help,arch:,cpu:,vendor:,soc:,board:,list,maintainers,mails,check,continue,rebuild-errors"
  65
  66 # Option processing based on util-linux-2.13/getopt-parse.bash
  67
  68 # Note that we use `"$@"' to let each command-line parameter expand to a
  69 # separate word. The quotes around `$@' are essential!
  70 # We need TEMP as the `eval set --' would nuke the return value of
  71 # getopt.
  72 TEMP=`getopt -o ${SHORT_OPTS} --long ${LONG_OPTS} \
  73      -n 'MAKEALL' -- "$@"`
  74
  75 [ $? != 0 ] && usage 1
  76
  77 # Note the quotes around `$TEMP': they are essential!
  78 eval set -- "$TEMP"
  79
  80 SELECTED=''
  81 ONLY_LIST=''
  82 PRINT_MAINTS=''
  83 MAINTAINERS_ONLY=''
  84 CONTINUE=''
  85 REBUILD_ERRORS=''
  86
  87 while true ; do
  88         case "$1" in
  89         -a|--arch)
  90                 # echo "Option ARCH: argument \`$2'"
  91                 if [ "$opt_a" ] ; then
  92                         opt_a="${opt_a%)} || \$2 == \"$2\")"
  93                 else
  94                         opt_a="(\$2 == \"$2\")"
  95                 fi
  96                 SELECTED='y'
  97                 shift 2 ;;
  98         -c|--cpu)
  99                 # echo "Option CPU: argument \`$2'"
 100                 if [ "$opt_c" ] ; then
 101                         opt_c="${opt_c%)} || \$3 == \"$2\" || \$3 ~ /$2:/)"
 102                 else
 103                         opt_c="(\$3 == \"$2\" || \$3 ~ /$2:/)"
 104                 fi
 105                 SELECTED='y'
 106                 shift 2 ;;
 107         -s|--soc)
 108                 # echo "Option SoC: argument \`$2'"
 109                 if [ "$opt_s" ] ; then
 110                         opt_s="${opt_s%)} || \$4 == \"$2\" || \$4 ~ /$2/)"
 111                 else
 112                         opt_s="(\$4 == \"$2\" || \$4 ~ /$2/)"
 113                 fi
 114                 SELECTED='y'
 115                 shift 2 ;;
 116         -v|--vendor)
 117                 # echo "Option VENDOR: argument \`$2'"
 118                 if [ "$opt_v" ] ; then
 119                         opt_v="${opt_v%)} || \$5 == \"$2\")"
 120                 else
 121                         opt_v="(\$5 == \"$2\")"
 122                 fi
 123                 SELECTED='y'
 124                 shift 2 ;;
 125         -b|--board)
 126                 # echo "Option BOARD: argument \`$2'"
 127                 if [ "$opt_b" ] ; then
 128                         opt_b="${opt_b%)} || \$6 == \"$2\" || \$7 == \"$2\")"
 129                 else
 130                         # We need to check the 7th field too
 131                         # for boards whose 6th field is "-"
 132                         opt_b="(\$6 == \"$2\" || \$7 == \"$2\")"
 133                 fi
 134                 SELECTED='y'
 135                 shift 2 ;;
 136         -C|--check)
 137                 CHECK='C=1'
 138                 shift ;;
 139         -n|--continue)
 140                 CONTINUE='y'
 141                 shift ;;
 142         -r|--rebuild-errors)
 143                 REBUILD_ERRORS='y'
 144                 shift ;;
 145         -l|--list)
 146                 ONLY_LIST='y'
 147                 shift ;;
 148         -m|--maintainers)
 149                 ONLY_LIST='y'
 150                 PRINT_MAINTS='y'
 151                 MAINTAINERS_ONLY='y'
 152                 shift ;;
 153         -M|--mails)
 154                 ONLY_LIST='y'
 155                 PRINT_MAINTS='y'
 156                 shift ;;
 157         -h|--help)
 158                 usage ;;
 159         --)
 160                 shift ; break ;;
 161         *)
 162                 echo "Internal error!" >&2 ; exit 1 ;;
 163         esac
 164 done
 165 # echo "Remaining arguments:"
 166 # for arg do echo '--> '"\`$arg'" ; done
 167
 168 FILTER="\$1 !~ /^#/"
 169 [ "$opt_a" ] && FILTER="${FILTER} && $opt_a"
 170 [ "$opt_c" ] && FILTER="${FILTER} && $opt_c"
 171 [ "$opt_s" ] && FILTER="${FILTER} && $opt_s"
 172 [ "$opt_v" ] && FILTER="${FILTER} && $opt_v"
 173 [ "$opt_b" ] && FILTER="${FILTER} && $opt_b"
 174
 175 if [ "$SELECTED" ] ; then
 176         SELECTED=$(awk '('"$FILTER"') { print $7 }' boards.cfg)
 177
 178         # Make sure some boards from boards.cfg are actually found
 179         if [ -z "$SELECTED" ] ; then
 180                 echo "Error: No boards selected, invalid arguments"
 181                 exit 1
 182         fi
 183 fi
 184
 185 #########################################################################
 186
 187 # Print statistics when we exit
 188 trap exit 1 2 3 15
 189 trap print_stats 0
 190
 191 # Determine number of CPU cores if no default was set
 192 : ${BUILD_NCPUS:="`getconf _NPROCESSORS_ONLN`"}
 193
 194 if [ "$BUILD_NCPUS" -gt 1 ]
 195 then
 196         JOBS="-j $((BUILD_NCPUS + 1))"
 197 else
 198         JOBS=""
 199 fi
 200
 201 if [ "${MAKEALL_LOGDIR}" ] ; then
 202         LOG_DIR=${MAKEALL_LOGDIR}
 203 else
 204         LOG_DIR="LOG"
 205 fi
 206
 207 : ${BUILD_NBUILDS:=1}
 208 BUILD_MANY=0
 209
 210 if [ "${BUILD_NBUILDS}" -gt 1 ] ; then
 211         BUILD_MANY=1
 212         : ${BUILD_DIR:=./build}
 213         mkdir -p "${BUILD_DIR}/ERR"
 214         find "${BUILD_DIR}/ERR/" -type f -exec rm -f {} +
 215 fi
 216
 217 : ${BUILD_DIR:=.}
 218
 219 OUTPUT_PREFIX="${BUILD_DIR}"
 220
 221 [ -d ${LOG_DIR} ] || mkdir "${LOG_DIR}" || exit 1
 222 if [ "$CONTINUE" != 'y' -a "$REBUILD_ERRORS" != 'y' ] ; then
 223         find "${LOG_DIR}/" -type f -exec rm -f {} +
 224 fi
 225
 226 LIST=""
 227
 228 # Keep track of the number of builds and errors
 229 ERR_CNT=0
 230 ERR_LIST=""
 231 WRN_CNT=0
 232 WRN_LIST=""
 233 TOTAL_CNT=0
 234 SKIP_CNT=0
 235 CURRENT_CNT=0
 236 OLDEST_IDX=1
 237 RC=0
 238
 239 # Helper funcs for parsing boards.cfg
 240 targets_by_field()
 241 {
 242         field=$1
 243         regexp=$2
 244
 245         awk '($1 !~ /^#/ && $'"$field"' ~ /^'"$regexp"'$/) { print $7 }' \
 246                                                                 boards.cfg
 247 }
 248
 249 targets_by_arch() { targets_by_field 2 "$@" ; }
 250 targets_by_cpu()  { targets_by_field 3 "$@" ; targets_by_field 3 "$@:.*" ; }
 251 targets_by_soc()  { targets_by_field 4 "$@" ; }
 252
 253 #########################################################################
 254 ## MPC5xx Systems
 255 #########################################################################
 256
 257 LIST_5xx="$(targets_by_cpu mpc5xx)"
 258
 259 #########################################################################
 260 ## MPC5xxx Systems
 261 #########################################################################
 262
 263 LIST_5xxx="$(targets_by_cpu mpc5xxx)"
 264
 265 #########################################################################
 266 ## MPC512x Systems
 267 #########################################################################
 268
 269 LIST_512x="$(targets_by_cpu mpc512x)"
 270
 271 #########################################################################
 272 ## MPC8xx Systems
 273 #########################################################################
 274
 275 LIST_8xx="$(targets_by_cpu mpc8xx)"
 276
 277 #########################################################################
 278 ## PPC4xx Systems
 279 #########################################################################
 280
 281 LIST_4xx="$(targets_by_cpu ppc4xx)"
 282
 283 #########################################################################
 284 ## MPC824x Systems
 285 #########################################################################
 286
 287 LIST_824x="$(targets_by_cpu mpc824x)"
 288
 289 #########################################################################
 290 ## MPC8260 Systems (includes 8250, 8255 etc.)
 291 #########################################################################
 292
 293 LIST_8260="$(targets_by_cpu mpc8260)"
 294
 295 #########################################################################
 296 ## MPC83xx Systems (includes 8349, etc.)
 297 #########################################################################
 298
 299 LIST_83xx="$(targets_by_cpu mpc83xx)"
 300
 301 #########################################################################
 302 ## MPC85xx Systems (includes 8540, 8560 etc.)
 303 #########################################################################
 304
 305 LIST_85xx="$(targets_by_cpu mpc85xx)"
 306
 307 #########################################################################
 308 ## MPC86xx Systems
 309 #########################################################################
 310
 311 LIST_86xx="$(targets_by_cpu mpc86xx)"
 312
 313 #########################################################################
 314 ## 74xx/7xx Systems
 315 #########################################################################
 316
 317 LIST_74xx_7xx="$(targets_by_cpu 74xx_7xx)"
 318
 319 #########################################################################
 320 ## PowerPC groups
 321 #########################################################################
 322
 323 LIST_TSEC="             \
 324         ${LIST_83xx}    \
 325         ${LIST_85xx}    \
 326         ${LIST_86xx}    \
 327 "
 328
 329 LIST_powerpc="          \
 330         ${LIST_5xx}     \
 331         ${LIST_512x}    \
 332         ${LIST_5xxx}    \
 333         ${LIST_8xx}     \
 334         ${LIST_824x}    \
 335         ${LIST_8260}    \
 336         ${LIST_83xx}    \
 337         ${LIST_85xx}    \
 338         ${LIST_86xx}    \
 339         ${LIST_4xx}     \
 340         ${LIST_74xx_7xx}\
 341 "
 342
 343 # Alias "ppc" -> "powerpc" to not break compatibility with older scripts
 344 # still using "ppc" instead of "powerpc"
 345 LIST_ppc="              \
 346         ${LIST_powerpc} \
 347 "
 348
 349 #########################################################################
 350 ## StrongARM Systems
 351 #########################################################################
 352
 353 LIST_SA="$(targets_by_cpu sa1100)"
 354
 355 #########################################################################
 356 ## ARM7 Systems
 357 #########################################################################
 358
 359 LIST_ARM7="$(targets_by_cpu arm720t)"
 360
 361 #########################################################################
 362 ## ARM9 Systems
 363 #########################################################################
 364
 365 LIST_ARM9="$(targets_by_cpu arm920t)    \
 366         $(targets_by_cpu arm926ejs)     \
 367         $(targets_by_cpu arm946es)      \
 368 "
 369
 370 #########################################################################
 371 ## ARM11 Systems
 372 #########################################################################
 373 LIST_ARM11="$(targets_by_cpu arm1136)   \
 374         $(targets_by_cpu arm1176)       \
 375 "
 376
 377 #########################################################################
 378 ## ARMV7 Systems
 379 #########################################################################
 380
 381 LIST_ARMV7="$(targets_by_cpu armv7)"
 382
 383 #########################################################################
 384 ## ARMV8 Systems
 385 #########################################################################
 386
 387 LIST_ARMV8="$(targets_by_cpu armv8)"
 388
 389 #########################################################################
 390 ## AT91 Systems
 391 #########################################################################
 392
 393 LIST_at91="$(targets_by_soc at91)"
 394
 395 #########################################################################
 396 ## Xscale Systems
 397 #########################################################################
 398
 399 LIST_pxa="$(targets_by_cpu pxa)"
 400
 401 LIST_ixp="$(targets_by_cpu ixp)"
 402
 403 #########################################################################
 404 ## SPEAr Systems
 405 #########################################################################
 406
 407 LIST_spear="$(targets_by_soc spear)"
 408
 409 #########################################################################
 410 ## ARM groups
 411 #########################################################################
 412
 413 LIST_arm="$(targets_by_arch arm |               \
 414         for ARMV8_TARGET in $LIST_ARMV8;        \
 415                 do sed "/$ARMV8_TARGET/d";      \
 416         done)                                   \
 417 "
 418
 419 #########################################################################
 420 ## MIPS Systems         (default = big endian)
 421 #########################################################################
 422
 423 LIST_mips4kc="          \
 424         incaip          \
 425         incaip_100MHz   \
 426         incaip_133MHz   \
 427         incaip_150MHz   \
 428         qemu_mips       \
 429         vct_platinum    \
 430         vct_platinum_small      \
 431         vct_platinum_onenand    \
 432         vct_platinum_onenand_small      \
 433         vct_platinumavc \
 434         vct_platinumavc_small   \
 435         vct_platinumavc_onenand \
 436         vct_platinumavc_onenand_small   \
 437         vct_premium     \
 438         vct_premium_small       \
 439         vct_premium_onenand     \
 440         vct_premium_onenand_small       \
 441 "
 442
 443 LIST_au1xx0="           \
 444         dbau1000        \
 445         dbau1100        \
 446         dbau1500        \
 447         dbau1550        \
 448 "
 449
 450 LIST_mips="             \
 451         ${LIST_mips4kc} \
 452         ${LIST_mips5kc} \
 453         ${LIST_au1xx0}  \
 454 "
 455
 456 #########################################################################
 457 ## MIPS Systems         (little endian)
 458 #########################################################################
 459
 460 LIST_au1xx0_el="        \
 461         dbau1550_el     \
 462         pb1000          \
 463 "
 464 LIST_mips_el="                  \
 465         ${LIST_au1xx0_el}       \
 466 "
 467 #########################################################################
 468 ## OpenRISC Systems
 469 #########################################################################
 470
 471 LIST_openrisc="$(targets_by_arch openrisc)"
 472
 473 #########################################################################
 474 ## x86 Systems
 475 #########################################################################
 476
 477 LIST_x86="$(targets_by_arch x86)"
 478
 479 #########################################################################
 480 ## Nios-II Systems
 481 #########################################################################
 482
 483 LIST_nios2="$(targets_by_arch nios2)"
 484
 485 #########################################################################
 486 ## MicroBlaze Systems
 487 #########################################################################
 488
 489 LIST_microblaze="$(targets_by_arch microblaze)"
 490
 491 #########################################################################
 492 ## ColdFire Systems
 493 #########################################################################
 494
 495 LIST_m68k="$(targets_by_arch m68k)"
 496 LIST_coldfire=${LIST_m68k}
 497
 498 #########################################################################
 499 ## AVR32 Systems
 500 #########################################################################
 501
 502 LIST_avr32="$(targets_by_arch avr32)"
 503
 504 #########################################################################
 505 ## Blackfin Systems
 506 #########################################################################
 507
 508 LIST_blackfin="$(targets_by_arch blackfin)"
 509
 510 #########################################################################
 511 ## SH Systems
 512 #########################################################################
 513
 514 LIST_sh2="$(targets_by_cpu sh2)"
 515 LIST_sh3="$(targets_by_cpu sh3)"
 516 LIST_sh4="$(targets_by_cpu sh4)"
 517
 518 LIST_sh="$(targets_by_arch sh)"
 519
 520 #########################################################################
 521 ## SPARC Systems
 522 #########################################################################
 523
 524 LIST_sparc="$(targets_by_arch sparc)"
 525
 526 #########################################################################
 527 ## NDS32 Systems
 528 #########################################################################
 529
 530 LIST_nds32="$(targets_by_arch nds32)"
 531
 532 #########################################################################
 533 ## ARC Systems
 534 #########################################################################
 535
 536 LIST_arc="$(targets_by_arch arc)"
 537
 538 #-----------------------------------------------------------------------
 539
 540 get_target_location() {
 541         local target=$1
 542         local BOARD_NAME=""
 543         local CONFIG_NAME=""
 544         local board=""
 545         local vendor=""
 546
 547         # Automatic mode
 548         local line=`awk '\$7 == "'"$target"'" { print \$0 }' boards.cfg`
 549         if [ -z "${line}" ] ; then echo "" ; return ; fi
 550
 551         set ${line}
 552
 553         CONFIG_NAME="${7%_config}"
 554
 555         [ "${BOARD_NAME}" ] || BOARD_NAME="${7%_config}"
 556
 557         if [ $# -gt 5 ]; then
 558                 if [ "$6" = "-" ] ; then
 559                         board=${BOARD_NAME}
 560                 else
 561                         board="$6"
 562                 fi
 563         fi
 564
 565         [ $# -gt 4 ] && [ "$5" != "-" ] && vendor="$5"
 566         [ $# -gt 6 ] && [ "$8" != "-" ] && {
 567                 tmp="${8%:*}"
 568                 if [ "$tmp" ] ; then
 569                         CONFIG_NAME="$tmp"
 570                 fi
 571         }
 572
 573         # Assign board directory to BOARDIR variable
 574         if [ "${vendor}" == "-" ] ; then
 575             BOARDDIR=${board}
 576         else
 577             BOARDDIR=${vendor}/${board}
 578         fi
 579
 580         echo "${CONFIG_NAME}:${BOARDDIR}:${BOARD_NAME}"
 581 }
 582
 583 get_target_maintainers() {
 584         local name=`echo $1 | cut -d : -f 3`
 585
 586         local line=`awk '\$7 == "'"$target"'" { print \$0 }' boards.cfg`
 587         if [ -z "${line}" ]; then
 588                 echo ""
 589                 return ;
 590         fi
 591
 592         local mails=`echo ${line} | cut -d ' ' -f 9- | sed -e 's/[^<]*<//' -e 's/>.*</ /' -e 's/>[^>]*$//'`
 593         [ "$mails" == "-" ] && mails=""
 594         echo "$mails"
 595 }
 596
 597 get_target_arch() {
 598         local target=$1
 599
 600         # Automatic mode
 601         local line=`awk '\$7 == "'"$target"'" { print \$0 }' boards.cfg`
 602
 603         if [ -z "${line}" ] ; then echo "" ; return ; fi
 604
 605         set ${line}
 606         echo "$2"
 607 }
 608
 609 list_target() {
 610         if [ "$PRINT_MAINTS" != 'y' ] ; then
 611                 echo "$1"
 612                 return
 613         fi
 614
 615         echo -n "$1:"
 616
 617         local loc=`get_target_location $1`
 618
 619         if [ -z "${loc}" ] ; then echo "ERROR" ; return ; fi
 620
 621         local maintainers_result=`get_target_maintainers ${loc} | tr " " "\n"`
 622
 623         if [ "$MAINTAINERS_ONLY" != 'y' ] ; then
 624
 625                 local dir=`echo ${loc} | cut -d ":" -f 2`
 626                 local cfg=`echo ${loc} | cut -d ":" -f 1`
 627                 local git_result=`git log --format=%aE board/${dir} \
 628                                 include/configs/${cfg}.h | grep "@"`
 629                 local git_result_recent=`echo ${git_result} | tr " " "\n" | \
 630                                                 head -n 3`
 631                 local git_result_top=`echo ${git_result} | tr " " "\n" | \
 632                         sort | uniq -c | sort -nr | head -n 3 | \
 633                         sed "s/^ \+[0-9]\+ \+//"`
 634
 635                 echo -e "$git_result_recent\n$git_result_top\n$maintainers_result" | \
 636                         sort -u | tr "\n" " " | sed "s/ $//" ;
 637         else
 638                 echo -e "$maintainers_result" | sort -u | tr "\n" " " | \
 639                                                 sed "s/ $//" ;
 640         fi
 641
 642         echo ""
 643 }
 644
 645 # Each finished build will have a file called ${donep}${n},
 646 # where n is the index of the build. Each build
 647 # we've already noted as finished will have ${skipp}${n}.
 648 # The code managing the build process will use this information
 649 # to ensure that only BUILD_NBUILDS builds are in flight at once
 650 donep="${LOG_DIR}/._done_"
 651 skipp="${LOG_DIR}/._skip_"
 652
 653 build_target_killed() {
 654         echo "Aborted $target build."
 655         # Remove the logs for this board since it was aborted
 656         rm -f ${LOG_DIR}/$target.MAKELOG ${LOG_DIR}/$target.ERR
 657         exit
 658 }
 659
 660 build_target() {
 661         target=$1
 662         build_idx=$2
 663
 664         if [ "$ONLY_LIST" == 'y' ] ; then
 665                 list_target ${target}
 666                 return
 667         fi
 668
 669         if [ $BUILD_MANY == 1 ] ; then
 670                 output_dir="${OUTPUT_PREFIX}/${target}"
 671                 mkdir -p "${output_dir}"
 672                 trap build_target_killed TERM
 673         else
 674                 output_dir="${OUTPUT_PREFIX}"
 675         fi
 676
 677         target_arch=$(get_target_arch ${target})
 678         eval cross_toolchain=\$CROSS_COMPILE_`echo $target_arch | tr '[:lower:]' '[:upper:]'`
 679         if [ "${cross_toolchain}" ] ; then
 680             MAKE="make CROSS_COMPILE=${cross_toolchain}"
 681         elif [ "${CROSS_COMPILE}" ] ; then
 682             MAKE="make CROSS_COMPILE=${CROSS_COMPILE}"
 683         else
 684             MAKE=make
 685         fi
 686
 687         if [  "${output_dir}" != "." ] ; then
 688                 MAKE="${MAKE} O=${output_dir}"
 689         fi
 690
 691         ${MAKE} distclean >/dev/null
 692         ${MAKE} -s ${target}_config
 693
 694         ${MAKE} ${JOBS} ${CHECK} all \
 695                 >${LOG_DIR}/$target.MAKELOG 2> ${LOG_DIR}/$target.ERR
 696
 697         # Check for 'make' errors
 698         if [ ${PIPESTATUS[0]} -ne 0 ] ; then
 699                 RC=1
 700         fi
 701
 702         if [ $BUILD_MANY == 1 ] ; then
 703                 trap - TERM
 704
 705                 ${MAKE} -s clean
 706
 707                 if [ -s ${LOG_DIR}/${target}.ERR ] ; then
 708                         cp ${LOG_DIR}/${target}.ERR ${OUTPUT_PREFIX}/ERR/${target}
 709                 else
 710                         rm ${LOG_DIR}/${target}.ERR
 711                 fi
 712         else
 713                 if [ -s ${LOG_DIR}/${target}.ERR ] ; then
 714                         if grep -iw error ${LOG_DIR}/${target}.ERR ; then
 715                                 : $(( ERR_CNT += 1 ))
 716                                 ERR_LIST="${ERR_LIST} $target"
 717                         else
 718                                 : $(( WRN_CNT += 1 ))
 719                                 WRN_LIST="${WRN_LIST} $target"
 720                         fi
 721                 else
 722                         rm ${LOG_DIR}/${target}.ERR
 723                 fi
 724         fi
 725
 726         OBJS=${output_dir}/u-boot
 727         if [ -e ${output_dir}/spl/u-boot-spl ]; then
 728                 OBJS="${OBJS} ${output_dir}/spl/u-boot-spl"
 729         fi
 730
 731         ${CROSS_COMPILE}size ${OBJS} | tee -a ${LOG_DIR}/$target.MAKELOG
 732
 733         [ -e "${LOG_DIR}/${target}.ERR" ] && cat "${LOG_DIR}/${target}.ERR"
 734
 735         touch "${donep}${build_idx}"
 736 }
 737
 738 manage_builds() {
 739         search_idx=${OLDEST_IDX}
 740         if [ "$ONLY_LIST" == 'y' ] ; then return ; fi
 741
 742         while true; do
 743                 if [ -e "${donep}${search_idx}" ] ; then
 744                         : $(( CURRENT_CNT-- ))
 745                         [ ${OLDEST_IDX} -eq ${search_idx} ] &&
 746                                 : $(( OLDEST_IDX++ ))
 747
 748                         # Only want to count it once
 749                         rm -f "${donep}${search_idx}"
 750                         touch "${skipp}${search_idx}"
 751                 elif [ -e "${skipp}${search_idx}" ] ; then
 752                         [ ${OLDEST_IDX} -eq ${search_idx} ] &&
 753                                 : $(( OLDEST_IDX++ ))
 754                 fi
 755                 : $(( search_idx++ ))
 756                 if [ ${search_idx} -gt ${TOTAL_CNT} ] ; then
 757                         if [ ${CURRENT_CNT} -ge ${BUILD_NBUILDS} ] ; then
 758                                 search_idx=${OLDEST_IDX}
 759                                 sleep 1
 760                         else
 761                                 break
 762                         fi
 763                 fi
 764         done
 765 }
 766
 767 build_targets() {
 768         for t in "$@" ; do
 769                 # If a LIST_xxx var exists, use it.  But avoid variable
 770                 # expansion in the eval when a board name contains certain
 771                 # characters that the shell interprets.
 772                 case ${t} in
 773                         *[-+=]*) list= ;;
 774                         *)       list=$(eval echo '${LIST_'$t'}') ;;
 775                 esac
 776                 if [ -n "${list}" ] ; then
 777                         build_targets ${list}
 778                 else
 779                         : $((TOTAL_CNT += 1))
 780                         : $((CURRENT_CNT += 1))
 781                         rm -f "${donep}${TOTAL_CNT}"
 782                         rm -f "${skipp}${TOTAL_CNT}"
 783                         if [ "$CONTINUE" = 'y' -a -e ${LOG_DIR}/$t.MAKELOG ] ; then
 784                                 : $((SKIP_CNT += 1))
 785                                 touch "${donep}${TOTAL_CNT}"
 786                         elif [ "$REBUILD_ERRORS" = 'y' -a ! -e ${LOG_DIR}/$t.ERR ] ; then
 787                                 : $((SKIP_CNT += 1))
 788                                 touch "${donep}${TOTAL_CNT}"
 789                         else
 790                                 if [ $BUILD_MANY == 1 ] ; then
 791                                         build_target ${t} ${TOTAL_CNT} &
 792                                 else
 793                                         CUR_TGT="${t}"
 794                                         build_target ${t} ${TOTAL_CNT}
 795                                         CUR_TGT=''
 796                                 fi
 797                         fi
 798                 fi
 799
 800                 # We maintain a running count of all the builds we have done.
 801                 # Each finished build will have a file called ${donep}${n},
 802                 # where n is the index of the build. Each build
 803                 # we've already noted as finished will have ${skipp}${n}.
 804                 # We track the current index via TOTAL_CNT, and the oldest
 805                 # index. When we exceed the maximum number of parallel builds,
 806                 # We look from oldest to current for builds that have completed,
 807                 # and update the current count and oldest index as appropriate.
 808                 # If we've gone through the entire list, wait a second, and
 809                 # reprocess the entire list until we find a build that has
 810                 # completed
 811                 if [ ${CURRENT_CNT} -ge ${BUILD_NBUILDS} ] ; then
 812                         manage_builds
 813                 fi
 814         done
 815 }
 816
 817 #-----------------------------------------------------------------------
 818
 819 kill_children() {
 820         local OS=$(uname -s)
 821         local children=""
 822         case "${OS}" in
 823                 "Darwin")
 824                         # Mac OS X is known to have BSD style ps
 825                         local pgid=$(ps -p $$ -o pgid | sed -e "/PGID/d")
 826                         children=$(ps -g $pgid -o pid | sed -e "/PID\|$$\|$pgid/d")
 827                         ;;
 828                 *)
 829                         # everything else tries the GNU style
 830                         local pgid=$(ps -p $$ --no-headers -o "%r" | tr -d ' ')
 831                         children=$(pgrep -g $pgid | sed -e "/$$\|$pgid/d")
 832                         ;;
 833         esac
 834
 835         kill $children 2> /dev/null
 836         wait $children 2> /dev/null
 837
 838         exit
 839 }
 840
 841 print_stats() {
 842         if [ "$ONLY_LIST" == 'y' ] ; then return ; fi
 843
 844         # Only count boards that completed
 845         : $((TOTAL_CNT = `find ${skipp}* 2> /dev/null | wc -l`))
 846
 847         rm -f ${donep}* ${skipp}*
 848
 849         if [ $BUILD_MANY == 1 ] && [ -e "${OUTPUT_PREFIX}/ERR" ] ; then
 850                 ERR_LIST=`grep -riwl error ${OUTPUT_PREFIX}/ERR/`
 851                 ERR_LIST=`for f in $ERR_LIST ; do echo -n " $(basename $f)" ; done`
 852                 ERR_CNT=`echo $ERR_LIST | wc -w | awk '{print $1}'`
 853                 WRN_LIST=`grep -riwL error ${OUTPUT_PREFIX}/ERR/`
 854                 WRN_LIST=`for f in $WRN_LIST ; do echo -n " $(basename $f)" ; done`
 855                 WRN_CNT=`echo $WRN_LIST | wc -w | awk '{print $1}'`
 856         else
 857                 # Remove the logs for any board that was interrupted
 858                 rm -f ${LOG_DIR}/${CUR_TGT}.MAKELOG ${LOG_DIR}/${CUR_TGT}.ERR
 859         fi
 860
 861         : $((TOTAL_CNT -= ${SKIP_CNT}))
 862         echo ""
 863         echo "--------------------- SUMMARY ----------------------------"
 864         if [ "$CONTINUE" = 'y' -o "$REBUILD_ERRORS" = 'y' ] ; then
 865                 echo "Boards skipped: ${SKIP_CNT}"
 866         fi
 867         echo "Boards compiled: ${TOTAL_CNT}"
 868         if [ ${ERR_CNT} -gt 0 ] ; then
 869                 echo "Boards with errors: ${ERR_CNT} (${ERR_LIST} )"
 870         fi
 871         if [ ${WRN_CNT} -gt 0 ] ; then
 872                 echo "Boards with warnings but no errors: ${WRN_CNT} (${WRN_LIST} )"
 873         fi
 874         echo "----------------------------------------------------------"
 875
 876         if [ $BUILD_MANY == 1 ] ; then
 877                 kill_children
 878         fi
 879
 880         exit $RC
 881 }
 882
 883 #-----------------------------------------------------------------------
 884
 885 # Build target groups selected by options, plus any command line args
 886 set -- ${SELECTED} "$@"
 887 # run PowerPC by default
 888 [ $# = 0 ] && set -- powerpc
 889 build_targets "$@"
 890 wait