BSDPORTAL.RU

#!/bin/sh

# Name: miniRepo
# Date: 14.03.2019
# Vers: 1.0
# Desc: Постороение мини-репозитория
#
# Параметры: $1 - текстовый файл со списком желаемых приложений
#                 (Приложения заносятся построчно в виде 'название' (name)
#                 или 'категория/название' (origin). Строки, начинающиеся
#                 с символа '#' игнорируются. Пустые строки также
#                 игнорируются)
#            $2 - путь к мини-репозиторию
#                 (Мини-репозиторий - локальный репозиторий, который является
#                 частью эталонного репозитория. Мини-репозиторий содержит
#                 все необходимые пакеты для установки желаемых приложений.
#                 На момент запуска скрипта может как отсутствовать -
#                 загрузятся все пакеты, так и существовать - загрузятся
#                 только отсутствующие пакеты, а ненужные удалятся)
#
# Принятые обозначения:
#            refRepo - эталонный репозиторий
#            minRepo - мини-репозиторий

# Название эталонного репозитория
repo='FreeBSD'
#repo='atHand'

manpage(){
  echo 'Usage:'
  echo '      miniRepo <file> <directory>'
  echo
  echo '      <file>      - file containing a list of preferred applications'
  echo '      <directory> - directory in which the local repository will be'
  echo '                    created/updated '
}

printf "\n%s\n\n" 'This is miniRepo'

# [1]
# Проверка входных параметров

if [ $# -ne 2 ] ; then
  manpage
  echo
  exit
fi

if [ ! -f $1 ] ; then
  echo 'Error:'
  echo "       File '$1' not found"
  echo
  exit
fi

if [ ! -d $2/All ] ; then
  echo 'Warning:'
  echo -n "       The '$2/All' directory does not exist. Create? [y/N]:"
  read ch
  case $ch in
  y)
    echo
    echo -n "Creating a directory '$2/All'..."
    mkdir -p $2/All 1>/dev/null 2>&1
    if [ $? -eq 0 ] ; then
      echo successfully
    else
      echo not successfully
      exit
    fi
    ;;
  *)
    printf "\n%s\n\n" "Execution stopped."
    exit
    ;;
  esac
fi

touch $2/All/some.tmp 1>/dev/null 2>&1
if [ $? -eq 0 ] ; then
  rm $2/All/some.tmp
else
  echo 'Error:'
  echo "      It is not possible to write anything to the '$2/All' directory"
  echo
  exit
fi


# [2]
# Сбор начальных сведений

# Получение информации о всех пакетах в refRepo в виде id|origin|name

pkg update -r $repo

if [ $? -ne 0 ] ; then
  echo
  echo 'Error:'
  echo '      Could not connect to remote repository. Execution aborted.'
  echo
  exit
fi

fPkgInRefRepoAll=allPkgInRefRepo

printf "%s\n%s" ".open /var/db/pkg/repo-${repo}.sqlite" 'select id,origin,name from packages;' | pkg shell > $fPkgInRefRepoAll

# Получение информации об уже имеющихся пакетах в каталоге $2/All

fPkgInMinRepo=pkgInMinRepo
> $fPkgInMinRepo

echo
echo "Inventory of existing packages in '$2/All' (it will take some time):"
path=`pwd`

c=`ls $2/All/ | grep "\.txz$" | wc -l`
if [ $c -ne 0 ] ; then
  cd $2/All
  sha256 -r *.txz | sort -o $path/$fPkgInMinRepo
  cd $path
  echo "There are $c packages in the '$2/All' directory"
else
  echo "Directory '$2/All' is currently empty"
fi


# [3]
# Разбор входного файла.
# Разделение списка приложений на два: обнаруженные/не обнаруженные в refRepo

# Приложения из списка желаемых, которые не удалось обнаружить в refRepo
fAppNotFound=notApp
> $fAppNotFound

cntApp=0
cntAppFound=0
cntAppNotFound=0

f=1

# id желаемых приложений, обнаруженных в refRepo, перечисленных через запятую
l=

for app in `sed 's/^[[:space:]]*//;/^$/d;/^#/d' $1`
do
  let cntApp=$cntApp+1 > /dev/null

  p=`sed -En "s%^([0-9]*)\|($app\|.*$|.*\|$app$)%\1%p" $fPkgInRefRepoAll`

  if [ -z $p ]
  then
    let cntAppNotFound=$cntAppNotFound+1 > /dev/null
    echo $app >> $fAppNotFound
  else
    let cntAppFound=$cntAppFound+1 > /dev/null
    if [ $f -eq 1 ]
    then
      l=$p
      f=0
    else
      l=$l\,$p
    fi
  fi
done

rm $fPkgInRefRepoAll

printf "\n%s\n%s" "Of the $cntApp specified applications, $cntAppFound were found and $cntAppNotFound were not found (Look at the list in the file '$fAppNotFound')." "Continue? [y/N]:"
read ch
case $ch in
y)
  ;;
*)
  printf "\n%s\n\n" "Execution stopped."
  rm $fPkgInMinRepo
  exit
;;
esac

# [4]
# Получение списка пакетов из refRepo, которые потребуются при установке
# желаемых приложений (с учетом зависимостей)

fPkgInRefRepo=pkgInRefRepo

# SQL-запрос к базе данных refRepo

printf "%s\n%s\n%s\n%s\n%s\n%s\n%s" \
".open /var/db/pkg/repo-${repo}.sqlite" \
"with recursive myCTE(name) as (" \
  "select name from packages where id in ($l)" \
  "union" \
  "select deps.name from deps,myCTE where package_id in (select id from packages where name=myCTE.name)" \
")" \
"select packages.name,packages.version,cksum from packages,myCTE where packages.name=myCTE.name;" | \
pkg shell | sed -n 's/^\(.*\)|\(.*\)|\(.*\)/\3 \1-\2.txz/p' | sort -o $fPkgInRefRepo

# [5]
# Сравнение списков файлов (из refRepo и из minRepo)

# Список существующих, но ненужных файлов, которые надо удалить из minRepo
fDeleteList=deleteList

# Построение списка удаления
comm -13 $fPkgInRefRepo $fPkgInMinRepo | sed -n 's/^.* \(.*txz\)/\1/p' > $fDeleteList

# Список файлов для загрузки из refRepo (может потребоваться при загрузке
# файлов при помощи внешних программ, например, aria2)
#fFetchList=fetchList
# Построение списка загрузки
#comm -23 $fPkgInRefRepo $fPkgInMinRepo | sed -n 's/^.* \(.*txz\)/\1/p' > $fFetchList

rm $fPkgInMinRepo
rm $fPkgInRefRepo

# Удаление лишних файлов
printf "%s %s %s" "Warning:" `cat $fDeleteList | wc -l` "files will be deleted (see '$fDeleteList'). Continue? [y/N]:"
read ch
case $ch in
y)
  cat $fDeleteList | xargs printf "$2/All/%s\n" | xargs rm
  ;;
*)
  printf "\n%s\n\n" "Execution stopped."
  exit
  ;;
esac

# Загрузка недостающих файлов
printf "%s\n%s" ".open /var/db/pkg/repo-${repo}.sqlite" "select name from packages where id in ($l);" | pkg shell | xargs pkg fetch -r $repo -U -y -d -o $2

rm $fDeleteList
#rm $fFetchList


# [6]
# Построение minRepo

printf "\n%s" "Create repository located in '$2'? [y/N]:"
read ch
case $ch in
y)
  pkg repo $2
  ;;
*)
  printf "\n%s\n\n" "Execution stopped."
  exit
  ;;
esac