pacman xfercommand не работает с эхом и aria2

TLDR:

XferCommand = echo Downloading %u ... && /usr/bin/aria2c --conf-path=/etc/pacman-aria2.conf %u

в выводах pacman.conf

Downloading https://mirror.23media.com/manjaro/stable/core/x86_64/core.db ... && /usr/bin/aria2c --conf-path=/etc/pacman-aria2.conf https://mirror.23media.com/manjaro/stable/core/x86_64/core.db

и вторая команда aria2 никогда не выполняется - pacman.conf и pacman-aria2.conf внизу, длинная версия ниже TLDR

Введение: Чего я пытаюсь достичь, так это использования внешнего загрузчика с pacman, который указывает, что он загружает в данный момент, не заполняя вывод терминала ненужной информацией. Из-за странных проблем со скоростью загрузки с pacman я попытался использовать то, что рекомендовала вики: использование XferCommand в /etc/pacman.conf для использования aria2 в качестве загрузчика. Поскольку вики связана с этим (https://bbs.archlinux.org/viewtopic.php?id=192072) статья Я использовал следующую команду в /etc/pacman.conf для использования aria2 XferCommand = echo Downloading %u ... && /usr/bin/aria2c --conf-path=/etc/pacman-aria2.conf %u

вы можете найти полный pacman.conf внизу, а также pacman-aria2.conf. Выполненная в терминале (и %u изменена на что-то другое) эта команда работает. К сожалению, при выполнении в pacman.conf эхо просто выводит всю строку, включая «&&» и так далее. Полный вывод pacman -Syy

Downloading https://mirror.23media.com/manjaro/stable/extra/x86_64/extra.db ... && /usr/bin/aria2c --conf-path=/etc/pacman-aria2.conf https://mirror.23media.com/manjaro/stable/extra/x86_64/extra.db
Downloading https://mirror.23media.com/manjaro/stable/community/x86_64/community.db ... && /usr/bin/aria2c --conf-path=/etc/pacman-aria2.conf https://mirror.23media.com/manjaro/stable/community/x86_64/community.db
Downloading https://mirror.23media.com/manjaro/stable/multilib/x86_64/multilib.db ... && /usr/bin/aria2c --conf-path=/etc/pacman-aria2.conf https://mirror.23media.com/manjaro/stable/multilib/x86_64/multilib.db

Полный вывод sudo pacman -S 0ad (первая запись в pacman с множеством зависимостей и большим размером файла):

resolving dependencies...
looking for conflicting packages...

Packages (6) 0ad-data-a23.1-1  enet-1.3.14-1  gloox-1.0.22-1  miniupnpc-2.1.20190408-1  wxgtk2-3.0.4-2  0ad-a23.1-7

Total Download Size:      8,95 MiB
Total Installed Size:  2055,95 MiB

:: Proceed with installation? [Y/n] 
:: Retrieving packages...
Downloading https://mirror.23media.com/manjaro/stable/community/x86_64/gloox-1.0.22-1-x86_64.pkg.tar.xz ... && /usr/bin/aria2c --conf-path=/etc/pacman-aria2.conf https://mirror.23media.com/manjaro/stable/community/x86_64/gloox-1.0.22-1-x86_64.pkg.tar.xz
Downloading https://mirror.23media.com/manjaro/stable/community/x86_64/miniupnpc-2.1.20190408-1-x86_64.pkg.tar.xz ... && /usr/bin/aria2c --conf-path=/etc/pacman-aria2.conf https://mirror.23media.com/manjaro/stable/community/x86_64/miniupnpc-2.1.20190408-1-x86_64.pkg.tar.xz
Downloading https://mirror.23media.com/manjaro/stable/community/x86_64/0ad-a23.1-7-x86_64.pkg.tar.xz ... && /usr/bin/aria2c --conf-path=/etc/pacman-aria2.conf https://mirror.23media.com/manjaro/stable/community/x86_64/0ad-a23.1-7-x86_64.pkg.tar.xz
(6/6) checking keys in keyring                                                            [####################################################] 100%
^C/6) checking package integrity                                                          [----------------------------------------------------]   0%
Interrupt signal received

Я прервал, потому что проверка целостности не продолжалась, и я мог сказать, что она ничего не загружала, потому что это не заняло вообще времени, а программа должна иметь как минимум 1 ГБ.

Конечно, первым делом нужно было полностью убрать эхо. Это работает. Но так как «Результат загрузки» (который автоматически печатается aria2 после завершения загрузки файла) заполонил мой терминал таким количеством спама, что я ничего не мог прочитать, я добавил строку в pacman-aria2.conf, которая удаляет этот вывод. Но теперь все, что записывается в вывод, выглядит так: [#b72206 3.9MiB/5.2MiB(75%) CN:3 DL:5.0MiB] Так что я не знаю, что на самом деле загружается, что довольно раздражает, особенно когда pacman загружает много вещей одновременно (например, pacman -Syu), отсюда и необходимость "echo %u".

Другие попытки исправления: в моем pacman.conf вы можете увидеть остатки того, что было некоторыми моими попытками исправить (ошибку). Вот краткий список:

Изменение порядка двух команд произвело Exception caught Exception: [download_helper.cc:451] errorCode=1 Unrecognized URI or unsupported protocol: &&

Написание небольшого сценария bash (/usr/local/bin/pacman-aria2.sh), который просто содержал две команды в двух отдельных строках, дало следующее:

Exception caught
Exception: [download_helper.cc:451] errorCode=1 Unrecognized URI or unsupported protocol: %u 

что, как я предполагаю, вызвано тем, что я не отправляю переменные в скрипт, но я не знаю, как это сделать правильно

ни wget, ни curl, ни исходная команда из вики не дают желаемого результата: wget снова спамит консоль, а также команду вики, curl, с другой стороны, совершенно без какой-либо информации.

Вывод: Поскольку ни вики, ни справочная страница pacman не содержат дополнительной информации о XferCommand, у меня нет предположений. Любая подсказка приветствуется. Если вам нужна дополнительная информация, я постараюсь предоставить ее.

Возможно, актуальная информация:

uname -srv: Linux 5.4.2-1-MANJARO #1 SMP PREEMPT Thu Dec 5 09:55:57 UTC 2019
pacman -V: Pacman v5.2.1 - libalpm v12.0.1
architecture: x86_64

Файлы:

/etc/pacman.conf:

#
# /etc/pacman.conf
#
# See the pacman.conf(5) manpage for option and repository directives

#
# GENERAL OPTIONS
#
[options]
# The following paths are commented out with their default values listed.
# If you wish to use different paths, uncomment and update the paths.
#RootDir     = /
#DBPath      = /var/lib/pacman/
CacheDir = /var/cache/pacman/pkg/
#LogFile     = /var/log/pacman.log
#GPGDir      = /etc/pacman.d/gnupg/
#HookDir     = /etc/pacman.d/hooks/
HoldPkg      = pacman glibc manjaro-system
# If upgrades are available for these packages they will be asked for first
SyncFirst    = manjaro-system archlinux-keyring manjaro-keyring
#XferCommand = /usr/bin/curl -C - -f %u > %o
#XferCommand = /usr/bin/wget --passive-ftp -c -O %o %u
XferCommand = /usr/bin/aria2c --conf-path=/etc/pacman-aria2.conf %u
#XferCommand = /usr/bin/aria2c --allow-overwrite=true --continue=true --file-allocation=none --log-level=error --max-tries=2 --max-connection-per-server=2 --max-file-not-found=5 --min-split-size=5M --no-conf --remote-time=true --summary-interval=60 --timeout=5 --dir=/ --out %o %u
#XferCommand = /usr/bin/aria2c --conf-path=/etc/pacman-aria2.conf %u && echo Downloading %u ...
#XferCommand = echo Downloading %u ... && /usr/bin/aria2c --conf-path=/etc/pacman-aria2.conf %u
#XferCommand = /usr/local/bin/pacman-aria2.sh
#CleanMethod = KeepInstalled
#UseDelta    = 0.7
Architecture = auto

# Pacman won't upgrade packages listed in IgnorePkg and members of IgnoreGroup
#IgnorePkg   =
#IgnoreGroup =

#NoUpgrade   =
#NoExtract   =

# Misc options
#UseSyslog
Color
#TotalDownload
# We cannot check disk space from within a chroot environment
CheckSpace
#VerbosePkgLists

# By default, pacman accepts packages signed by keys that its local keyring
# trusts (see pacman-key and its man page), as well as unsigned packages.
SigLevel    = Required DatabaseOptional
LocalFileSigLevel = Optional
#RemoteFileSigLevel = Required

# NOTE: You must run `pacman-key --init` before first using pacman; the local
# keyring can then be populated with the keys of all official Manjaro Linux
# packagers with `pacman-key --populate archlinux manjaro`.

#
# REPOSITORIES
#   - can be defined here or included from another file
#   - pacman will search repositories in the order defined here
#   - local/custom mirrors can be added here or in separate files
#   - repositories listed first will take precedence when packages
#     have identical names, regardless of version number
#   - URLs will have $repo replaced by the name of the current repo
#   - URLs will have $arch replaced by the name of the architecture
#
# Repository entries are of the format:
#       [repo-name]
#       Server = ServerName
#       Include = IncludePath
#
# The header [repo-name] is crucial - it must be present and
# uncommented to enable the repo.
#

# The testing repositories are disabled by default. To enable, uncomment the
# repo name header and Include lines. You can add preferred servers immediately
# after the header, and they will be used before the default mirrors.

[core]
SigLevel = PackageRequired DatabaseNever
Include = /etc/pacman.d/mirrorlist

[extra]
SigLevel = PackageRequired DatabaseNever
Include = /etc/pacman.d/mirrorlist

[community]
SigLevel = PackageRequired DatabaseNever
Include = /etc/pacman.d/mirrorlist

# If you want to run 32 bit applications on your x86_64 system,
# enable the multilib repositories as required here.

[multilib]
SigLevel = PackageRequired DatabaseNever
Include = /etc/pacman.d/mirrorlist

# An example of a custom package repository.  See the pacman manpage for
# tips on creating your own repositories.
#[custom]
#SigLevel = Optional TrustAll
#Server = file:///home/custompkgs

/etc/pacman-aria2.conf:

timeout=60
connect-timeout=30
max-tries=5
retry-wait=10
max-file-not-found=1

# downloading
split=3
max-connection-per-server=3
min-split-size=1M
max-concurrent-downloads=1
file-allocation=none
remote-time=true
conditional-get=true
no-netrc=true

# resuming
continue=true
allow-overwrite=true
always-resume=false

# proxy
#http-proxy=127.0.0.1:8080
#https-proxy=127.0.0.1:8080
#ftp-proxy=127.0.0.1:8080

# console
#quiet=true
download-result=hide
console-log-level=warn
summary-interval=0
#enable-color=false
#human-readable=false
#show-console-readout=false
#truncate-console-readout=false

# logging
log-level=warn
log=/var/log/pacman-aria2.log

person Phidy    schedule 31.12.2019    source источник


Ответы (1)


Согласно https://git.archlinux.org/pacman.git/commit/?id=808a4f15ce82d2ed7eeb06de73d0f313620558ee pacman больше не вызывает XferCommand через оболочку, поэтому синтаксис оболочки не работает.

Вы были на правильном пути со своей идеей использовать отдельный скрипт:

echo Downloading %u ...
/usr/bin/aria2c --conf-path=/etc/pacman-aria2.conf %u

Однако очевидно, что %u не интерпретируется скриптом, вам нужно использовать "$1":

echo Downloading "$1" ...
/usr/bin/aria2c --conf-path=/etc/pacman-aria2.conf "$1"

pacman.conf:

XferCommand = /usr/local/bin/pacman-aria2.sh %u
person eschwartz    schedule 25.03.2020