Как я могу сделать вход чтения tar из stdin?
Я должен использовать tar в конвейере в сценарии оболочки, чтобы заархивировать и сжать некоторые файлы.
Считав страницу справочника для tar Я смог сделать tar вывод к stdout путем выполнения его наряду с -O аргумент, но я не смог узнать, как заставить его ввести от stdin. Начиная со многих команд, считанных из stdin если никакой другой вход, это указано, я попробовал:
pv ~/foo | tar c -O ~/foo.tar
но это не работало:
tar: Cowardly refusing to create an empty archive
Try 'tar --help' or 'tar --usage' for more information.
Как я могу сделать tar считайте вход из stdin?
2 ответа
Используя -O с c проигнорирован, так как никакие файлы не , извлек . Вы получите тот же результат так или иначе:
$ tar c -O foo | tar t
foo
$ tar c foo | tar t
foo
то, Которое является, почему я нахожу Вашу ошибку при удивлении, с тех пор tar, не является никаким трусом, если Вы определяете путь.
tar не может , чтение в данных файла из stdin для создания архива, с тех пор tar не будет иметь никакого способа знать то, что файл - где каждый начинает или заканчивается, каковы его путь и метаданные.
Этот сценарий Python от моего Unix. Ответ StackExchange добавляет stdin в файл tar, давая ему произвольное имя, с помощью библиотека tarfile Python. Это стремится назад в tar переписать заголовок с правильным размером в eof. Использование было бы:
cat foo | tarappend -t mytar -f foo
tar tvf mytar
Вот tarappend сценарий Python:
#!/usr/bin/python
# concat stdin to end of tar file, with given name. meuh on stackexchange
# $Id: tarappend,v 1.3 2015/07/08 11:31:18 meuh $
import sys, os, tarfile, time, copy
from optparse import OptionParser
try:
import grp, pwd
except ImportError:
grp = pwd = None
usage = """%prog: ... | %prog -t tarfile -f filename
Appends stdin to tarfile under the given arbitrary filename.
tarfile is created if it does not exist.\
"""
def doargs():
parser = OptionParser(usage=usage)
parser.add_option("-f", "--filename", help="filename to use")
parser.add_option("-t", "--tarfile", help="existing tar archive")
(options, args) = parser.parse_args()
if options.filename is None or options.tarfile is None:
parser.error("need filename and tarfile")
if len(args):
parser.error("unknown args: "+" ".join(args))
return options
def copygetlen(fsrc, fdst):
"""copy data from file-like object fsrc to file-like object fdst. return len"""
totlen = 0
while 1:
buf = fsrc.read(16*1024)
if not buf:
return totlen
fdst.write(buf)
totlen += len(buf)
class TarFileStdin(tarfile.TarFile):
def addstdin(self, tarinfo, fileobj):
"""Add stdin to archive. based on addfile() """
self._check("aw")
tarinfo = copy.copy(tarinfo)
buf = tarinfo.tobuf(self.format, self.encoding, self.errors)
bufoffset = self.offset
self.fileobj.write(buf)
self.offset += len(buf)
tarinfo.size = copygetlen(fileobj, self.fileobj)
blocks, remainder = divmod(tarinfo.size, tarfile.BLOCKSIZE)
if remainder > 0:
self.fileobj.write(tarfile.NUL * (tarfile.BLOCKSIZE - remainder))
blocks += 1
self.offset += blocks * tarfile.BLOCKSIZE
# rewrite header with correct size
buf = tarinfo.tobuf(self.format, self.encoding, self.errors)
self.fileobj.seek(bufoffset)
self.fileobj.write(buf)
self.fileobj.seek(self.offset)
self.members.append(tarinfo)
class TarInfoStdin(tarfile.TarInfo):
def __init__(self, name):
if len(name)>100:
raise ValueError(name+": filename too long")
if name.endswith("/"):
raise ValueError(name+": is a directory name")
tarfile.TarInfo.__init__(self, name)
self.size = 99
self.uid = os.getuid()
self.gid = os.getgid()
self.mtime = time.time()
if pwd:
self.uname = pwd.getpwuid(self.uid)[0]
self.gname = grp.getgrgid(self.gid)[0]
def run(tarfilename, newfilename):
tar = TarFileStdin.open(tarfilename, 'a')
tarinfo = TarInfoStdin(newfilename)
tar.addstdin(tarinfo, sys.stdin)
tar.close()
if __name__ == '__main__':
options = doargs()
run(options.tarfile, options.filename)