Как получить файл из POST data в скрипте Bash CGI?

Я пытаюсь опубликовать файл с помощью cURL и получить его с другой стороны через скрипт CGI Bash и сохранить его с тем же именем. После завершения загрузки, diff между исходным файлом и восстановленным должен возвращаться ноль.

способ cURL отправляет данные:

curl --request POST --data-binary "@dummy.dat" 127.0.0.1/cgi-bin/upload-rpm

приемник скрипт:

#!/bin/bash

echo "Content-type: text/html"
echo ""

echo '<html>'
echo '<head>'
echo '<meta http-equiv="Content-Type" content="text/html; charset=UTF-8">'
echo '<title>Foo</title>'
echo '</head>'
echo '<body>'

echo "<p>Start</p>"

if [ "$REQUEST_METHOD" = "POST" ]; then
    echo "<p>Post Method</p>"
    if [ "$CONTENT_LENGTH" -gt 0 ]; then
        echo "<p>Size=$CONTENT_LENGTH</p>"
        while read -n 1 byte -t 3; do echo -n -e "$byte" >> ./foo.dat ; done
    fi
fi
echo '</body>'
echo '</html>'

exit 0

но это не работает. Файл не создается на стороне сервера. И как я могу получить имя файла?

9
bash cgi curl

2 ответов

пока вы всегда загружаете ровно 1 файл, используя multipart/form-data формат и клиент всегда ставят Content-Type как последний заголовок загрузки файла (который, похоже, всегда делает curl), это, похоже, работает:

#!/bin/bash

echo "Content-type: text/html"
echo ""

echo '<html>'
echo '<head>'
echo '<meta http-equiv="Content-Type" content="text/html; charset=UTF-8">'
echo '<title>Foo</title>'
echo '</head>'
echo '<body>'

echo "<p>Start</p>"

if [ "$REQUEST_METHOD" = "POST" ]; then
    echo "<p>Post Method</p>"
    if [ "$CONTENT_LENGTH" -gt 0 ]; then
    in_raw=`cat`
    boundary=$(echo -n "$in_raw" | head -1 | tr -d '\r\n');
    filename=$(echo -n "$in_raw" | grep --text --max-count=1 -oP "(?<=filename=\")[^\"]*");
    file_content=$(echo -n "$in_raw" | sed '1,/Content-Type:/d' | tail -c +3 | head --lines=-1 | head --bytes=-4  );
    echo "boundary: $boundary"
    echo "filename: $filename"
    #echo "file_content: $file_content"
    fi
fi
echo '</body>'
echo '</html>'

exit 0

пример вызова загрузки (который я использовал для отладки выше):

curl http://localhost:81/cgi-bin/wtf.sh -F "MyFile=@myfile.txt"
  • со всем, что сказал, Это безумие! bash-это абсолютно не подходит для обработки двоичных данных, таких как загрузка файлов http, используйте что-то еще. (В PHP? В Python?)
4

пути curl отправляет данные

С полями:

curl --data "param1=value1&param2=value2" https://example.com/resource.cgi

с полями, указанными индивидуально:

curl --data "param1=value1" --data "param2=value2" https://example.com/resource.cgi

Multipart:

curl --form "fileupload=@my-file.txt" https://example.com/resource.cgi

Multipart с полями и именем файла:

curl --form "fileupload=@my-file.txt;filename=desired-filename.txt" --form param1=value1 --form param2=value2 https://example.com/resource.cgi

для спокойного HTTP-сообщения, содержащего XML:

curl -X POST -d @filename.txt http://example.com/path/to/resource --header "Content-Type:text/xml"

или для JSON используйте следующее:

curl -X POST -d @filename.txt http://example.com/path/to/resource --header "Content-Type:application/json"

это будет читать содержимое файла с именем filename.txt и отправить его как сообщение запрос.

дополнительная информация

чтение данных HTTP POST с помощью BASH

Как получить длину содержимого:

if [ "$REQUEST_METHOD" = "POST" ]; then
    if [ "$CONTENT_LENGTH" -gt 0 ]; then
        read -n $CONTENT_LENGTH POST_DATA <&0
        echo "$CONTENT_LENGTH"
    fi
fi

для сохранения двоичного или текстового файла:

boundary=$(export | \
    sed '/CONTENT_TYPE/!d;s/^.*dary=//;s/.$//')
filename=$(echo "$QUERY_STRING" | \
    sed -n '2!d;s/\(.*filename=\"\)\(.*\)\".*$//;p')
file=$(echo "$QUERY_STRING" | \
    sed -n "1,/$boundary/p" | sed '1,4d;$d')

загруженный файл теперь содержится в переменной $file, а имя файла в именем переменной.

5