кодировка заголовка C# HttpWebResponse

у меня следующая проблема. Я связываюсь с адресом, который я знаю, использует перенаправление 301.

используя HttpWebRequest loHttp = (HttpWebRequest)WebRequest.Create(lcUrl); и loHttp.AllowAutoRedirect = false; Так что я не перенаправляется.

теперь я получаю заголовок ответа, чтобы идентифицировать новый url.

используя loWebResponse.GetResponseHeader("Location");

проблема в том, что, поскольку этот url содержит греческие символы, возвращаемая строка перемешана (из-за кодировки).

полная картина codewise:

HttpWebRequest loHttp = (HttpWebRequest)WebRequest.Create(lcUrl);
loHttp.ContentType = "application/x-www-form-urlencoded";
loHttp.Method = "GET";

Timeout = 10000;

loHttp.AllowAutoRedirect = false;
HttpWebResponse loWebResponse = (HttpWebResponse)loHttp.GetResponse();

string url= loWebResponse.Headers["Location"];
8
c# encoding header httpwebresponse

3 ответов

если вы позволите по умолчанию (loHttp.AllowAutoRedirect = true) и ваш код не работает (вы не перенаправляетесь на новый ресурс) это означает, что сервер не кодирует Location правильно заголовок. Перенаправление работает в браузере?

например, если url перенаправления http://site/Μία_Σελίδα заголовок должен выглядеть как http://site/%CE%95%CE%BD%CE%B9%CE%B1%CE%AF%CE%BF_%CE%94%CE%B5%CE%.

обновление:

после дальнейшего изучения вопроса я начинаю подозревать, что есть что-то странно С HttpWebRequest. При отправке запроса сервер отправляет следующий ответ:

HTTP/1.1 301 Moved Permanently
Date: Fri, 11 Dec 2009 17:01:04 GMT
Server: Microsoft-IIS/6.0
X-Powered-By: ASP.NET
Location: http://www.site.com/buy/κινητή-σταθερή-τηλεφωνία/c/cn69569/
Content-Length: 112
Content-Type: text/html; Charset=UTF-8
Cache-control: private
Connection: close
Set-Cookie: BIGipServerpool_webserver_gr=1007732746.36895.0000; path=/


<!DOCTYPE HTML PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN" "http://www.w3.org/TR/html4/loose.dtd">

как видим Location заголовок содержит греческие символы, которые не кодируются url. Я не совсем уверен, что это действительно в соответствии с спецификация HTTP. Что мы можем сказать наверняка, так это то, что веб-браузер интерпретирует его правильно.

вот интересная часть. Кажется, что HttpWebRequest не использует кодировку UTF-8 для анализа заголовки ответов, потому что при анализе Location заголовок это дает: http://www.site.com/buy/κινηÏή-ÏÏαθεÏή-ÏηλεÏÏνία/c/cn69569/, что, конечно, неправильно, и когда он пытается перенаправить в это место, сервер отвечает новым перенаправлением и так далее, пока не будет достигнуто максимальное количество перенаправлений и не будет создано исключение.

Я не мог найти способ указать кодировку, используемую HttpWebRequest при разборе заголовков ответа. Если мы используем объект TcpClient вручную он отлично работает отлично:

using (var client = new TcpClient())
{
    client.Connect("www.site.com", 80);

    using (var stream = client.GetStream())
    {
        var writer = new StreamWriter(stream);
        writer.WriteLine("GET /default/defaultcatg.asp?catg=69569 HTTP/1.1");
        writer.WriteLine("Host: www.site.com");
        writer.WriteLine("User-Agent: Mozilla/5.0 (Windows; U; Windows NT 6.1; en-US; rv:1.9.1.2) Gecko/20090805 Shiretoko/3.5.2");
        writer.WriteLine("Accept: text/html,application/xhtml+xml,application/xml;q=0.9,*/*;q=0.8");
        writer.WriteLine("Accept-Language: en-us,en;q=0.5");
        writer.WriteLine("Accept-Charset: ISO-8859-1,utf-8;q=0.7,*;q=0.7");
        writer.WriteLine("Connection: close");
        writer.WriteLine(string.Empty);
        writer.WriteLine(string.Empty);
        writer.WriteLine(string.Empty);
        writer.Flush();

        var reader = new StreamReader(stream);
        var response = reader.ReadToEnd();
        // When looking at the response it correctly reads 
        // Location: http://www.site.com/buy/κινητή-σταθερή-τηλεφωνία/c/cn69569/
    }
}

поэтому я действительно озадачен этим поведением. Есть ли способ указать правильную кодировку, используемую HttpWebRequest? Может быть, какой-то заголовок запроса должен быть установлен?

в качестве обходного пути вы можете попробовать изменить asp страница, которая выполняет перенаправление и urlencode Location заголовок. Например, когда в приложении ASP.NET вы выполняете Response.Redirect(location), местоположение будет автоматически HTML-кодироваться и любые нестандартные символы будут преобразованы в их соответствующие субъекты.

например, если ты: Response.Redirect("http://www.site.com/buy/κινητή-σταθερή-τηλεφωνία/c/cn69569/"); в ASP.NET применение the Location заголовок будет установлено : 

http://www.site.com/buy/%ce%ba%ce%b9%ce%bd%ce%b7%cf%84%ce%ae-%cf%83%cf%84%ce%b1%ce%b8%ce%b5%cf%81%ce%ae-%cf%84%ce%b7%ce%bb%ce%b5%cf%86%cf%89%ce%bd%ce%af%ce%b1/c/cn69569

похоже, что это не так с классическим ASP.

6

Я бы не ожидал, что возвращаемая строка будет искажена...как вы определяете, что она деформирована? Строка должна быть в формате unicode, таком как utf-8, который мог бы легко представлять греческую строку.

может быть, у вас просто нет греческих шрифтов для представления строки?

1

как объясняет Дарин Димитров, Я считаю, что кодировка заголовка вызвана ошибкой в классе HttpWebResponse. У нас была та же проблема, когда мы хотели добавить файл cookie в заголовок (Set-Cookie), и этот файл cookie будет содержать символы, отличные от Ascii. В нашем случае это норвежские буквы "Æ", " Ø " и " Å " (в верхнем и нижнем регистре). Мы не могли понять, как получить HeaderEncoding работать, но мы нашли обходной путь, используя Base64-кодирование печенья. обратите внимание, что это будет работать только если вы контролируете обе стороне клиента и сервера (или вы можете убедить людей, ответственных за код на стороне сервера, добавить кодировку Base64 для вас...)

на стороне сервера:

var cookieData = "This text contains Norwegian letters; ÆØÅæøå";
var cookieDataAsUtf8Bytes = System.Text.Encoding.UTF8.GetBytes(cookieData);
var cookieDataAsUtf8Base64Encoded = Convert.ToBase64String(cookieDataAsUtf8Bytes);
var cookie = new HttpCookie("MyCookie", cookieDataAsUtf8Base64Encoded);
response.Cookies.Add(cookie);

на стороне клиента:

var cookieDataAsUtf8Bytes = Convert.FromBase64String(cookieDataAsUtf8Base64Encoded);
var cookieData = System.Text.Encoding.UTF8.GetString(cookieDataAsUtf8Bytes);

отметим, что cookieDataAsUtf8Base64Encoded на стороне клиента находится часть данных cookie (то есть " MyCookie=[data]", где "MyCookie=" удаляется).

1