web-dev-qa-db-ja.com

HttpWebRequestを使用すると、一部のリンクで「(304)Not Modified」エラーが発生するのはなぜですか?

HttpWebRequestを使用してアクセスしようとするいくつかのリンクで、「リモートサーバーがエラーを返しました:(304)Not Modified」という理由が考えられます。コードで?

私が使用しているコードは Jeffの投稿 からのものです(ページが消えたようです。 Wayback Machineのアーカイブコピー を参照)。

コードの概念は単純なプロキシサーバーであることに注意してください。したがって、ローカルで実行されているこのコードにブラウザーを向け、ブラウザーリクエストを取得し、次に示すように新しいHttpWebRequestを作成してプロキシします。コード。ほとんどのサイト/リンクでうまく機能しますが、一部のエラーではこのエラーが発生します。コードの1つの重要な部分は、ブラウザリクエストからhttpヘッダー設定をサイトへのリクエストにコピーし、ヘッダー属性にコピーするように見える場所です。問題がリクエストのこの側面をどのように模倣しているのか、そして結果が返ってくるとどうなるのかがわからないのですか?

case "If-Modified-Since":
   request.IfModifiedSince = DateTime.Parse(listenerContext.Request.Headers[key]);
   break;

たとえば http://en.wikipedia.org/wiki/Main_Page から問題を取得します

PS。ここで更新

それでもこれを解決することはできません。基本的に、問題のあるリンクを1つ特定できます。2回目はエラー、3回目はOK、4回目はエラー、5回目はOKなど、正常に動作しているように見えます。コード内の何か。タイプステートメントなどを使用して、コードを少しクリーンアップしようとしました。

コードは次のとおりです。 2回ごとに http://newsimg.bbc.co.uk/css/screen/1_0_16/nol/v4/story.css (以下から始まる)を参照する理由を誰かが見つけられる場合2回目、最初ではなく)このプロキシコードを介して、聞きたいエラーが表示されます。

class Program
{
    static void Main(string[] args)
    {
        Proxy p = new Proxy(8080);

        Thread proxythread = new Thread(new ThreadStart(p.Start));
        proxythread.Start();

        Console.WriteLine("Proxy Started. Press Any Key To Stop...");
        Console.ReadKey();

        p.Stop();
     }
}

public class Proxy
{
    private HttpListener _listener;
    private int _port;

    public Proxy(int port)
    {
        int defaultport = 8080;

        // Setup Thread Pool
        System.Threading.ThreadPool.SetMaxThreads(50, 1000);
        System.Threading.ThreadPool.SetMinThreads(50, 50);

        // Sanitize Port Number
        if (port < 1024 || port > 65535)
            port = defaultport;

        // Create HttpListener Prefix
        string prefix = string.Format("http://*:{0}/", port);
        _port = port;

        // Create HttpListener
        _listener = new HttpListener();
        _listener.Prefixes.Add(prefix);
    }

    public void Start()
    {
        _listener.Start();

        while (true)
        {
            HttpListenerContext request = null;

            try
            {
                request = _listener.GetContext();

                // Statistics (by Greg)
                int availThreads = -1;
                int compPortThreads = -1;
                ThreadPool.GetAvailableThreads(out availThreads, out compPortThreads);
                log("INFO", request.Request.Url.ToString(), "START - [" + availThreads + "]");

                ThreadPool.QueueUserWorkItem(ProcessRequest, request);
            }
            catch (HttpListenerException ex)
            {
                log("ERROR", "NA", "INFO: HttpListenerException - " + ex.Message);
                break;
            }
            catch (InvalidOperationException ex)
            {
                log("ERROR", "NA", "INFO: InvalidOperationException - " + ex.Message);
                break;
            }
        }
    }

    public void Stop()
    {
        _listener.Stop();
    }

    private void log(string sev, string uri, string message)
    {
        Console.Out.WriteLine(Process.GetCurrentProcess().Id + " - " + sev + " (" + uri + "): " + message);
    }

    private void ProcessRequest(object _listenerContext)
    {
        #region local variables
        HttpWebRequest psRequest;                   // Request to send to remote web server
        HttpWebResponse psResponse;                 // Response from remote web server         
        List<byte> requestBody = new List<byte>();  // Byte array to hold the request's body
        List<byte> responseBody = new List<byte>(); // Byte array to hold the response's body
        byte[] buffer;
        string uri = "";
        #endregion

        var listenerContext = (HttpListenerContext)_listenerContext;
        uri = listenerContext.Request.Url.ToString().Replace(string.Format(":{0}", _port), "");

        // Create Interent Request 
        HttpWebRequest internetRequest = (HttpWebRequest)WebRequest.Create(uri);
        #region Build Request Up
        internetRequest.Method = listenerContext.Request.HttpMethod;
        internetRequest.ProtocolVersion = listenerContext.Request.ProtocolVersion;
        internetRequest.UserAgent = listenerContext.Request.UserAgent;
        foreach (string key in listenerContext.Request.Headers.AllKeys)
        {
            try
            {
                switch (key)
                {
                    case "Proxy-Connection":
                    case "Connection":
                        internetRequest.KeepAlive = (listenerContext.Request.Headers[key].ToLower() == "keep-alive") ? true : false;
                        break;

                    case "Content-Length":
                        internetRequest.ContentLength = listenerContext.Request.ContentLength64;
                        break;

                    case "Content-Type":
                        internetRequest.ContentType = listenerContext.Request.ContentType;
                        break;

                    case "Accept":
                        internetRequest.Accept = listenerContext.Request.Headers[key];
                        break;

                    case "Host":
                        break;

                    case "Referer":
                        internetRequest.Referer = listenerContext.Request.Headers[key];
                        break;

                    case "If-Modified-Since":
                        internetRequest.IfModifiedSince = DateTime.Parse(listenerContext.Request.Headers[key]);
                        break;

                    default:
                        internetRequest.Headers.Add(key, listenerContext.Request.Headers[key]);
                        break;
                }
            }
            catch (Exception ex)
            {
                Console.WriteLine("Error settup up psRequest object. Error = " + ex.Message + "\n" + ex.StackTrace);
            }
        }
        #endregion

        #region Copy content into request
        buffer = new byte[1024];
        using (Stream instream = listenerContext.Request.InputStream)
        {
            int incount = instream.Read(buffer, 0, buffer.Length);
            while (incount > 0)
            {
                internetRequest.GetRequestStream().Write(buffer, 0, incount);
                incount = instream.Read(buffer, 0, buffer.Length);
            }
        }
        #endregion

        // Get Internet Response
        HttpWebResponse internetResponse = null;
        try
        {
            using (internetResponse = (HttpWebResponse)internetRequest.GetResponse())
            {
                #region Configure Local Response Header Keys
                foreach (string key in internetResponse.Headers.Keys)
                {
                    try
                    {
                        switch (key)
                        {
                            case "Transfer-Encoding":
                                listenerContext.Response.SendChunked = (internetResponse.Headers[key].ToLower() == "chunked") ? true : false;
                                break;

                            case "Content-Length":
                                listenerContext.Response.ContentLength64 = internetResponse.ContentLength;
                                break;

                            case "Content-Type":
                                listenerContext.Response.ContentType = internetResponse.Headers[key];
                                break;

                            case "Keep-Alive":
                                listenerContext.Response.KeepAlive = true;
                                break;

                            default:
                                listenerContext.Response.Headers.Add(key, internetResponse.Headers[key]);
                                break;
                        }
                    }
                    catch (Exception ex)
                    {
                        log("ERROR", uri, "Error settup up listenerContext.Response objects. Error = " + ex.Message + "\n" + ex.StackTrace);
                    }
                }
                #endregion

                try
                {
                    // Transfer the body data from Internet Response to Internal Response
                    buffer = new byte[1024];
                    using (Stream inputStream = internetResponse.GetResponseStream())
                    {
                        int outcount = inputStream.Read(buffer, 0, buffer.Length);
                        while (outcount > 0)
                        {
                            listenerContext.Response.OutputStream.Write(buffer, 0, outcount);
                            outcount = inputStream.Read(buffer, 0, buffer.Length);
                        }
                    }
                }
                catch (Exception ex)
                {
                    log("ERROR", uri, "Could not obtain response from URI: " + ex.Message);
                }
                finally
                {
                    listenerContext.Response.OutputStream.Close();
                }
            }
        }
        catch (Exception ex)
        {
            //if (ex is InvalidOperationException ||
            //    ex is ProtocolViolationException ||
            //    ex is WebException)
            //{
            //    log(uri, "Could not successfully get response: " + ex.GetType() + " - " + ex.Message);
            //    listenerContext.Response.Close();
            //    return;
            //}
            //else { throw; }

            log("ERROR", uri, "Could not successfully get response: " + ex.GetType() + " - " + ex.Message);
            listenerContext.Response.Close();
        }
    }
}

そして、ここに私が見るものの例があります-最初のヒットは良い、2番目のエラーは...

Proxy Started. Press Any Key To Stop...
2080 - INFO (http://newsimg.bbc.co.uk:8080/css/screen/1_0_16/nol/v4/story.css): START - [50]
2080 - INFO (http://newsimg.bbc.co.uk:8080/css/screen/1_0_16/nol/v4/story.css): START - [50]
2080 - ERROR (http://newsimg.bbc.co.uk/css/screen/1_0_16/nol/v4/story.css): Could not successfully get response: System.Net.WebException - The remote server returned an error: (304) Not Modified.
42
Greg

まず、これはエラーではありません。 3xx はリダイレクトを示します。実際のエラーは 4xx (クライアントエラー)および 5xx (サーバーエラー)。

クライアントが 304 Not Modified の場合、問題のリソースを独自のキャッシュから表示するのはクライアントの責任です。一般的に、プロキシはこれについて心配するべきではありません。それはただのメッセンジャーです。

82
BalusC

これは意図された動作です。

HTTP要求を行うと、サーバーは通常コード200 OKを返します。 If-Modified-Sinceを設定すると、サーバーは304 Not modifiedを返す場合があります(応答にはコンテンツが含まれません)。これは、ページが変更されていないという手がかりになるはずです。

クラスの作成者は愚かに決定した304はエラーとして扱われ、例外をスローする必要がある。ここで、If-Modified-Sinceを使用しようとするたびに例外をキャッチして、それらをクリーンアップする必要があります。

19
Superbest

押すだけ F5 常に機能しているとは限りません。

なぜ?

ISPもWebデータをキャッシュしているためです。

解決策:強制的に更新します。

を押してブラウザを強制的に更新します CTRL + F5 FirefoxまたはChromeでを押して、ISPキャッシュもクリアします。 F5

その後、ブラウザで304ではなく200の応答を確認できます F12 開発者ツールの[ネットワーク]タブ。

別のトリックは、要求されたページのURL文字列の最後に疑問符?を追加することです。

http://localhost:52199/Customers/Create?

疑問符は、ブラウザが以前のリクエストをキャッシュせずにリクエストを更新することを保証します。

また、Visual Studioで、デフォルトのブラウザをChromeに設定できますシークレットモードでChromeをデフォルトのブラウザとして追加することにより、開発中のキャッシュの問題を回避するためのシークレットモードについては、手順を参照してください。

Go to browsers listSelect browse with...Click Add...Point to the chrome.exe on your platform, add argument "Incognito" Choose the browser you just added and set as default, then click browse

14
Ashraf Abusada