<rt id="bn8ez"></rt>
<label id="bn8ez"></label>

  • <span id="bn8ez"></span>

    <label id="bn8ez"><meter id="bn8ez"></meter></label>

    E81086713E446D36F62B2AA2A3502B5EB155

    Java雜家

    雜七雜八。。。一家之言

    BlogJava 首頁 新隨筆 聯(lián)系 聚合 管理
      40 Posts :: 1 Stories :: 174 Comments :: 0 Trackbacks

    JDK7的NIO2特性或許是我最期待的,我一直想基于它寫一個高性能的Java Http Server.現(xiàn)在這個想法終于可以實施了。
    本人基于目前最新的JDK7 b76開發(fā)了一個HTTP Server性能確實不錯。
    在windows平臺上NIO2采用AccpetEx來異步接受連接,并且讀寫全都關(guān)聯(lián)到IOCP完成端口。不僅如此,為了方便開發(fā)者使用,連IOCP工作線程都封裝好了,你只要提供線程池就OK。

    但是要注意,IOCP工作線程的線程池必須是 Fix的,因為你發(fā)出的讀寫請求都關(guān)聯(lián)到相應(yīng)的線程上,如果線程死了,那讀寫完成情況是不知道的。

    作為一個Http Server,傳送文件是必不可少的功能,那一般文件的傳送都是要把程序里的buffer拷貝到內(nèi)核的buffer,由內(nèi)核發(fā)送出去的。windows平臺上為這種情況提供了很好的解決方案,使用TransmitFile接口

    BOOL TransmitFile(
        SOCKET hSocket,
        HANDLE hFile,
        DWORD nNumberOfBytesToWrite,
        DWORD nNumberOfBytesPerSend,
        LPOVERLAPPED lpOverlapped,
        LPTRANSMIT_FILE_BUFFERS lpTransmitBuffers,
        DWORD dwFlags
    );

    你只要把文件句柄發(fā)送給內(nèi)核就行了,內(nèi)核幫你搞定其余的,真正做到Zero-Copy.
    但是很不幸,NIO2里AsynchronousSocketChannel沒有提供這樣的支持。而為HTTP Server的性能考量,本人只好自己增加這個支持。

    要無縫支持,這個必須得表現(xiàn)的跟 Read /Write一樣,有完成的通知,通知傳送多少數(shù)據(jù),等等。

    仔細讀完sun的IOCP實現(xiàn)以后發(fā)現(xiàn)這部分工作他們封裝得很好,基本只要往他們的框架里加?xùn)|西就好了。
    為了能訪問他們的框架代碼,我定義自己的TransmitFile支持類在sun.nio.ch包里,以獲得最大的權(quán)限。

    package sun.nio.ch;

    import java.io.IOException;
    import java.lang.reflect.Field;
    import java.nio.channels.AsynchronousCloseException;
    import java.nio.channels.AsynchronousSocketChannel;
    import java.nio.channels.ClosedChannelException;
    import java.nio.channels.CompletionHandler;
    import java.nio.channels.NotYetConnectedException;
    import java.nio.channels.WritePendingException;
    import java.util.concurrent.Future;


    /**

     * 
    @author Yvon
     * 
     
    */
    public class WindowsTransmitFileSupport {
       
       //Sun's NIO2 channel  implementation class
        
    private WindowsAsynchronousSocketChannelImpl channel;
       
        //nio2 framework core data structure
        PendingIoCache ioCache;

       //some field retrieve from sun channel implementation class
        
    private Object writeLock;
        
    private Field writingF;
        
    private Field writeShutdownF;
        
    private Field writeKilledF; // f

        WindowsTransmitFileSupport()
        {
            
    //dummy one for JNI code
        }

        
    /**
         * 
         
    */
        
    public WindowsTransmitFileSupport(
                AsynchronousSocketChannel
                 channel) {

            
    this.channel = (WindowsAsynchronousSocketChannelImpl)channel;
            
    try {
            // Initialize the fields
                Field f 
    = WindowsAsynchronousSocketChannelImpl.class
                        .getDeclaredField(
    "ioCache");
                f.setAccessible(
    true);
                ioCache 
    = (PendingIoCache) f.get(channel);
                f 
    = AsynchronousSocketChannelImpl.class
                        .getDeclaredField(
    "writeLock");
                f.setAccessible(
    true);
                writeLock 
    = f.get(channel);
                writingF 
    = AsynchronousSocketChannelImpl.class
                        .getDeclaredField(
    "writing");
                writingF.setAccessible(
    true);

                writeShutdownF 
    = AsynchronousSocketChannelImpl.class
                        .getDeclaredField(
    "writeShutdown");
                writeShutdownF.setAccessible(
    true);

                writeKilledF 
    = AsynchronousSocketChannelImpl.class
                        .getDeclaredField(
    "writeKilled");
                writeKilledF.setAccessible(
    true);

            } 
    catch (NoSuchFieldException e) {
                
    // TODO Auto-generated catch block
                e.printStackTrace();
            } 
    catch (SecurityException e) {
                
    // TODO Auto-generated catch block
                e.printStackTrace();
            } 
    catch (IllegalArgumentException e) {
                
    // TODO Auto-generated catch block
                e.printStackTrace();
            } 
    catch (IllegalAccessException e) {
                
    // TODO Auto-generated catch block
                e.printStackTrace();
            }
        }

        
        
    /**
         * Implements the task to initiate a write and the handler to consume the
         * result when the send file completes.
         
    */
        
    private class SendFileTask<V, A> implements Runnable, Iocp.ResultHandler {
            
    private final PendingFuture<V, A> result;
            
    private final long file;//file is windows file HANDLE

            SendFileTask(
    long file, PendingFuture<V, A> result) {
                
    this.result = result;
                
    this.file = file;
            }

        

            @Override
            
    // @SuppressWarnings("unchecked")
            public void run() {
                
    long overlapped = 0L;
                
    boolean pending = false;
                
    boolean shutdown = false;

                
    try {
                    channel.begin();

            

                    
    // get an OVERLAPPED structure (from the cache or allocate)
                    overlapped = ioCache.add(result);
                    
    int n = transmitFile0(channel.handle, file, overlapped);
                    
    if (n == IOStatus.UNAVAILABLE) {
                        
    // I/O is pending
                        pending = true;
                        
    return;
                    }
                    
    if (n == IOStatus.EOF) {
                        
    // special case for shutdown output
                        shutdown = true;
                        
    throw new ClosedChannelException();
                    }
                    
    // write completed immediately
                    throw new InternalError("Write completed immediately");
                } 
    catch (Throwable x) {
                    
    // write failed. Enable writing before releasing waiters.
                    channel.enableWriting();
                    
    if (!shutdown && (x instanceof ClosedChannelException))
                        x 
    = new AsynchronousCloseException();
                    
    if (!(x instanceof IOException))
                        x 
    = new IOException(x);
                    result.setFailure(x);
                } 
    finally {
                    
    // release resources if I/O not pending
                    if (!pending) {
                        
    if (overlapped != 0L)
                            ioCache.remove(overlapped);
                    
                    }
                    channel.end();
                }

                
    // invoke completion handler
                Invoker.invoke(result);
            }

            

            
    /**
             * Executed when the I/O has completed
             
    */
            @Override
            @SuppressWarnings(
    "unchecked")
            
    public void completed(int bytesTransferred, boolean canInvokeDirect) {
        

                
    // release waiters if not already released by timeout
                synchronized (result) {
                    
    if (result.isDone())
                        
    return;
                    channel.enableWriting();

                    result.setResult((V) Integer.valueOf(bytesTransferred));

                }
                
    if (canInvokeDirect) {
                    Invoker.invokeUnchecked(result);
                } 
    else {
                    Invoker.invoke(result);
                }
            }

            @Override
            
    public void failed(int error, IOException x) {
                
    // return direct buffer to cache if substituted
            

                
    // release waiters if not already released by timeout
                if (!channel.isOpen())
                    x 
    = new AsynchronousCloseException();

                
    synchronized (result) {
                    
    if (result.isDone())
                        
    return;
                    channel.enableWriting();
                    result.setFailure(x);
                }
                Invoker.invoke(result);
            }

        }

        
    public <extends Number, A> Future<V> sendFile(long file, A att,
                CompletionHandler
    <V, ? super A> handler) {

            
    boolean closed = false;
            
    if (channel.isOpen()) {
                
    if (channel.remoteAddress == null)
                    
    throw new NotYetConnectedException();

                
                
    // check and update state
                synchronized (writeLock) {
                    
    try{
                    
    if (writeKilledF.getBoolean(channel))
                        
    throw new IllegalStateException(
                                
    "Writing not allowed due to timeout or cancellation");
                    
    if (writingF.getBoolean(channel))
                        
    throw new WritePendingException();
                    
    if (writeShutdownF.getBoolean(channel)) {
                        closed 
    = true;
                    } 
    else {
                        writingF.setBoolean(channel, 
    true);
                    }
                    }
    catch(Exception e)
                    {
                        IllegalStateException ise
    =new IllegalStateException(" catch exception when write");
                        ise.initCause(e);
                        
    throw ise;
                    }
                }
            } 
    else {
                closed 
    = true;
            }

            
    // channel is closed or shutdown for write
            if (closed) {
                Throwable e 
    = new ClosedChannelException();
                
    if (handler == null)
                    
    return CompletedFuture.withFailure(e);
                Invoker.invoke(channel, handler, att, 
    null, e);
                
    return null;
            }



            
    return implSendFile(file,att,handler);
        }


        
    <extends Number, A> Future<V> implSendFile(long file, A attachment,
                CompletionHandler
    <V, ? super A> handler) {
            
    // setup task
            PendingFuture<V, A> result = new PendingFuture<V, A>(channel, handler,
                    attachment);
            SendFileTask
    <V,A> sendTask=new SendFileTask<V,A>(file,result);
            result.setContext(sendTask);
            
    // initiate I/O (can only be done from thread in thread pool)
            
    // initiate I/O
            if (Iocp.supportsThreadAgnosticIo()) {
                sendTask.run();
            } 
    else {
                Invoker.invokeOnThreadInThreadPool(channel, sendTask);
            }
            
    return result;
        }
        
        
    private native int transmitFile0(long handle, long file,
                
    long overlapped);
        
    }

    這個操作跟默認實現(xiàn)的里的write操作是很像的,只是最后調(diào)用的本地方法不一樣。。

    接下來,我們怎么使用呢,這個類是定義在sun的包里的,直接用的話,會報IllegalAccessError,因為我們的類加載器跟初始化加載器是不一樣的。
    解決辦法一個是通過啟動參數(shù)-Xbootclasspath,讓我們的包被初始加載器加載。我個人不喜歡這種辦法,所以就采用JNI來定義我們的windows TransmitFile支持類。

    這樣我們的工作算是完成了,注意,發(fā)送文件的時候傳得是文件句柄,這樣做的好處是你可以更好的控制,一般是在發(fā)送前,打開文件句柄,完成后在回調(diào)通知方法里關(guān)閉文件句柄。



    有興趣的同學(xué)可以看看我的HTTP server項目:
    http://code.google.com/p/jabhttpd/

    目前基本功能實現(xiàn)得差不多,做了些簡單的測試,性能比較滿意。這個服務(wù)器不打算支持servlet api,基本是專門給做基于長連接模式通信的定做的。






    posted on 2009-11-29 15:19 DoubleH 閱讀(2606) 評論(2)  編輯  收藏

    Feedback

    # re: JDK7 NIO2 實踐: 增加 TransmitFile支持 2009-12-01 12:14 創(chuàng)意禮品批發(fā)
    非常好的文章,謝謝樓主分享!··  回復(fù)  更多評論
      

    # re: JDK7 NIO2 實踐: 增加 TransmitFile支持[未登錄] 2011-12-19 10:19 VV
    老師啊 jabhttpd 給一份,學(xué)習(xí)一下吧。。  回復(fù)  更多評論
      


    只有注冊用戶登錄后才能發(fā)表評論。


    網(wǎng)站導(dǎo)航:
    博客園   IT新聞   Chat2DB   C++博客   博問  
     
    主站蜘蛛池模板: 亚洲美女又黄又爽在线观看| 57PAO成人国产永久免费视频| 91麻豆国产自产在线观看亚洲| 亚洲精品视频免费| 可以免费观看一级毛片黄a| 噜噜噜亚洲色成人网站∨| 亚洲AV无码乱码在线观看代蜜桃| 亚洲av极品无码专区在线观看| 成人无码WWW免费视频| 国产亚洲精品无码拍拍拍色欲| 久久久亚洲AV波多野结衣| 免费看成人AA片无码视频吃奶| 怡红院亚洲怡红院首页| 不卡视频免费在线观看| 日本一区二区三区免费高清| 亚洲AV无码专区在线亚| 成人性生交大片免费看无遮挡| 亚洲综合av一区二区三区不卡| 日韩电影免费在线| 国产精品亚洲一区二区无码| 色猫咪免费人成网站在线观看| 久久国产精品亚洲综合| 91青青青国产在观免费影视| 亚洲国产精品无码久久青草| 亚洲欧洲日产国码在线观看| 国产桃色在线成免费视频| 亚洲色欲啪啪久久WWW综合网| 国产福利免费观看| 国产乱妇高清无乱码免费| 亚洲av之男人的天堂网站| 真实国产乱子伦精品免费| 亚洲一区二区无码偷拍 | 8x8×在线永久免费视频| 亚洲欧洲日韩在线电影| 天天拍拍天天爽免费视频| 亚洲av日韩av天堂影片精品| 在线看片免费不卡人成视频 | 亚洲日韩精品国产一区二区三区| 国产成人啪精品视频免费网| 久久久久久av无码免费看大片| 亚洲国产成人久久综合一|