FIFO /队列缓冲区专门用于字节流

Question

是否有任何.NET数据结构/类组合允许将字节数据附加到缓冲区的末尾,但是所有的查找和读取都是从一开始,在我读取时缩短缓冲区？

该MemoryStream级似乎做的一部分,但我需要保持对阅读和写作不同的地点,它本身它是阅读后不会自动开始丢弃数据.

答案已经回复了这个问题,基本上我正在尝试做但我更喜欢我可以在同一个过程的不同组件中进行异步I/O,就像普通管道甚至是网络流(我需要先过滤/处理数据).

Answer 1

我将发布一份我曾为工作项目写过的逻辑的剥离副本.这个版本的优点是它可以使用缓冲数据的链接列表,因此您在阅读时不必缓存大量内存和/或复制内存.此外,它的线程安全且行为类似于网络流,即:当没有可用数据时读取:等待直到有可用数据或超时.此外,当读取x个字节数且只有y个字节时,在读取所有字节后返回.我希望这有帮助!

    public class SlidingStream : Stream
{
    #region Other stream member implementations

    ...

    #endregion Other stream member implementations

    public SlidingStream()
    {
        ReadTimeout = -1;
    }

    private readonly object _writeSyncRoot = new object();
    private readonly object _readSyncRoot = new object();
    private readonly LinkedList<ArraySegment<byte>> _pendingSegments = new LinkedList<ArraySegment<byte>>();
    private readonly ManualResetEventSlim _dataAvailableResetEvent = new ManualResetEventSlim();

    public int ReadTimeout { get; set; }

    public override int Read(byte[] buffer, int offset, int count)
    {
        if (_dataAvailableResetEvent.Wait(ReadTimeout))
            throw new TimeoutException("No data available");

        lock (_readSyncRoot)
        {
            int currentCount = 0;
            int currentOffset = 0;

            while (currentCount != count)
            {
                ArraySegment<byte> segment = _pendingSegments.First.Value;
                _pendingSegments.RemoveFirst();

                int index = segment.Offset;
                for (; index < segment.Count; index++)
                {
                    if (currentOffset < offset)
                    {
                        currentOffset++;
                    }
                    else
                    {
                        buffer[currentCount] = segment.Array[index];
                        currentCount++;
                    }
                }

                if (currentCount == count)
                {
                    if (index < segment.Offset + segment.Count)
                    {
                        _pendingSegments.AddFirst(new ArraySegment<byte>(segment.Array, index, segment.Offset + segment.Count - index));
                    }
                }

                if (_pendingSegments.Count == 0)
                {
                    _dataAvailableResetEvent.Reset();

                    return currentCount;
                }
            }

            return currentCount;
        }
    }

    public override void Write(byte[] buffer, int offset, int count)
    {
        lock (_writeSyncRoot)
        {
            byte[] copy = new byte[count];
            Array.Copy(buffer, offset, copy, 0, count);

            _pendingSegments.AddLast(new ArraySegment<byte>(copy));

            _dataAvailableResetEvent.Set();
        }   
    }
}