Jak mogę szybko odczytać bajty z pliku mapowanego pamięcią in.NET?

Zobacz Raport o błędzie: Brak możliwości określenia wewnętrznego przesunięcia używanego przez MemoryMappedViewAccessor - sprawia, że właściwość SafeMemoryMappedViewHandle jest bezużyteczna.

Z raportu:

MemoryMappedViewAccessor ma właściwość SafeMemoryMappedViewHandle, która zwraca ViewHandle używane wewnętrznie przez MemoryMappedView, ale nie ma żadnej właściwości zwracającej przesunięcie używane przez MemoryMappedView.

Jak MemoryMappedView jest strona wyrównująca przesunięcie wymagane w MemoryMappedFile.CreateViewAccessor (offset,size) nie można użyć SafeMemoryMappedViewHandle do niczego użytecznego bez znajomości offsetu.

Zauważ, że tak naprawdę chcemy użyć metody AcquirePointer (ref byte * pointer), aby umożliwić uruchamianie szybkiego kodu opartego na wskaźnikach (prawdopodobnie niezarządzanego). Nie przeszkadza nam, że wskaźnik jest wyrównany do strony, ale musi być możliwe, aby dowiedzieć się, jakie przesunięcie od pierwotnie żądanego adresu jest.

Bezpieczna wersja tego rozwiązania to:

var file = MemoryMappedFile.CreateFromFile(...);
var accessor = file.CreateViewAccessor();
var bytes = new byte[yourLength];

// assuming the string is at the start of the file
// aka position: 0
// https://msdn.microsoft.com/en-us/library/dd267761(v=vs.110).aspx
accessor.ReadArray<byte>(
    position: 0,      // The number of bytes in the accessor at which to begin reading
    array: bytes,     // The array to contain the structures read from the accessor
    offset: 0,        // The index in `array` in which to place the first copied structure
    count: yourLength // The number of structures of type T to read from the accessor.
);

var myString = Encoding.UTF8.GetString(bytes);

Przetestowałem to, to działa. Nie mogę skomentować jego wydajności lub czy jest to najlepsze ogólne rozwiązanie, tylko że działa.

Wiem, że to starsze pytanie, na które odpowiedziano, ale chciałem dodać moje dwa grosze.

Przeprowadziłem test zarówno z zaakceptowaną odpowiedzią (używając kodu unsafe), jak i z podejściem MemoryMappedViewStream do odczytu tablicy 200MB bajtów.

MemoryMappedViewStream

        const int MMF_MAX_SIZE = 209_715_200;
        var buffer = new byte[ MMF_VIEW_SIZE ];

        using( var mmf = MemoryMappedFile.OpenExisting( "mmf1" ) )
        using( var view = mmf.CreateViewStream( 0, buffer.Length, MemoryMappedFileAccess.ReadWrite ) )  
        {
            if( view.CanRead )
            {
                Console.WriteLine( "Begin read" );
                sw.Start( );
                view.Read( buffer, 0, MMF_MAX_SIZE );
                sw.Stop( );
                Console.WriteLine( $"Read done - {sw.ElapsedMilliseconds}ms" );
            }
        }

Przeprowadziłem test 3 razy z każdym podejściem i otrzymałem następujące razy.

MemoryMappedViewStream:

1. 483ms
2. 501ms
3. 490ms

Metoda niebezpieczna

1. 531ms
2. 517ms
3. 523ms

Z małej ilości testów wygląda na to, że MemoryMappedViewStream mabardzo niewielką przewagę . Mając to na uwadze dla każdego, kto czyta ten post po drodze, wybrałbym MemoryMappedViewStream.