zoukankan      html  css  js  c++  java
  • 内存映射文件

    <?XML:NAMESPACE PREFIX = [default] http://www.w3.org/1999/xhtml NS = "http://www.w3.org/1999/xhtml" />利用文件与内存空间之间的映射,应用程序(包括多个进程)可以通过直接在内存中进行读写来修改文件。 从 .NET Framework 4开始,可以使用托管代码按照本机 Windows 函数访问内存映射文件的方式来访问内存映射文件,如 MSDN Library 中的 Managing Memory-Mapped Files in Win32(管理 Win32 中的内存映射文件)中所述。

    有两种类型的内存映射文件:

    • 持久内存映射文件

      持久文件是与磁盘上的源文件关联的内存映射文件。 在最后一个进程使用完此文件后,数据将保存到磁盘上的源文件中。 这些内存映射文件适合用来处理非常大的源文件。

    • 非持久内存映射文件

      非持久文件是未与磁盘上的源文件关联的内存映射文件。 当最后一个进程使用完此文件后,数据将丢失,并且垃圾回收功能将回收此文件。 这些文件适用于为进程间通信 (IPC) 创建共享内存。

    进程、视图和管理内存

    内存映射文件可以在多个进程之间进行共享。 进程可以通过使用由创建同一内存映射文件的进程所指派的公用名来映射到此文件。

    若要使用一个内存映射文件,则必须创建该内存映射文件的完整视图或部分视图。 还可以创建内存映射文件的同一部分的多个视图,进而创建并发内存。 为了使两个视图能够并发,必须基于同一内存映射文件创建这两个视图。

    如果文件大于应用程序用于内存映射的逻辑内存空间(在 32 位计算机上为 2 GB),则还需要使用多个视图。

    有两种类型的视图:流访问视图和随机访问视图使用流访问视图可对文件进行顺序访问;对于非持久文件和 IPC,这是建议的方法。 在使用持久文件时,随机访问视图是首选方法。

    由于内存映射文件是通过操作系统的内存管理器访问的,因此会自动将此文件分隔为多个页,并根据需要对其进行访问。 您不需要自行处理内存管理。

    下图演示多个进程如何同时具有对同一内存映射文件的多个重叠视图。

    内存映射文件的多个重叠视图

    显示内存映射文件的视图。

    使用内存映射文件进行编程

    下表提供有关使用内存映射文件对象及其成员的指南。

    任务

    使用的方法或属性

    从磁盘上的文件中获取表示持久内存映射文件的 MemoryMappedFile 对象。

    MemoryMappedFile.CreateFromFile 方法。

    获取表示非持久内存映射文件(与磁盘上的文件不关联)的 MemoryMappedFile 对象。

    MemoryMappedFile.CreateNew 方法。

    - 或 -

    MemoryMappedFile.CreateOrOpen 方法。

    获取现有内存映射文件(持久文件或非持久文件)的 MemoryMappedFile 对象。

    MemoryMappedFile.OpenExisting 方法。

    获取针对内存映射文件的顺序访问视图的UnmanagedMemoryStream 对象。

    MemoryMappedFile.CreateViewStream 方法。

    获取针对内存映射文件的随机访问视图的UnmanagedMemoryAccessor 对象。

    MemoryMappedFile.CreateViewAccessor 方法。

    获取要用于非托管代码的SafeMemoryMappedViewHandle 对象。

    MemoryMappedFile.SafeMemoryMappedFileHandle 属性。

    - 或 -

    MemoryMappedViewAccessor.SafeMemoryMappedViewHandle属性。

    - 或 -

    MemoryMappedViewStream.SafeMemoryMappedViewHandle属性。

    将内存分配推迟到创建视图后进行(仅限于非持久文件)。

    (若要确定当前系统页大小,请使用Environment.SystemPageSize 属性。)

    MemoryMappedFileOptions.DelayAllocatePages 值的CreateNew 方法。

    - 或 -

    MemoryMappedFileOptions 枚举作为参数的 CreateOrOpen方法。

    Dd997372.collapse_all(zh-cn,VS.110).gif安全性

    在创建内存映射文件时,可以通过使用以下方法(这些方法采用 MemoryMappedFileAccess 枚举作为参数)来应用访问权限:

    通过使用将 MemoryMappedFileRights 用作参数的 OpenExisting 方法,可以指定用于打开现有内存映射文件的访问权限。

    此外,可以包含一个 MemoryMappedFileSecurity 对象,该对象包括预定义的访问规则。

    若要将新的或已更改的访问规则应用于内存映射文件,请使用 SetAccessControl 方法。 若要从现有文件中检索访问规则或审核规则,请使用 GetAccessControl 方法。

    示例

    Dd997372.collapse_all(zh-cn,VS.110).gif持久内存映射文件

    CreateFromFile 方法基于磁盘上的现有文件创建一个内存映射文件。

    下面的示例创建一个特大文件的某一部分的内存映射视图,并操作该文件的某一部分。

    C#

    VB

    using System;
    using System.IO;
    using System.IO.MemoryMappedFiles;
    using System.Runtime.InteropServices;
    
    class Program
    {
        static void Main(string[] args)
        {
            long offset = 0x10000000; // 256 megabytes
            long length = 0x20000000; // 512 megabytes
    
            // Create the memory-mapped file.
            using (var mmf = MemoryMappedFile.CreateFromFile(@"c:\ExtremelyLargeImage.data", FileMode.Open,"ImgA"))
            {
                // Create a random access view, from the 256th megabyte (the offset)
                // to the 768th megabyte (the offset plus length).
                using (var accessor = mmf.CreateViewAccessor(offset, length))
                {
                    int colorSize = Marshal.SizeOf(typeof(MyColor));
                    MyColor color;
    
                    // Make changes to the view.
                    for (long i = 0; i < length; i += colorSize)
                    {
                        accessor.Read(i, out color);
                        color.Brighten(10);
                        accessor.Write(i, ref color);
                    }
                }
            }
        }
    }
    
    public struct MyColor
    {
        public short Red;
        public short Green;
        public short Blue;
        public short Alpha;
    
        // Make the view brigher.
        public void Brighten(short value)
        {
            Red = (short)Math.Min(short.MaxValue, (int)Red + value);
            Green = (short)Math.Min(short.MaxValue, (int)Green + value);
            Blue = (short)Math.Min(short.MaxValue, (int)Blue + value);
            Alpha = (short)Math.Min(short.MaxValue, (int)Alpha + value);
        }
    }
    
    
    

    下面的示例为另一个进程打开同一内存映射文件。

    C#

    VB

    using System;
    using System.IO.MemoryMappedFiles;
    using System.Runtime.InteropServices;
    
    
    class Program
    {
        static void Main(string[] args)
        {
            // Assumes another process has created the memory-mapped file.
            using (var mmf = MemoryMappedFile.OpenExisting("ImgA"))
            {
                using (var accessor = mmf.CreateViewAccessor(4000000, 2000000))
                {
                    int colorSize = Marshal.SizeOf(typeof(MyColor));
                    MyColor color;
    
                    // Make changes to the view.
                    for (long i = 0; i < 1500000; i += colorSize)
                    {
                        accessor.Read(i, out color);
                        color.Brighten(20);
                        accessor.Write(i, ref color);
                    }
                }
            }
        }
    }
    
    public struct MyColor
    {
        public short Red;
        public short Green;
        public short Blue;
        public short Alpha;
    
        // Make the view brigher.
        public void Brighten(short value)
        {
            Red = (short)Math.Min(short.MaxValue, (int)Red + value);
            Green = (short)Math.Min(short.MaxValue, (int)Green + value);
            Blue = (short)Math.Min(short.MaxValue, (int)Blue + value);
            Alpha = (short)Math.Min(short.MaxValue, (int)Alpha + value);
        }
    }
    
    
    
    Dd997372.collapse_all(zh-cn,VS.110).gif非持久内存映射文件

    CreateNewCreateOrOpen 方法创建一个未映射到磁盘上的现有文件的内存映射文件。

    下面的示例由三个单独的进程(控制台应用程序)组成,这些进程将布尔值写入到内存映射文件中。 将发生下面一系列操作:

    1. Process A 创建内存映射文件并将一个值写入到其中。

    2. Process B 打开内存映射文件并将一个值写入到其中。

    3. Process C 打开内存映射文件并将一个值写入到其中。

    4. Process A 读取并显示内存映射文件中的值。

    5. Process A 使用完内存映射文件后,垃圾回收功能将会立即回收该文件。

    若要运行此示例,请执行以下步骤:

    1. 编译应用程序并打开三个命令提示符窗口。

    2. 在第一个命令提示符窗口中,运行 Process A。

    3. 在第二个命令提示符窗口中,运行 Process B。

    4. 返回到 Process A 并按 Enter。

    5. 在第三个命令提示符窗口中,运行 Process C。

    6. 返回到 Process A 并按 Enter。

    Process A 的输出如下所示:

    Start Process B and press ENTER to continue.
    Start Process C and press ENTER to continue.
    Process A says: True
    Process B says: False
    Process C says: True
    

    进程 A

    C#

    VB

    using System;
    using System.IO;
    using System.IO.MemoryMappedFiles;
    using System.Threading;
    
    class Program
    {
        // Process A:
        static void Main(string[] args)
        {
            using (MemoryMappedFile mmf = MemoryMappedFile.CreateNew("testmap", 10000))
            {
                bool mutexCreated;
                Mutex mutex = new Mutex(true, "testmapmutex", out mutexCreated);
                using (MemoryMappedViewStream stream = mmf.CreateViewStream())
                {
                    BinaryWriter writer = new BinaryWriter(stream);
                    writer.Write(1);
                }
                mutex.ReleaseMutex();
    
                Console.WriteLine("Start Process B and press ENTER to continue.");
                Console.ReadLine();
    
                Console.WriteLine("Start Process C and press ENTER to continue.");
                Console.ReadLine();
    
                mutex.WaitOne();
                using (MemoryMappedViewStream stream = mmf.CreateViewStream())
                {
                    BinaryReader reader = new BinaryReader(stream);
                    Console.WriteLine("Process A says: {0}", reader.ReadBoolean());
                    Console.WriteLine("Process B says: {0}", reader.ReadBoolean());
                    Console.WriteLine("Process C says: {0}", reader.ReadBoolean());
                }
                mutex.ReleaseMutex();
            }
        }
    }
    
    
    

    进程 B

    C#

    VB

    using System;
    using System.IO;
    using System.IO.MemoryMappedFiles;
    using System.Threading;
    
    class Program
    {
        // Process B:
        static void Main(string[] args)
        {
            try
            {
                using (MemoryMappedFile mmf = MemoryMappedFile.OpenExisting("testmap"))
                {
    
                    Mutex mutex = Mutex.OpenExisting("testmapmutex");
                    mutex.WaitOne();
    
                    using (MemoryMappedViewStream stream = mmf.CreateViewStream(1, 0))
                    {
                        BinaryWriter writer = new BinaryWriter(stream);
                        writer.Write(0);
                    }
                    mutex.ReleaseMutex();
                }
            }
            catch (FileNotFoundException)
            {
                Console.WriteLine("Memory-mapped file does not exist. Run Process A first.");
            }
        }
    }
    
    
    

    进程 C

    C#

    VB

    using System;
    using System.IO;
    using System.IO.MemoryMappedFiles;
    using System.Threading;
    
    class Program
    {
        // Process C:
        static void Main(string[] args)
        {
            try
            {
                using (MemoryMappedFile mmf = MemoryMappedFile.OpenExisting("testmap"))
                {
    
                    Mutex mutex = Mutex.OpenExisting("testmapmutex");
                    mutex.WaitOne();
    
                    using (MemoryMappedViewStream stream = mmf.CreateViewStream(2, 0))
                    {
                        BinaryWriter writer = new BinaryWriter(stream);
                        writer.Write(1);
                    }
                    mutex.ReleaseMutex();
                }
            }
            catch (FileNotFoundException)
            {
                Console.WriteLine("Memory-mapped file does not exist. Run Process A first, then B.");
            }
        }
    }
    
    
    

    请参见

    其他资源

    文件和流 I/O

  • 相关阅读:
    beeline链接hive报错
    Java并发之FairSync和NonfairSync
    如何在 Linux 中将文件编码转换为 UTF-8
    Spring Boot运行原理
    jvm垃圾回收
    jvm调试工具
    Nginx相关
    docker 配置jar ,运行
    centos7的一些安装问题
    Docker
  • 原文地址:https://www.cnblogs.com/jiangzhen/p/2942251.html
Copyright © 2011-2022 走看看