[go: up one dir, main page]

CN108632338A - 存储系统和用于提供自动存储发现的方法 - Google Patents

存储系统和用于提供自动存储发现的方法 Download PDF

Info

Publication number
CN108632338A
CN108632338A CN201810161543.XA CN201810161543A CN108632338A CN 108632338 A CN108632338 A CN 108632338A CN 201810161543 A CN201810161543 A CN 201810161543A CN 108632338 A CN108632338 A CN 108632338A
Authority
CN
China
Prior art keywords
discovery
server
storage device
log
pod
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
CN201810161543.XA
Other languages
English (en)
Other versions
CN108632338B (zh
Inventor
钦钠克里希南·鲍拉普拉姆
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Samsung Electronics Co Ltd
Original Assignee
Samsung Electronics Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Samsung Electronics Co Ltd filed Critical Samsung Electronics Co Ltd
Publication of CN108632338A publication Critical patent/CN108632338A/zh
Application granted granted Critical
Publication of CN108632338B publication Critical patent/CN108632338B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/067—Distributed or networked storage systems, e.g. storage area networks [SAN], network attached storage [NAS]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/60—Scheduling or organising the servicing of application requests, e.g. requests for application data transmissions using the analysis and optimisation of the required network resources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H04L67/1097—Protocols in which an application is distributed across nodes in the network for distributed storage of data in networks, e.g. transport arrangements for network file system [NFS], storage area networks [SAN] or network attached storage [NAS]
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0653—Monitoring storage devices or systems
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0628—Interfaces specially adapted for storage systems making use of a particular technique
    • G06F3/0655—Vertical data movement, i.e. input-output transfer; data movement between one or more hosts and one or more storage devices
    • G06F3/0659—Command handling arrangements, e.g. command buffers, queues, command scheduling
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0673—Single storage device
    • G06F3/0679—Non-volatile semiconductor memory device, e.g. flash memory, one time programmable memory [OTP]
    • G—PHYSICS
    • G06—COMPUTING OR CALCULATING; COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/06—Digital input from, or digital output to, record carriers, e.g. RAID, emulated record carriers or networked record carriers
    • G06F3/0601—Interfaces specially adapted for storage systems
    • G06F3/0668—Interfaces specially adapted for storage systems adopting a particular infrastructure
    • G06F3/0671—In-line storage system
    • G06F3/0683—Plurality of storage devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L41/00—Arrangements for maintenance, administration or management of data switching networks, e.g. of packet switching networks
    • H04L41/12—Discovery or management of network topologies
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L61/00—Network arrangements, protocols or services for addressing or naming
    • H04L61/50—Address allocation
    • H04L61/5007—Internet protocol [IP] addresses
    • H04L61/5014—Internet protocol [IP] addresses using dynamic host configuration protocol [DHCP] or bootstrap protocol [BOOTP]
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/01—Protocols
    • H04L67/10—Protocols in which an application is distributed across nodes in the network
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L67/00—Network arrangements or protocols for supporting network services or applications
    • H04L67/50—Network services
    • H04L67/51—Discovery or management thereof, e.g. service location protocol [SLP] or web services

Landscapes

  • Engineering & Computer Science (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Debugging And Monitoring (AREA)
  • Computer And Data Communications (AREA)
  • Data Exchanges In Wide-Area Networks (AREA)
  • Information Retrieval, Db Structures And Fs Structures Therefor (AREA)

Abstract

提供了存储系统和用于提供自动存储发现的方法。存储系统包括：多个存储装置，每个存储装置运行DHCP客户端和发现日志更新器；主计算机，向多个存储装置提供I/O或计算工作负载；和发现服务器，向主计算机提供发现日志页面。DHCP客户端和发现日志更新器在每个存储装置上运行，将相应存储装置的发现日志条目提供给发现服务器。发现日志页面包含多个存储装置的发现信息，发现信息包括一个或多个发现日志条目，并且每一个发现日志条目包括相应存储装置的被分配用于在主计算机与相应存储装置之间建立通信的地址。主计算机使用包含在发现日志页面中的目标存储装置的发现日志条目来建立与目标存储装置的连接，并且向目标存储装置提供I/O或计算工作负载。

Description

存储系统和用于提供自动存储发现的方法
相关申请的交叉引用
本申请要求2017年3月16日提交的美国临时专利申请No.62/472,379的优先权，其公开内容通过引用方式整体合并于此。
技术领域
本公开总体而言涉及一种分布式存储装置，更具体地，涉及一种用于提供在超大规模数据中心环境中的分布式存储装置的自动发现的系统和方法。
背景技术
数据中心中的每个机架包含用于计算和存储装置的滑轨和/或托盘的组合。超大规模数据中心可以包括若干性能优化的数据中心(POD)，并且每个POD可以包括多个机架和成百上千的计算和/或存储装置。
快速非易失性存储器(NVMe)定义了用于主机软件(host software)的寄存器级接口，从而经由外围组件互连快速(PCIe)总线与非易失性存储子系统(例如，固态驱动器(SSD))通信。架构上快速非易失性存储器(NVMe over fabrics，简称为NVMeoF)(或简称为NVMf)定义了一种通用体系结构，其在大范围的存储网络架构(fabric)(诸如以太网、光纤通道、InfiniBand、传输控制协议(TCP)网络以及其他网络架构)上支持NVMe块存储协议。
在基于NVMeoF的存储系统中，每个存储装置(也被称为NVMeoF兼容SSD或以太网SSD)通过其子系统NVMe限定名(NQN)、互联网协议(IP)地址、端口ID和/或控制器ID来识别。每个POD管理器需要知道架构(例如，以太网)上的存储装置的状态和可用性，来分配和调度工作负载。某些存储装置可能因维护而关闭，并且工作负载不能分配给这些存储装置。此外，在超大规模数据中心环境中对来自分布在架构上的成百上千的存储装置的发现信息的收集、维护和更新并非是一件易事。
发明内容
根据一个实施例，一种存储系统包括：多个存储装置，所述多个存储装置中的每一个被配置为运行动态主机配置协议(DHCP)客户端；以及发现服务器，其被配置为向主计算机提供发现日志页面。在多个存储装置中的每一个上运行的发现日志更新器将相应存储装置的发现日志条目提供给发现服务器。所述发现日志页面包含多个存储装置的发现信息，所述发现信息包括一个或多个发现日志条目，并且所述一个或多个发现日志条目中的每一个包括相应存储装置的被分配用于在主计算机与相应存储装置之间建立通信的地址。主计算机使用发现日志页面中包含的目标存储装置的发现日志条目来建立与目标存储装置的连接，并向目标存储装置提供输入/输出(I/O)或计算工作负载。
根据另一个实施例，一种方法包括：运行在存储装置中的动态主机配置协议(DHCP)客户端；将存储装置的发现日志条目提供给发现服务器；将发现日志页面从发现服务器提供至主计算机，其中发现日志页面包含多个存储装置的发现信息，所述发现信息包括一个或多个发现日志条目，并且所述一个或多个发现日志条目中的每一个包括相应存储装置的被分配用于在主计算机与对应存储装置之间建立通信的地址；使用包含在发现日志页面中的目标存储装置的发现日志条目来在主机与目标存储装置之间建立连接；以及从主计算机向目标存储装置提供输入/输出(I/O)或计算工作负载。
现在将参照附图更具体地描述并且在权利要求中指出以上和其他优选特征，包括实施方式的各种新颖细节和事件的组合。将理解，本文描述的具体系统和方法仅仅是作为说明，而不是作为限制来示出。如本领域技术人员将理解的，在不脱离本公开的范围的情况下，可以在各种各样的实施例中采用本文所描述的原理和特征。
附图说明
作为本说明书的一部分而包括的附图示出了当前优选的实施例，并且与上面给出的一般性描述以及下面给出的优选实施例的详细描述一起用于解释和教导本文描述的原理。
图1示出根据一个实施例的示例分布式存储装置系统的框图；
图2示出根据一个实施例的示例发现日志页面的数据结构；
图3示出根据一个实施例的包含在发现日志页面中的示例日志条目的数据结构；
图4示出根据一个实施例的用于提供发现日志信息的示例流程图；
图5示出根据一个实施例的用于在主计算机与目标存储装置之间建立通信的示例流程图；以及
图6示出根据一个实施例的自动发现的示例过程。
附图不一定按比例绘制，并且出于说明的目的，类似结构或功能的元件在整个附图中通常用相同的附图标记来表示。附图仅旨在便于描述本文所述的各种实施例。附图没有描述在此公开的教导的每个方面，并且不限制权利要求的范围。
具体实施方式
本文公开的每个特征和教导可以单独使用或者与其他特征和教导结合使用，以提供在超大规模数据中心环境中提供自动以太网存储发现的系统和方法。参考附图进一步详细描述了单独和组合地利用这些附加特征和教导中的许多附加特征和教导的代表性示例。该详细描述仅旨在教导本领域技术人员用于实践本教导的方面的更多细节，而不旨在限制权利要求的范围。因此，上面在具体实施方式中公开的特征的组合对以最广泛的含义来实践教导来说可能不是必需的，而是被教导仅仅是为了描述本教导的特定代表性示例。
在下面的描述中，仅出于解释的目的，阐述了特定的术语以提供对本公开的透彻理解。然而，对于本领域技术人员显而易见的是，不需要这些具体细节来实践本公开的教导。
本文的具体描述中的一些部分是根据对计算机存储器内的数据位的操作的算法和符号表示来呈现的。数据处理领域的技术人员使用这些算法描述和表示来将其工作的实质有效地传达给本领域其他技术人员。在这里，算法通常被构思为产生期望结果的有条理的步骤序列。这些步骤是需要对物理量进行物理操作的步骤。通常，虽然不一定，但是这些量采取能够被存储、传输、组合、比较和以其他方式操作的电信号或磁信号的形式。主要出于常用的原因，将这些信号称为比特、值、元素、符号、字符、术语、数字等，这已经证实有时是非常方便的。
然而，应该记住的是，所有这些和类似的术语都与适当的物理量相关联，并且仅仅是适用于这些量的方便的标签。除非特别另外指出，否则如从下面的讨论中明显的是，应当理解在整个说明书中，利用诸如“处理”、“计算”、“运算”、“确定”、“显示”等术语的讨论指的是计算机系统或类似的电子计算装置的动作和过程，其将在计算机系统的寄存器和存储器内表示为物理(电子)量的数据操作并转换成类似地表示为计算机系统的存储器或寄存器(或者其他这样的信息存储装置、传输装置或显示装置)内的物理量的其它数据。
此外，代表性示例和从属权利要求的各种特征可以以未具体和明确列举的方式进行组合，以便提供本教导的另外的有用实施例。还要特别注意，为了原始公开的目的，并且为了限制所要求保护的主题，实体组的所有值范围或指示都公开了每个可能的中间值或中间实体。还要特别注意，图中所示的部件的尺寸和形状被设计成有助于理解如何实践本教导，而不旨在限制示例中所示的尺寸和形状。
本公开描述了包括多个数据存储装置的分布式数据存储系统。本分布式数据存储系统采用动态主机配置协议(DHCP)服务来提供、更新和维护多个数据存储装置的动态发现信息。分布式数据存储系统的子系统之间通信所支持的传输协议的示例是NVMeoF协议，并且架构是以太网。子系统包括一个或多个计算节点(例如，远程主计算机或计算节点)和多个存储装置(例如，以太网SSD)。
NVMeoF标准定义了基于NVMeoF的系统的发现服务，以允许主计算机(在本文中也被称为主机或计算节点)识别和定位主计算机可以访问的子系统(在本文中也被称为存储装置或节点)。提供发现服务的发现服务器是将一个或多个发现控制器公开给基于NVMeoF的系统的主计算机的子系统。发现服务器的每个发现控制器可以向请求主计算机提供发现日志页面。
由发现控制器提供的发现日志页面可以包含一个或多个发现日志条目。发现日志页面中包含的每个发现日志条目指定主计算机通过NVMe传输协议连接到子系统所需的信息。例如，发现日志条目指定如下的子系统，该子系统将它的名称空间或引用公开给另一发现服务。根据NVMeoF规范(架构上快速非易失性存储器规范)，最大引用深度可以是八个级别或更少。
图1示出了根据一个实施例的示例分布式存储装置系统的框图。分布式存储系统100包括主计算机110、动态主机配置协议(DHCP)服务器130、发现服务器150、存储装置160、以及通过建立的网络提供主计算机110、DHCP服务器130、发现服务器150和存储装置160之间连接的架构120。架构120的示例是以太网。
主计算机110可以代表分布式存储系统100的许多主计算机之一，并且存储装置160可以代表分布式存储系统100的许多存储装置之一。根据一个实施例，主计算机110是指分布式存储系统100的计算节点，该计算节点可以向存储装置发布工作负载或者简单地对存储在包括存储装置160的分布式存储系统100的各存储装置中的数据执行读取/写入访问。
存储装置160包括存储装置控制器161、端口162、DHCP客户端163、诸如固态驱动器(SSD)的数据存储器164以及发现日志更新器(DLU)165。在一个实施例中，DLU 165是在存储装置160上运行的服务，以使用架构传输协议和使用RESTful API或GraphQL请求的端口来更新发现服务器150的发现日志条目组152中的存储装置160的发现日志条目。例如，DLU165可以使用TCP/IP或UDP/IP和TCP/UDP端口来更新发现服务器150的发现日志条目组152中的存储装置160的发现日志条目。DHCP服务器130是分布式存储系统100的子系统，该子系统向请求DHCP客户端提供动态或永久租赁的IP地址。例如，存储装置160的DHCP客户端163向DHCP服务器130发送请求126，并且DHCP服务器130响应于该请求126向DHCP客户端163分配IP地址(动态IP地址或永久IP地址)。
发现服务器150向被配置为从发现服务器150获取发现日志信息的任何请求主计算机提供发现服务。发现服务器150包括发现控制器151和发现日志条目组152以及NVMeoF发现服务器规范中描述的与此处的讨论不是特别相关的其他组件。发现控制器151的IP地址或传输地址向包括主计算机110的分布式存储系统100的一个或多个主计算机公开。另外，主机可以在到发现服务的连接命令中使用众所周知的发现服务NQN(例如，“nqn.2014-08.org.nvmexpress.discovery”)。
主计算机110可以使用发现服务器150的发现服务来查找连接到分布式存储系统100内可用的一个或多个存储装置所需的信息。主计算机110可以以很多方式来获得初始发现信息。例如，没有发现服务器150的IP地址的新附接的主计算机可以从本地主机配置文件或从主计算机的操作系统(OS)的管理程序或对主计算机已知的任何其他子系统中获得初始发现信息。主计算机110还可以使用到发现服务的连接命令中的发现服务NQN(例如，“nqn.2014-08.org.nvmexpress.discovery”)地址。主计算机110用来获得连接到发现服务所需的NVMe传输信息的发现方法基于所使用的架构协议。初始发现服务信息可以包括发现服务器150或具有发现服务器150的信息的另一子系统的IP地址。
一旦发现服务器150的身份(例如，发现服务器150的IP地址)已知，主计算机110就发送发现日志请求121(例如，根据NVMeoF规范的获取日志页面请求)到发现服务器150，以根据需要来获得发现信息。作为响应，发现服务器150提供包括发现日志条目组152的发现日志页面122，其中发现日志条目组152包括一个或多个发现日志条目。包含在发现日志页面122中的每个发现日志条目指定主计算机110连接到一个或多个对应的存储装置160所需的信息。例如，每个条目包括对应的存储装置160的一个或多个标识符和连接到存储装置160所支持的传输协议信息。发现日志条目组152可以支持多个传输协议和多个地址类型。
根据一个实施例，发现服务器150可以自动地将最新的发现日志条目组152发送到主计算机110。例如，发现服务器150保存主计算机的列表，并且在更新一个或多个发现日志条目时，将更新的发现日志页面122发送到列出的主计算机，或者以预定间隔(例如，每天、每周)将更新的发现日志页面122发送到列出的主计算机，在一种情况下发现服务器150可以是负责POD/POD管理器的发现服务器。在这种情况下，发现日志页面122可以包含仅包括更新的发现日志条目的所存储的发现日志条目组152的子集。
基于在发现日志页面122中识别的与存储装置160对应的发现日志条目和传输类型，主计算机110可以识别目标存储装置160的端口地址123，并使用所指示的支持的传输类型和协议、使用端口地址123来建立与目标存储装置160的通信路径。在发现日志页面122中传送主机与目标存储装置之间初始化连接所需的所有信息。存储装置160的存储装置控制器161和主计算机110可以使用建立的端口162彼此通信。
在存储装置160上运行的DHCP客户端163向DHCP服务器130发送请求，并且DHCP服务器130将IP地址(或者与在对应架构中的IP地址相对应的相似地址)分配给请求DHCP客户端163。DLU 165在每个目标存储装置上或针对一组目标存储装置运行。例如，对于底架/机架中的全部或部分存储装置160，可以使用一个或几个DHCP客户端163。类似地，一个或几个DLU 165可以更新底架/机架中的一个存储装置160或一组存储装置160的日志。DHCP服务和DLU服务可以在底架/机架中的一个或几个存储装置160上运行，或者在底架/机架中的通用中央处理器(CPU)上运行，或者在底架/机架中的基板管理控制器(BMC)上运行。DHCP客户端163或DLU 165可以将包括存储装置控制器161的被分配的IP地址的发现日志条目124发送到发现服务器150。根据一个实施例，DHCP服务器130和发现服务器150并置在同一台服务器中。在一些实施例中，DHCP服务器130是分布式存储系统100之外的不同于发现服务器150的另一系统。
发现服务器150收集并更新包括发现日志条目组152的发现日志信息，使用RESTful API或GraphQL请求从目标存储装置的一个或多个DLU 165接收到所述发现日志条目组152。发现服务器150将发现日志页面提供至请求主计算机110作为对NVMeoF获取日志页面请求的响应。通过在每个目标存储装置或一组目标存储装置上运行的DLU使用由DHCP服务器分配的IP地址来对发现信息进行自动更新可以用连接到驻留在当前分布式存储系统中的目标存储装置所需的最新发现信息将无缝发现服务提供至请求主计算机。
由于新存储装置的添加、现有存储装置的替换或退役，作为数据中心环境中的例行操作过程的一部分，可以添加新的存储装置，并且可以关闭一些存储装置。由于租用的存储装置160的各个DHCP客户端163可以更新其自己的当前信息，所以DHCP服务器130可以保持最新的发现日志信息。通过使用在每个存储装置160上运行的瘦DHCP客户端163的发现日志信息的自动更新方案，本分布式存储系统100可以提供可扩展的解决方案，该可扩展的解决方案可以容纳超大规模数据中心环境中的成百上千个存储装置。
图2示出根据一个实施例的示例发现日志页面的数据结构。图2中所示的发现日志页面200包含与发现信息有关的各种参数，包括但不限于，生成计数器、记录数量、记录格式、一个或多个发现日志条目300。图3示出了包含在图2的发现日志页面200中的示例日志条目的数据结构。发现日志条目300可以包括与特定日志条目有关的各种参数，包括但不限于，传输类型(例如，远程直接存储器访问(RDMA)、光纤通道、TCP网络)、地址族(例如，IPv4、Ipv6、IB、FC)、端口ID、子系统类型、传输需求、控制器ID、管理最大SQ大小、传输服务标识符、NVM子系统NQN、传输地址(存储装置的IP地址)和传输特定地址子类型。图2中所示的发现日志页面200可以包含一个或多个发现日志条目300。
主计算机可以接收多于一个的发现日志页面。在这种情况下，主计算机检查发现日志页面的修订历史，并判断发现日志信息是否改变。根据一个实施例，主计算机可以从一个或多个发现服务器接收多个发现日志页面。主计算机可以以特定的顺序(例如，以增加日志页面偏移值的顺序)来读取接收到的发现日志页面，并对生成计数器计数。生成计数器从值0h开始指示发现信息的版本。对于发现日志中的每次变化，生成计数器都增加1。如果超过最大计数，则生成计数器恢复为初始值0h。如果生成计数器与先前读取的日志信息不匹配，则主计算机丢弃先前读取的日志页面，并相应地更新日志信息。如果在日志页面读取期间日志页面内容改变，则发现控制器可以返回指示发现重新启动的状态。根据发现控制器指示的发现重新启动，主计算机停止当前的发现过程，并重新启动新的发现过程。
在从发现服务器获取最新的发现日志条目之后，主计算机使用包含在相应日志条目中的目标存储装置的IP地址，并且通过初始化队列对来准备传输级连接从而与目标存储装置进行通信。通过这样做，主计算机发出连接命令来创建控制器队列，以建立与目标存储装置的传输级连接。连接命令可以指定各种参数，包括但不限于，端口ID、队列类型(例如，管理队列或I/O队列)、提交和完成队列的大小、队列属性、主机NQN、NVM子系统NQN和主机标识符。作为响应，目标存储装置向主计算机发送指示连接是否成功建立的连接响应。连接响应可以包含被分配用来与主计算机进行通信的存储装置控制器ID。
在超大规模数据中心环境中，在主计算机与目标存储装置之间建立适当连接所需的信息可以经由传输协议所支持的架构(例如图1的架构120)来交换。主计算机110与发现服务器150之间，主计算机110与存储装置160之间以及DHCP服务器130与存储装置160之间的底层架构120可以不同，并且在主计算机110、DHCP服务器130、发现服务器150和存储装置160之间，底层架构120不需要相同。例如，本分布式存储系统可以包括分布在企业网络、数据中心和/或因特网上的成百上千个主计算机和存储装置。本分布式存储系统的一些子系统可以经由第一类型架构来连接，而本分布式存储系统的其他子系统可以经由不同于第一类型架构的第二类型架构来连接。例如，发现服务器可以驻留在公共网络(例如，因特网)上，而主计算机和目标存储装置可以通过专用网络连接。
随着主计算机和存储装置的数量扩大和扩展，可以使用基于DHCP服务的本发现服务。根据一个实施例，数据中心中的每个机架可以运行机架级发现服务器，该机架级发现服务器可以自动更新和维护机架专用的存储装置的发现信息。POD可以包括多个机架，并且每个机架级发现服务器可以自动地将机架级发现信息更新到在POD管理器上运行的POD级发现服务器。POD级发现服务器允许POD管理器根据POD级发现信息来调度工作负载。
根据一个实施例，本分布式存储系统可以包括多个POD管理器，每个POD有一个POD管理器。可以根据可在POD管理器之间交换的系统级发现信息来在多个POD管理器之间分配工作负载。在一个替代实施例中，POD管理器可以与DHCP服务器通信，并且与其他POD管理器协作以执行工作负载分配。例如，在目标存储装置的停机期间，可以从远程存储装置获得备份数据。在这种情况下，POD管理器可以使用系统级发现信息来将工作负载调度到备份存储装置。在基于NVMeoF的存储系统的情况下，任何POD管理器都可以连接到一个或多个发现服务器，并使用获取日志命令来取回可用存储装置的更新发现信息。一旦使用发现信息建立了通信路径，目标存储装置可以服务于从主计算机接收的I/O请求。因为本发现服务不需要手动更新，所以本发现服务对于超大规模数据中心是可扩展的，该超大规模数据中心可以包括许多机架和POD，且机架中包括许多计算装置和/或存储装置。
图4示出根据一个实施例的用于提供发现日志信息的示例流程图。存储装置在启动时运行DHCP客户端，并向DHCP服务器发送请求以租用IP地址(401)。响应于DHCP客户端的请求，DHCP服务器将动态或永久的IP地址分配给存储装置的存储装置控制器(402)。在存储装置上运行的DLU使用RESTful API或GraphQL请求来将包括存储装置控制器的IP地址和端口地址的发现日志条目发送到发现服务器(403)。发现服务器提供包括多个存储装置的一个或多个发现日志条目的发现日志页面(404)。发现服务器将发现日志页面发送到主计算机(405)。
图5示出了根据一个实施例的用于在主计算机与目标存储装置之间建立通信的示例流程图。主计算机将发现信息的请求发送到发现服务器(501)。发现服务器存储从多个存储装置的DLU接收到的一个或多个发现日志条目。主计算机从发现服务器接收包括一个或多个发现日志条目的发现日志页面(502)。使用在发现日志页面中接收到的一个或多个发现日志页面条目，主计算机建立与目标存储装置的连接(503)，并且将工作负载调度到目标存储装置(504)。
图6示出根据一个实施例的自动发现的示例过程。存储装置660的DHCP客户端向DHCP服务器630发送请求以获得IP地址(601)，并且DHCP服务器630将IP地址分配并发送到存储装置660的DHCP客户端(602)。存储装置660(或DHCP服务器630)的DLU使用RESTful API或GraphQL请求来自动将存储装置660的发现日志条目发送到发现服务器650(603)。发现服务器650从多个存储装置的每个DLU收集一个或多个发现日志条目，并且准备包括一个或多个发现日志条目的发现日志页面。主计算机610将获取日志页面命令发送到发现服务器650(611)，并且作为回应，发现服务器650将发现日志页面发送到主计算机610(612)。使用包含在发现日志页面中的信息，主计算机610建立与存储装置660的连接(613)。
根据一个实施例，一种存储系统包括：多个存储装置，所述多个存储装置中的每一个被配置为运行动态主机配置协议(DHCP)客户端；以及发现服务器，其被配置为向主计算机提供发现日志页面。在多个存储装置中的每一个上运行的发现日志更新器将相应存储装置的发现日志条目提供给发现服务器。所述发现日志页面包含所述多个存储装置的发现信息，所述发现信息包括一个或多个发现日志条目，并且所述一个或多个发现日志条目中的每一个包括相应存储装置的被分配用于在主计算机与相应存储装置之间建立通信的地址。主计算机利用发现日志页面中包含的目标存储装置的发现日志条目来建立与目标存储装置的连接，并向目标存储装置提供输入/输出(I/O)或计算工作负载。
DHCP服务器可以为多个存储装置中的每个存储装置分配地址，并且多个存储装置中的各发现日志更新器可以使用所分配的地址来自动将其各自的包括分配地址的发现日志条目发送到发现服务器。
发现日志条目还可以包括存储装置控制器的端口地址。
可以根据NVMeoF规范来分配端口地址。
发现服务器可以使用RESTful应用编程接口(API)或GraphQL请求来将发现日志页面发送到主计算机。
多个存储装置中的至少一个存储装置可以是架构上快速非易失性存储器(NVMeoF)装置，并且主计算机可以将获得日志命令发送到发现服务器以接收发现日志页面。
发现服务器和DHCP服务器可以并置在存储系统的同一服务器中。
多个存储装置可以附接到机架，并且机架中的发现服务器可以收集机架专用的机架级发现信息。
多个存储装置可以分布在POD中的多个机架之中，并且负责POD的发现服务器可以收集POD专用的POD级发现信息。
POD的POD管理器可以基于POD级发现信息来在多个存储装置之间调度工作负载。
POD管理器可以与存储系统的另一个POD管理器交换POD级发现信息。
根据另一个实施例，一种方法包括：运行在存储装置中的动态主机配置协议(DHCP)客户端；将存储装置的发现日志条目提供给发现服务器；将发现日志页面从发现服务器提供至主计算机，其中发现日志页面包含多个存储装置的发现信息，所述发现信息包括一个或多个发现日志条目，并且所述一个或多个发现日志条目中的每一个包括相应存储装置的被分配用于在主计算机与对应存储装置之间建立通信的地址；使用包含在发现日志页面中的目标存储装置的发现日志条目来建立主计算机与目标存储装置之间的连接；以及将输入/输出(I/O)或计算工作负载从主计算机提供到目标存储装置。
DHCP服务器可以为多个存储装置中的每个存储装置分配地址，并且多个存储装置中的各发现日志更新器可以使用所分配的地址来将其各自的包括分配地址的发现日志条目自动发送至发现服务器。
发现日志条目还可以包括存储装置控制器的端口地址。
可以根据NVMeoF规范来分配端口地址。
发现服务器可以使用RESTful应用编程接口(API)或GraphQL请求来将发现日志页面发送到主计算机。
多个存储装置中的至少一个存储装置可以是架构上快速非易失性存储器(NVMeoF)装置，并且主计算机可以将获取日志命令发送至发现服务器以接收发现日志页面。
发现服务器和DHCP服务器可以并置在存储系统的同一服务器中。
多个存储装置可以附接到机架，并且机架中的发现服务器可以收集机架专用的机架级发现信息。
多个存储装置可以分布在POD中的多个机架中，并且负责POD的发现服务器可以收集POD专用的POD级发现信息。
POD的POD管理器可以基于POD级发现信息来在多个存储装置之间调度工作负载。
POD管理器可以与存储系统的另一个POD管理器交换POD级发现信息。
以上已经描述了上述示例实施例以说明实施用于在超大规模数据中心环境中提供自动以太网存储发现的系统和方法的各种实施例。本领域的普通技术人员将会想到对所公开的示例实施例的各种修改和偏离。在以下权利要求中阐述了旨在落入本发明范围内的主题。

Claims (22)

1.一种存储系统，包括：
多个存储装置，所述多个存储装置中的每一个被配置为运行动态主机配置协议客户端；以及
发现服务器，被配置为向主计算机提供发现日志页面，
其中，在所述多个存储装置中的每一个上运行的发现日志更新器将对应存储装置的发现日志条目提供给所述发现服务器，
其中，所述发现日志页面包含所述多个存储装置的发现信息，所述发现信息包括一个或多个发现日志条目，并且所述一个或多个发现日志条目中的每一个包括相应存储装置的被分配用于在所述主计算机与所述相应存储装置之间建立通信的地址，并且
其中，所述主计算机使用包含在所述发现日志页面中的目标存储装置的发现日志条目来建立与所述目标存储装置的连接，并向所述目标存储装置提供输入/输出或计算工作负载。
2.根据权利要求1所述的存储系统，其中，动态主机配置协议服务器为所述多个存储装置中的每一个存储装置分配地址，并且所述多个存储装置中的各发现日志更新器使用所分配的地址来将其各自的包括分配地址的发现日志条目自动发送至所述发现服务器。
3.根据权利要求2所述的存储系统，其中，所述发现日志条目还包括存储装置控制器的端口地址。
4.根据权利要求3所述的存储系统，其中，根据架构上快速非易失性存储器规范来分配所述端口地址。
5.根据权利要求1所述的存储系统，其中，所述发现服务器使用RESTful应用编程接口或GraphQL请求来将所述发现日志页面发送到所述主计算机。
6.根据权利要求1所述的存储系统，其中，所述多个存储装置中的至少一个存储装置是架构上快速非易失性存储器装置，并且所述主计算机向所述发现服务器发送获取日志命令以接收所述发现日志页面。
7.根据权利要求2所述的存储系统，其中，所述发现服务器和所述动态主机配置协议服务器并置在所述存储系统的同一服务器中。
8.根据权利要求1所述的存储系统，其中，所述多个存储装置附接到机架，并且所述机架中的发现服务器收集所述机架专用的机架级发现信息。
9.根据权利要求8所述的存储系统，其中，所述多个存储装置分布在POD中的多个机架之中，负责所述POD的发现服务器收集所述POD专用的POD级发现信息。
10.根据权利要求9所述的存储系统，其中，所述POD的POD管理器基于所述POD级发现信息在所述多个存储装置之间调度工作负载。
11.根据权利要求10所述的存储系统，其中，所述POD管理器与所述存储系统的另一POD管理器交换所述POD级发现信息。
12.一种用于提供自动存储发现的方法，包括：
运行存储装置中的动态主机配置协议客户端；
将所述存储装置的发现日志条目提供给发现服务器；
将发现日志页面从所述发现服务器提供至主计算机，其中所述发现日志页面包含多个存储装置的发现信息，所述发现信息包括一个或多个发现日志条目，并且所述一个或多个发现日志条目中的每一个包括地址相应存储装置的被分配用于在所述主计算机与对应存储装置之间建立通信的地址；
使用包含在所述发现日志页面中的目标存储装置的发现日志条目来在所述主计算机与目标存储装置之间建立连接；以及
从所述主计算机向所述目标存储装置提供输入/输出或计算工作负载。
13.根据权利要求12所述的方法，其中，动态主机配置协议服务器为所述多个存储装置中的每一个分配地址，并且所述多个存储装置中的每个发现日志更新器使用所分配的地址来将其各自的包括分配地址的发现日志条目自动发送到所述发现服务器。
14.根据权利要求13所述的方法，其中，所述发现日志条目还包括存储装置控制器的端口地址。
15.根据权利要求14所述的方法，其中，根据架构上快速非易失性存储器规范来分配所述端口地址。
16.根据权利要求12所述的方法，其中，所述发现服务器使用RESTful应用编程接口或GraphQL请求来将所述发现日志页面发送到所述主计算机。
17.根据权利要求12所述的方法，其中，所述多个存储装置中的至少一个存储装置是架构上快速非易失性存储器装置，并且所述主计算机向所述发现服务器发送获取日志命令以接收所述发现日志页面。
18.根据权利要求13所述的方法，其中，所述发现服务器和所述动态主机配置协议服务器并置在存储系统的同一服务器中。
19.根据权利要求12所述的方法，其中，所述多个存储装置附接到机架，并且所述机架中的发现服务器收集所述机架专用的机架级发现信息。
20.根据权利要求19所述的方法，其中，所述多个存储装置分布在POD中的多个机架之中，负责所述POD的发现服务器收集所述POD专用的POD级发现信息。
21.根据权利要求20所述的方法，其中，所述POD的POD管理器基于所述POD级发现信息来在所述多个存储装置之间调度工作负载。
22.根据权利要求21所述的方法，其中，所述POD管理器与存储系统的另一POD管理器交换所述POD级发现信息。
CN201810161543.XA 2017-03-16 2018-02-26 存储系统和用于提供自动存储发现的方法 Active CN108632338B (zh)

Applications Claiming Priority (4)

Application Number Priority Date Filing Date Title
US201762472379P 2017-03-16 2017-03-16
US62/472,379 2017-03-16
US15/615,508 US10771340B2 (en) 2017-03-16 2017-06-06 Automatic ethernet storage discovery in hyperscale datacenter environment
US15/615,508 2017-06-06

Publications (2)

Publication Number Publication Date
CN108632338A true CN108632338A (zh) 2018-10-09
CN108632338B CN108632338B (zh) 2022-05-24

Family

ID=63519692

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201810161543.XA Active CN108632338B (zh) 2017-03-16 2018-02-26 存储系统和用于提供自动存储发现的方法

Country Status (5)

Country Link
US (1) US10771340B2 (zh)
JP (1) JP6974218B2 (zh)
KR (1) KR102200934B1 (zh)
CN (1) CN108632338B (zh)
TW (1) TWI729256B (zh)

Families Citing this family (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN109840232B (zh) * 2017-11-28 2022-05-13 华为技术有限公司 存储设备及存储设备的元件管理方法
US11307980B2 (en) * 2018-04-20 2022-04-19 Seagate Technology Llc Distributed data storage system with passthrough operations
US11109202B2 (en) * 2018-11-28 2021-08-31 Verizon Patent And Licensing Inc. Method and system for intelligent routing for mobile edge computing
US11416428B2 (en) * 2019-02-04 2022-08-16 American Megatrends International, Llc Enablement of software defined storage solution for NVME over ethernet fabric management on storage controller
US11113001B2 (en) 2019-08-30 2021-09-07 Hewlett Packard Enterprise Development Lp Fabric driven non-volatile memory express subsystem zoning
KR102740441B1 (ko) * 2019-12-17 2024-12-09 에스케이하이닉스 주식회사 스토리지 시스템, 이를 위한 스토리지 장치 및 동작 방법
US11301398B2 (en) 2020-03-16 2022-04-12 Dell Products L.P. Symbolic names for non-volatile memory express (NVMe™) elements in an NVMe™-over-fabrics (NVMe-oF™) system
US11489921B2 (en) 2020-03-16 2022-11-01 Dell Products L.P. Kickstart discovery controller connection command
US11240308B2 (en) * 2020-03-16 2022-02-01 Dell Products L.P. Implicit discovery controller registration of non-volatile memory express (NVMe) elements in an NVME-over-fabrics (NVMe-oF) system
US11163716B2 (en) * 2020-03-16 2021-11-02 Dell Products L.P. Discovery controller registration of non-volatile memory express (NVMe) elements in an NVMe-over-fabrics (NVMe-oF) system
US11237997B2 (en) 2020-03-16 2022-02-01 Dell Products L.P. Target driven zoning for ethernet in non-volatile memory express over-fabrics (NVMe-oF) environments
US11489723B2 (en) 2020-03-16 2022-11-01 Dell Products L.P. Multicast domain name system (mDNS)-based pull registration
US11675499B2 (en) * 2020-06-19 2023-06-13 Western Digital Technologies, Inc. Synchronous discovery logs in a fabric storage system
US11314447B2 (en) * 2020-07-21 2022-04-26 EMC IP Holding Company, LLC System and method for sustaining single NVMe subsystem by a federated storage array for NVMe-oF connectivity
US12443436B2 (en) 2020-09-02 2025-10-14 Samsung Electronics Co., Ltd. Systems and method for batching requests in computational devices
US12393432B2 (en) 2020-09-02 2025-08-19 Samsung Electronics Co., Ltd. Mechanism to discover computational storage functions and devices
US20220207127A1 (en) * 2020-12-30 2022-06-30 Dell Products, L.P. Console-based validation of secure assembly and delivery of information handling systems
US12399639B2 (en) 2021-01-27 2025-08-26 Samsung Electronics Co., Ltd. Systems and methods for data transfer for computational storage devices
US11805171B2 (en) 2021-03-04 2023-10-31 Dell Products L.P. Automated ethernet layer 3 (L3) connectivity between non-volatile memory express over fabric (NVMe-oF) hosts and NVM-oF subsystems using bind
US11818031B2 (en) * 2021-03-04 2023-11-14 Dell Products L.P. Automated internet protocol (IP) route update service for ethernet layer 3 (L3) IP storage area networks (SANs)
US11520518B2 (en) 2021-03-06 2022-12-06 Dell Products L.P. Non-volatile memory express over fabric (NVMe-oF) zone subsets for packet-by-packet enforcement
US11463521B2 (en) 2021-03-06 2022-10-04 Dell Products L.P. Dynamic connectivity management through zone groups
US11947839B2 (en) * 2021-05-10 2024-04-02 Samsung Electronics Co., Ltd. Storage device, system, and method for customizable metadata
US12423117B2 (en) 2021-06-03 2025-09-23 Samsung Electronics Co., Ltd. Plugin framework mechanism to manage computational storage devices
US12118231B2 (en) 2021-07-27 2024-10-15 Dell Products L.P. Systems and methods for NVMe over fabric (NVMe-oF) namespace-based zoning
US12105989B2 (en) 2022-03-18 2024-10-01 Dell Product L.P. Storage subsystem-driven zoning protocol embodiments in a nonvolatile memory express environment
US11907530B2 (en) 2022-03-25 2024-02-20 Dell Products L.P. Scalable quality of service (QoS) for a nonvolatile memory express™ environment
US20240020056A1 (en) * 2022-07-12 2024-01-18 Dell Products L.P. Systems and methods for send log page commands for pull model devices
US12346599B2 (en) 2022-07-12 2025-07-01 Dell Products L.P. Systems and methods for storage subsystem-driven zoning for pull model devices
US12307129B2 (en) 2022-07-12 2025-05-20 Dell Products L.P. Systems and methods for command execution request for pull model devices
US12039199B2 (en) 2022-07-13 2024-07-16 Dell Products L.P. Discovery log entry identifiers (DLEIDs) applications in non-volatile memory express® environments
US12328228B2 (en) 2022-07-13 2025-06-10 Dell Products L.P. Systems and methods for deploying third-party applications on a cluster of network switches
US12335090B2 (en) 2022-07-20 2025-06-17 Dell Products L.P. Placement of containerized applications in a network for embedded centralized discovery controller (CDC) deployment
WO2024128971A1 (en) * 2022-12-12 2024-06-20 Panasonic Intellectual Property Corporation Of America Communication apparatus and communication method for service discovery for local area network

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20040068561A1 (en) * 2002-10-07 2004-04-08 Hitachi, Ltd. Method for managing a network including a storage system
US20090100163A1 (en) * 2002-08-06 2009-04-16 Tsao Sheng Ted Method and apparatus forWeb based storage on demand
US20140289377A1 (en) * 2013-03-22 2014-09-25 Netapp Inc. Configuring network storage system over a network
WO2015194033A1 (ja) * 2014-06-20 2015-12-23 株式会社日立製作所 計算機システム
WO2016139749A1 (ja) * 2015-03-03 2016-09-09 株式会社日立製作所 計算機システム、及び、記憶制御方法

Family Cites Families (42)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6253240B1 (en) * 1997-10-31 2001-06-26 International Business Machines Corporation Method for producing a coherent view of storage network by a storage network manager using data storage device configuration obtained from data storage devices
US20010044879A1 (en) * 2000-02-18 2001-11-22 Moulton Gregory Hagan System and method for distributed management of data storage
US20020196744A1 (en) * 2001-06-26 2002-12-26 O'connor Michael A. Path discovery and mapping in a storage area network
US7958199B2 (en) * 2001-11-02 2011-06-07 Oracle America, Inc. Switching systems and methods for storage management in digital networks
US8909976B2 (en) * 2002-08-12 2014-12-09 Sheng Tai (Ted) Tsao Method and apparatus for web based storage on demand
US8019849B1 (en) * 2002-09-13 2011-09-13 Symantec Operating Corporation Server-side storage area network management interface
US7243144B2 (en) * 2002-09-26 2007-07-10 Hitachi, Ltd. Integrated topology management method for storage and IP networks
US8005918B2 (en) * 2002-11-12 2011-08-23 Rateze Remote Mgmt. L.L.C. Data storage devices having IP capable partitions
US7649880B2 (en) * 2002-11-12 2010-01-19 Mark Adams Systems and methods for deriving storage area commands
US7720024B2 (en) * 2004-03-31 2010-05-18 Qualcomm Incorporated Method and apparatus for obtaining server information in a wireless network
JP4503413B2 (ja) * 2004-10-06 2010-07-14 株式会社日立製作所 ネットワークシステムにおける外部端末からの記憶装置の利用
JP4566874B2 (ja) * 2005-10-04 2010-10-20 株式会社日立製作所 Ｉｐネットワークにおけるストレージアクセス管理機能及びシステム
US8166166B2 (en) * 2005-12-15 2012-04-24 International Business Machines Corporation Apparatus system and method for distributing configuration parameter
US8825806B2 (en) * 2006-07-26 2014-09-02 International Business Machines Corporation Selection and configuration of storage-area network storage device and computing device
JP4949804B2 (ja) * 2006-11-07 2012-06-13 株式会社日立製作所 統合管理計算機と記憶装置管理方法および計算機システム
JP4770749B2 (ja) * 2007-01-31 2011-09-14 富士通株式会社 サービス管理装置、サービス管理方法、およびサービス管理プログラム
US7908252B1 (en) * 2008-03-19 2011-03-15 Crossroads Systems, Inc. System and method for verifying paths to a database
US8868676B2 (en) * 2010-10-11 2014-10-21 International Business Machines Corporation Methods and systems for verifying server-storage device connectivity
JP5296769B2 (ja) * 2010-12-13 2013-09-25 日本電信電話株式会社 履歴管理方法、履歴管理装置及び履歴管理システム
US9141410B2 (en) * 2011-03-08 2015-09-22 Rackspace Us, Inc. Pluggable allocation in a cloud computing system
US8751449B2 (en) 2011-04-04 2014-06-10 Symantec Corporation Managing performance within an enterprise object store file system
JP5584186B2 (ja) * 2011-10-28 2014-09-03 株式会社ソニー・コンピュータエンタテインメント ストレージシステムおよびストレージ装置
US9229520B2 (en) * 2012-11-30 2016-01-05 Seagate Technology Llc Managing gateway access
US20140195634A1 (en) 2013-01-10 2014-07-10 Broadcom Corporation System and Method for Multiservice Input/Output
US9229854B1 (en) 2013-01-28 2016-01-05 Radian Memory Systems, LLC Multi-array operation support and related devices, systems and software
US10063638B2 (en) 2013-06-26 2018-08-28 Cnex Labs, Inc. NVM express controller for remote access of memory and I/O over ethernet-type networks
US10372685B2 (en) * 2014-03-31 2019-08-06 Amazon Technologies, Inc. Scalable file storage service
CN106030552A (zh) 2014-04-21 2016-10-12 株式会社日立制作所 计算机系统
US9384093B1 (en) 2014-05-28 2016-07-05 Microsemi Storage Solutions (U.S.), Inc. Raid enabled NVME device
US9853938B2 (en) * 2014-09-08 2017-12-26 Quanta Computer Inc. Automatic generation of server network topology
US9686143B2 (en) * 2014-09-24 2017-06-20 Intel Corporation Mechanism for management controllers to learn the control plane hierarchy in a data center environment
US9712619B2 (en) 2014-11-04 2017-07-18 Pavilion Data Systems, Inc. Virtual non-volatile memory express drive
US9565269B2 (en) * 2014-11-04 2017-02-07 Pavilion Data Systems, Inc. Non-volatile memory express over ethernet
EP3082319B1 (en) * 2015-04-16 2018-09-26 Alcatel Lucent Personalized access to storage device through a network
US10079730B2 (en) * 2015-09-30 2018-09-18 Amazon Technologies, Inc. Network based resource configuration discovery service
US10764393B2 (en) * 2016-04-21 2020-09-01 Hewlett Packard Enterprise Development Lp Determining a persistent network identity of a networked device
US12210476B2 (en) * 2016-07-19 2025-01-28 Pure Storage, Inc. Disaggregated compute resources and storage resources in a storage system
US11461258B2 (en) * 2016-09-14 2022-10-04 Samsung Electronics Co., Ltd. Self-configuring baseboard management controller (BMC)
US10613974B2 (en) * 2016-10-04 2020-04-07 Pure Storage, Inc. Peer-to-peer non-volatile random-access memory
US10007459B2 (en) * 2016-10-20 2018-06-26 Pure Storage, Inc. Performance tuning in a storage system that includes one or more storage devices
US10230544B1 (en) * 2016-11-23 2019-03-12 Pure Storage, Inc. Efficient data forwarding in a networked device
US10542089B2 (en) * 2017-03-10 2020-01-21 Toshiba Memory Corporation Large scale implementation of a plurality of open channel solid state drives

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20090100163A1 (en) * 2002-08-06 2009-04-16 Tsao Sheng Ted Method and apparatus forWeb based storage on demand
US20040068561A1 (en) * 2002-10-07 2004-04-08 Hitachi, Ltd. Method for managing a network including a storage system
US20140289377A1 (en) * 2013-03-22 2014-09-25 Netapp Inc. Configuring network storage system over a network
WO2015194033A1 (ja) * 2014-06-20 2015-12-23 株式会社日立製作所 計算機システム
WO2016139749A1 (ja) * 2015-03-03 2016-09-09 株式会社日立製作所 計算機システム、及び、記憶制御方法

Also Published As

Publication number Publication date
US10771340B2 (en) 2020-09-08
KR102200934B1 (ko) 2021-01-11
CN108632338B (zh) 2022-05-24
KR20180106822A (ko) 2018-10-01
TW201843980A (zh) 2018-12-16
US20180270119A1 (en) 2018-09-20
TWI729256B (zh) 2021-06-01
JP6974218B2 (ja) 2021-12-01
JP2018156645A (ja) 2018-10-04

Similar Documents

Publication Publication Date Title
CN108632338B (zh) 存储系统和用于提供自动存储发现的方法
US11082505B2 (en) Dynamic discovery of available storage servers
US9853938B2 (en) Automatic generation of server network topology
US20180063237A1 (en) Distributed global load-balancing system for software-defined data centers
US8904003B2 (en) Method and system for delegated job control across a network
US10243919B1 (en) Rule-based automation of DNS service discovery
US10666508B2 (en) Unified software defined networking configuration management over multiple hosting environments
US20050125575A1 (en) Method for dynamic assignment of slot-dependent static port addresses
US9875061B2 (en) Distributed backup system
CN105993161B (zh) 用于解析地址的元件、方法、系统和计算机可读存储设备
US9043492B2 (en) Method to publish remote management services over link local network for zero-touch discovery, provisioning and management
US20210286747A1 (en) Systems and methods for supporting inter-chassis manageability of nvme over fabrics based systems
US8819200B2 (en) Automated cluster node configuration
CN110780973B (zh) 一种虚拟机迁移装置、方法、设备及可读存储介质
CN102668453A (zh) 资源的容错和可缩放的负载分布
US8402126B2 (en) Method and system for discovering managed systems in a network
WO2017049959A1 (zh) 一种业务处理方法及设备
US11256440B2 (en) Method and distributed storage system for aggregating statistics
US12242628B2 (en) Providing service tier information when validating API requests
US10353585B2 (en) Methods for managing array LUNs in a storage network with a multi-path configuration and devices thereof
US10244051B2 (en) Cloud metadata discovery API
CN113094337A (zh) 用于对分布式存储系统进行读写的方法和装置
US12445475B1 (en) Managing unmanageable devices on an enterprise network
US9548940B2 (en) Master election among resource managers
US20250130961A1 (en) Infrastructure independent self-configuring management network

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant