数据存储方法和数据存储装置与流程 专利技术说明

计算;推算;计数设备的制造及其应用技术1.本技术涉及数据库领域，尤其涉及一种数据存储方法和数据存储装置。背景技术：2.目前在油田系统中的文件数据(包括文档，地震数据和测井曲线数据)分布在各个专业系统和统建系统中，其中元数据部分存储在不同的数据库中的不同库表结构中，文件体存储在不同的介质中。3.但是，分散存储文件数据的方法，存在无法对上述文件数据统一检索、分析的问题，导致检索效率较低。技术实现要素：4.本技术提供一种数据存储方法和数据存储装置，实现了对文件数据的统一检索，有利于提高文件数据的检索效率。5.第一方面，提供了一种数据存储方法，应用于包括多个源文件系统服务器和数据湖服务器的系统，包括：获取上述多个源文件系统服务器存储的文件数据的第一元数据，上述第一元数据包括上述文件数据的在上述多个源文件系统服务器所在的目录、上述文件数据在上述多个源文件系统服务器的属性名称以及上述属性名称对应的属性值；建立上述文件数据在上述多个源文件系统服务器所在的目录与上述数据湖服务器中预设目录之间的第一映射关系，以及上述文件数据在上述多个源文件系统服务器的属性名称与上述数据湖服务器中预设属性名称之间的第二映射关系；基于上述第一映射关系和上述第二映射关系，确定第二元数据，上述第二元数据包括上述预设目录和上述预设属性名称；将上述文件数据和上述第二元数据同步存储至上述数据湖服务器中，并建立上述文件数据与上述第二元数据之间的对应关系。6.在本技术中，通过将分散存储在多个文件系统服务器中的文件数据用统一的数据结构存储至数据湖中，解决了分散存储带来的不能统一检索上述文件数据的问题，有效提高后续对文件数据的检索效率，进而还有利于后续对文件数据的统一管理或者使用。此外，本技术保留了源系统中文件数据的各种属性信息，即在不丢失源系统中文件数据与其他数据的关联关系的前提下，提高对文件数据的检索效率。7.结合第一方面，在第一方面的某些实现方式中，上述方法还包括：向检索服务器发送上述文件数据的索引信息，上述索引信息用于对上述文件数据进行检索。8.结合第一方面，在第一方面的某些实现方式中，上述索引信息包括下列至少一个：上述文件数据的名称、上述文件数据的标识、上述文件数据的创建时间、上述文件数据的大小、上述预设属性名称以及上述预设属性名称对应的属性值。9.结合第一方面，在第一方面的某些实现方式中，来自上述多个源文件系统服务器中的不同源文件系统服务器的上述文件数据在上述数据湖服务器中的存储路径的命名方式统一。10.第二方面，提供了一种数据存储装置，包括获取模块和处理模块，其中获取模块用于：获取上述多个源文件系统服务器存储的文件数据的第一元数据，上述第一元数据包括上述文件数据在上述多个源文件系统服务器所在的目录、上述文件数据在上述多个源文件系统服务器的属性名称以及上述属性名称对应的属性值；处理模块用于：建立上述文件数据在上述多个源文件系统服务器所在的目录与预设目录之间的第一映射关系，以及上述文件数据在上述多个源文件系统服务器的属性名称与预设属性名称之间的第二映射关系；基于上述第一映射关系和上述第二映射关系，确定第二元数据，上述第二元数据包括上述上述预设目录和上述预设属性名称；以及，将上述文件数据和上述第二元数据同步存储至上述数据湖服务器中，并建立上述文件数据与上述第二元数据之间的对应关系。11.结合第二方面，在第二方面的某些实现方式中，上述处理模块用于：向检索服务器发送上述文件数据的索引信息，上述索引信息用于对上述文件数据进行检索。12.结合第二方面，在第二方面的某些实现方式中，上述索引信息包括下列至少一个：上述文件数据的名称、上述文件数据的标识、上述文件数据的创建时间、上述文件数据的大小、上述预设属性名称以及上述预设属性名称对应的属性值。13.结合第二方面，在第二方面的某些实现方式中，来自上述多个源文件系统服务器中的不同源文件系统服务器的上述文件数据在上述数据湖服务器中的存储路径的命名方式统一。14.第三方面，提供了一种处理器，包括：输入电路、输出电路和处理电路。处理电路用于通过输入电路接收信号，并通过输出电路发射信号，使得处理器执行上述第一方面中任一种可能实现方式中的方法。15.在具体实现过程中，上述处理器可以为芯片，输入电路可以为输入管脚，输出电路可以为输出管脚，处理电路可以为晶体管、门电路、触发器和各种逻辑电路等。输入电路所接收的输入的信号可以是由例如但不限于接收器接收并输入的，输出电路所输出的信号可以是例如但不限于输出给发射器并由发射器发射的，且输入电路和输出电路可以是同一电路，该电路在不同的时刻分别用作输入电路和输出电路。本技术实施例对处理器及各种电路的具体实现方式不做限定。16.第四方面，提供了一种处理装置，包括处理器和存储器。该处理器用于读取存储器中存储的指令，并可通过接收器接收信号，通过发射器发射信号，以执行上述第一方面中任一种可能实现方式中的方法。17.可选地，处理器为一个或多个，存储器为一个或多个。18.可选地，存储器可以与处理器集成在一起，或者存储器与处理器分离设置。19.在具体实现过程中，存储器可以为非瞬时性(non-transitory)存储器，例如只读存储器(read only memory，rom)，其可以与处理器集成在同一块芯片上，也可以分别设置在不同的芯片上，本技术实施例对存储器的类型以及存储器与处理器的设置方式不做限定。20.上述第四方面中的处理装置可以是一个芯片，该处理器可以通过硬件来实现也可以通过软件来实现，当通过硬件实现时，该处理器可以是逻辑电路、集成电路等；当通过软件来实现时，该处理器可以是一个通用处理器，通过读取存储器中存储的软件代码来实现，该存储器可以集成在处理器中，可以位于该处理器之外，独立存在。21.第五方面，提供了一种计算机程序产品，计算机程序产品包括：计算机程序(也可以称为代码，或指令)，当计算机程序被运行时，使得计算机执行上述第一方面中任一种可能实现方式中的方法。22.第六方面，提供了一种计算机可读存储介质，该计算机可读存储介质存储有计算机程序(也可以称为代码，或指令)当其在计算机上运行时，使得计算机执行上述第一方面中任一种可能实现方式中的方法。附图说明23.为了更清楚地说明本技术实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图作简单地介绍，显而易见地，下面描述中的附图是本技术的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。24.图1是本技术实施例提供的系统架构的示意图；25.图2是本技术实施例提供的数据存储方法的示意性流程图；26.图3是本技术实施例提供的又一系统架构的示意图；27.图4是本技术实施例提供的数据存储装置的示意图；28.图5是本技术实施例提供的又一数据存储装置的示意图。具体实施方式29.为使本技术实施例的目的、技术方案和优点更加清楚，下面将结合本技术实施例中的附图，对本技术实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例是本技术一部分实施例，而不是全部的实施例。基于本技术中的实施例，本领域普通技术人员在根据本实施例的启示下做出的所有其他实施例，都属于本技术保护的范围。30.目前在油田系统中的文件数据(包括文档，地震数据和测井曲线数据)分布在各个专业系统和统建系统中，其中元数据部分存储在不同的数据库中的不同库表结构中，文件体存储在不同的介质中。31.但是，上述分散存储文件数据的方法，存在无法对上述文件数据的统一检索问题，导致检索效率较低。32.有鉴于此，本技术提供了一种数据存储方法和数据存储装置，通过将分散存储在多个文件系统服务器中的文件数据用统一的数据结构存储至数据湖中，解决了分散存储带来的不能统一检索上述文件数据的问题，有效提高后续对文件数据的检索效率，进而还有利于后续对文件数据的统一管理或者使用。此外，本技术保留了源系统中文件数据的各种属性信息，即在不丢失源系统中文件数据与其他数据的关联关系的前提下，提高文件数据的检索效率。33.在介绍本技术实施例提供的数据存储方法和数据存储之前，先做出以下几点说明。34.第一，在下文示出的实施例中，各术语及英文缩略语，均为方便描述而给出的示例性举例，不应对本技术构成任何限定。本技术并不排除在已有或未来的协议中定义其它能够实现相同或相似功能的术语的可能。35.第二，在下文示出的实施例中第一、第二以及各种数字编号仅为描述方便进行的区分，并不用来限制本技术实施例的范围。36.第三，“至少一个”是指一个或者多个，“多个”是指两个或两个以上。“和/或”，描述关联对象的关联关系，表示可以存在三种关系，例如，a和/或b，可以表示：单独存在a，同时存在a和b，单独存在b的情况，其中a，b可以是单数或者复数。字符“/”一般表示前后关联对象是一种“或”的关系。“以下至少一项(个)”或其类似表达，是指的这些项中的任意组合，包括单项(个)或复数项(个)的任意组合。例如，a、b和c中的至少一项(个)，可以表示：a，或b，或c，或a和b，或a和c，或b和c，或a、b和c，其中a，b，c可以是单个，也可以是多个。37.图1示出了本技术实施例提供的系统架构100的示意图。如图1所示，该系统架构100包括第一文件系统服务器101、第二文件系统服务器102和数据湖服务器103。其中，上述第一文件系统服务器101和第二文件系统服务器102中分别存储有不同的文件数据，数据湖服务器103可以统一存储上述分散存储在第一文件系统服务器101和第二文件系统服务器102的文件数据。38.应理解，除上述示出的第一源文件系统服务器101和第二源文件系统服务器102之外，还可以包括其他多个源文件系统服务器，本技术对此不作限定。39.为了使本技术的目的、技术方案更加清楚直观，下面将结合附图及实施例，对本技术提供的数据存储方法和数据存储装置进行详细说明。应理解，此处所描述的具体实施例仅仅用以解释本技术，并不用于限定本技术。40.图2是本技术实施例提供的数据存储方法200的示意性流程图。该方法200可以适用于上述系统架构100，除此之外还可以适用于其他场景，本技术对此不作限定。如图2所示，该方法200可以包括下列步骤：41.s201、数据湖服务器获取上述多个源文件系统服务器存储的文件数据的第一元数据，该第一元数据包括上述文件数据在上述多个源文件系统服务器所在的目录、上述文件数据在上述多个源文件系统服务器的属性名称以及所述属性名称对应的属性值。42.应理解，上述多个源文件系统服务器对于文件数据的管理方式可以各不相同，但上述文件数据的所在的目录存在相同的规律。43.在一种可能的实现方式中，上述任一源文件系统服务器中的文件数据的名称为“ab”，则数据湖服务器可以确定该文件数据的名称为“ab”的文件数据存在于上述任一源文件系统服务器中的目录“b”中，即该文件数据的名称为“ab”的文件数据所在的目录为“b”。44.示例性地，上述文件数据为油田文件数据，该油田文件数据的名称为“塔中16-27j一开井口装置图.jpg”，则数据湖服务器可以确定该油田文件数据所在的目录为“一开井口装置图”。45.应理解，上述文件数据在上述多个源文件系统服务器的属性名称可以包括上述文件数据的作者和/或者核心实体(如井或井筒等)。且在该属性名称为上述文件数据的作者的情况下，该属性名称对应的属性值则为该作者的姓名。在该属性名称为文件数据的核心实体的情况下，该属性名称对应的属性值则为该核心实体的对象。除此之外，上述文件数据的第一元数据还可以包括其他的属性名称和该属性名称对应的属性值，本技术对此不作限定。46.示例性地，上述文件数据为文件数据名称为“塔中16-27j一开井口装置图.jpg”的油田文件数据，数据湖服务器可以基于该文件数据的名称和该文件数据在源文件系统服务器中的文件数据(如关于井或井筒等文件数据)的关系，确定该油田文件数据的一个属性名称为核心实体“井”，该属性名称对应的属性值为该核心实体“井”的对象“塔中16-27j”。以及，数据湖服务器可以基于该文件数据的名称和该文件数据在源文件系统服务器中的其他数据，确定该油田文件数据的另一个属性名称，即“作者”对应的属性值为“张三”。47.表一示出了文件数据名称为“塔中16-27j一开井口装置图.jpg”的油田文件数据的第一元数据。48.表一[0049][0050][0051]如表一所示，上述文件数据名称为“塔中16-27j一开井口装置图.jpg”的油田文件数据的第一元数据包括该油田文件数据所在的目录、两种属性名称和该两种属性名称对应的两个属性值。其中该油田文件数据的所在目录为“一开井口装置图”，第一种属性名称为“井”，且该“井”对应的属性值为“塔中16-27j”，以及第二种属性名称为“作者”，且该“作者”对应的属性值为“张三”。[0052]应理解，上述表一仅仅示出了名称为“塔中16-27j一开井口装置图.jpg”的油田文件数据的第一元数据，在实操过程中，数据湖服务器还可以获取其他文件数据的第一元数，其中该其他文件数据可能来自同一源文件系统服务器，也可能来自不同的源文件系统服务器，本技术对此不作限定。[0053]s202、数据湖服务器建立上述文件数据在上述多个源文件系统服务器所在的目录与上述数据湖服务器中预设目录之间的第一映射关系，以及上述文件数据在上述多个源文件系统服务器的属性名称与上述数据湖服务器中预设属性名称之间的第二映射关系。[0054]表二示出了上述文件数据名称为“塔中16-27j一开井口装置图.jpg”的油田文件数据的第一映射关系和第二映射关系。[0055]表二[0056][0057]如表二所示，文件数据名称为“塔中16-27j一开井口装置图.jpg”的油田文件数据在源文件系统服务器(即表中的源系统)中的属性名称“井”映射到数据湖服务器为预设属性名称“well_common_name”，油田文件数据在源文件系统服务器中的属性名称“作者”映射到数据湖服务器为预设属性名称“writer”，以及油田文件数据在源文件系统服务器中所在目录“一开井口装置图”映射到数据湖服务器为预设目录“一开井口装置图”。[0058]应理解，表二仅示出了上述文件数据名称为“塔中16-27j一开井口装置图.jpg”的油田文件数据的第一元数据的第一映射关系和第二映射关系，在实操过程中还可以包括其他文件数据的第一元数据的第一映射关系和第二映射关系，且该其他文件数据可以来自同一源文件系统服务器，也可能来自不同的源文件系统服务器，本技术对此不作限定。[0059]s203、数据湖服务器基于上述第一映射关系和上述第二映射关系，确定第二元数据，该第二元数据包括上述预设目录、上述预设属性名称。[0060]表三示出了上述文件数据名称为“塔中16-27j一开井口装置图.jpg”的油田文件数据的第二元数据。[0061]表三[0062][0063]如表三所示，文件数据名称为“塔中16-27j一开井口装置图.jpg”的油田文件数据的第二元数据包括该油田文件数据的预设目录和预设属性名称。其中，预设目录为“一开井口装置图”，预设属性名称为“well_common_name”和“writer”。[0064]应理解，表三仅示出了上述文件数据名称为“塔中16-27j一开井口装置图.jpg”的油田文件数据的第二元数据，在实操过程中，数据湖服务器还可以确定其他文件数据的第二元数据，且该其他文件数据可以来自同一源文件系统服务器，也可能来自不同的源文件系统服务器，本技术对此不作限定。[0065]s204、数据湖服务器将上述文件数据和上述第二元数据同步存储至上述数据湖服务器中，并建立上述文件数据与上述第二元数据之间的对应关系。[0066]在一种可能的实现方式中，数据湖服务器将上述多个源文件系统服务器中的文件数据和上述第二元数据存储至数据湖服务器中，获得该文件数据在该数据湖服务器中的存储路径，并基于该存储路径建立上述文件数据和第二元数据之间的对应关系。[0067]示例性地，数据湖服务器将可以通过数据仓库技术(extract-transform-load，etl)将上述多个源文件系统服务器中的文件数据和上述第二元数据存储至数据湖服务器中。[0068]表四示出了上述文件数据名称为“塔中16-27j一开井口装置图.jpg”的油田文件数据和上述第二元数据之间的对应关系。[0069]表四[0070][0071]如表四所示，上述文件数据名称为“塔中16-27j一开井口装置图.jpg”的油田文件数据的存储路径和第二元数据之间的对应关系，其中该油田文件数据的存储路径为/tl/datalake/fd5ccc6652285521f07ddc79f20d19f6.jpg，该油田文件数据的第二元数据的描述可以参见之前的描述，为避免重复，此处不再做赘述。[0072]应理解，表四仅示出了上述文件数据的文件数据名称为“塔中16-27j一开井口装置图.jpg”的油田文件数据的存储路径和其第二元数据的对应关系，在实际对应关系中还可以包括其他文件数据的存储路径和其对应的第二元数据的对应关系，且该其他文件数据可以来自同一源文件系统服务器，也可能来自不同的源文件系统服务器，本技术对此不作限定。此外，为例便于管理和后续检索上述文件数据，数据湖服务器可以使用统一方式命名来自上述多个源文件系统服务器中的不同源文件系统服务器的文件数据在数据湖服务器中的存储路径。[0073]在本技术实施例中，通过将分散存储在多个文件系统服务器中的文件数据用统一的数据结构存储至数据湖中，解决了分散存储带来的不能统一检索上述文件数据的问题，有效提高后续对文件数据的检索效率，进而还有利于后续对文件数据的统一管理或者使用。此外，本技术保留了源系统中文件数据的各种属性信息，即在不丢失源系统中文件数据与其他数据的关联关系的前提下，提高对文件数据的检索效率。[0074]应理解，上述系统除包括多个源文件系统服务器和数据湖服务器之外，还可以包括检索服务器。图3示出了一种系统架构300的示意图。如图3所示，该系统架构300包括处包括上述第一源文件系统服务器101、第二源文件系统服务器102、数据湖服务器103和检索服务器303。其中，对第一该源文件系统服务器101、第二源文件系统服务器102和数据湖服务器103的描述可以参见上述实施例，为避免重复，此处不在做赘述。在将上述文件数据和上述第二元数据同步存储至上述数据湖服务器103中，并建立上述文件数据与上述第二元数据之间的对应关系之后，数据湖服务器103还可以向检索服务器303发送上述文件数据的索引信息，检索服务器303可以接收该检索信息并基于该检索信息更新当前所存储的检索信息。[0075]在一种可能的情况下，该检索服务器303中已存储有上述文件数据的检索信息，检索服务器303可以将该已存储的检索信息更新为上述数据湖服务器103发送的检索信息。[0076]在另一种可能的情况下，该检索服务器303中未存储有上述文件数据的任何检索信息，检索服务器303可以直接存储上述数据湖服务器103发送的检索信息。[0077]应理解，上述检索信息可以为上述文件数据的基本信息，如文件数据的名称、文件数据的存储路径、文件数据的大小或文件数据的创建时间等信息，本技术对此不做限定。[0078]示例性地，如下示出了上述名称为“塔中16-27j一开井口装置图.jpg”的油田文件数据的检索信息的实例。[0079][0080][0081]可选地，检索服务器303还可以基于相关人员输入的检索信息，检索并显示该检索信息对应的文件数据，以供相关人员查看或使用。[0082]应理解，上述检索并显示的文件数据可以为上述多个源文件系统服务器中文件数据。换句话说，本技术避免了现有技术分散存储上述文件数据，导致统一检索文件数据困难，进而无法对文件数据进行统一管理或使用的问题。或者，即使现有技术的分布式存储可以对文件数据进行统一管理或使用，也需要先针对每个源文件系统服务器开展检索工作，获取对应的文件数据，导致存在操作复杂繁琐，检索效率低的问题。即本技术实现了对上述对个源文件系统服务器中文件的统一检索，有效提高文件检索效率。[0083]应理解，上述检索服务器可以为分布式全文检索引擎(elastic search，es)，本技术对此不做限定。[0084]应理解，上述各过程的序号的大小并不意味着执行顺序的先后，各过程的执行顺序应以其功能和内在逻辑确定，而不应对本技术实施例的实施过程构成任何限定。[0085]为了实现上述本技术实施例提供的方法中的各功能，数据湖服务器可以包括硬件结构和/或软件模块，以硬件结构、软件模块、或硬件结构加软件模块的形式来实现上述各功能。上述各功能中的某个功能以硬件结构、软件模块、还是硬件结构加软件模块的方式来执行，取决于技术方案的特定应用和设计约束条件。[0086]上文中结合图1和图2，详细描述了本技术实施例提供的数据存储方法，下面将结合图4和图5，详细描述本技术实施例提供的数据存储装置。[0087]图4示出了本技术实施例提供的数据存储装置400，该装置400包括：获取模块401和处理模块402。[0088]其中，获取模块401用于：获取上述多个源文件系统服务器存储的文件数据的第一元数据，上述第一元数据包括上述文件数据在上述多个源文件系统服务器所在的目录、上述文件数据在上述多个源文件系统服务器的属性名称以及上述属性名称对应的属性值；处理模块402用于：建立上述文件数据在上述多个源文件系统服务器所在的目录与预设目录之间的第一映射关系，以及上述文件数据在上述多个源文件系统服务器的属性名称与预设属性名称之间的第二映射关系；基于上述第一映射关系和上述第二映射关系，确定第二元数据，上述第二元数据包括上述预设目录和上述预设属性名称；以及，将上述文件数据和上述第二元数据同步存储至上述数据湖服务器中，并建立上述文件数据与上述第二元数据之间的对应关系。[0089]可选地，该处理模块402用于：向检索服务器发送上述文件数据的索引信息，上述索引信息用于对上述文件数据进行检索。[0090]可选地，上述索引信息包括下列至少一个：上述文件数据的名称、上述文件数据的标识、上述文件数据的创建时间、上述文件数据的大小、上述预设属性名称以及上述预设属性名称对应的属性值。[0091]可选地，来自上述多个源文件系统服务器中的不同源文件系统服务器的上述文件数据在上述数据湖服务器中的存储路径的命名方式统一。[0092]应理解，这里的装置400以功能模块的形式体现。这里的术语“模块”可以指应用特有集成电路(application specific integrated circuit，asic)、电子电路、用于执行一个或多个软件或固件程序的处理器(例如共享处理器、专有处理器或组处理器等)和存储器、合并逻辑电路和/或其它支持所描述的功能的合适组件。在一个可选例子中，本领域技术人员可以理解，装置400可以具体为上述实施例中的数据湖服务器，或者，上述实施例中数据湖服务器的功能可以集成在装置400中，装置400可以用于执行上述方法实施例中与数据湖服务器对应的各个流程和/或步骤，为避免重复，在此不再赘述。上述装置400具有实现上述方法中数据湖服务器执行的相应步骤的功能；上述功能可以通过硬件实现，也可以通过硬件执行相应的软件实现。该硬件或软件包括一个或多个与上述功能相对应的模块。[0093]在本技术的实施例，图4中的装置400也可以是芯片或者芯片系统，例如：片上系统(system on chip，soc)。[0094]图5示出了本技术实施例提供的另一数据存储装置500，该装置500包括：处理器501、存储器502、通信接口503以及总线504。其中，存储器502用于存储指令，该处理器501用于执行该存储器502存储的指令。处理器501、存储器502和通信接口503通过总线504实现彼此之间的通信连接。[0095]其中，处理器501用于：获取上述多个源文件系统服务器存储的文件数据的第一元数据，上述第一元数据包括上述文件数据在上述多个源文件系统服务器所在的目录、上述文件数据在上述多个源文件系统服务器的属性名称以及上述属性名称对应的属性值；建立上述文件数据在上述多个源文件系统服务器所在的目录与预设目录之间的第一映射关系，以及上述文件数据在上述多个源文件系统服务器的属性名称与预设属性名称之间的第二映射关系；基于上述第一映射关系和上述第二映射关系，确定第二元数据，上述第二元数据包括、上述预设目录和上述预设属性名称；以及，将上述文件数据和上述第二元数据同步存储至上述数据湖服务器中，并建立上述文件数据与上述第二元数据之间的对应关系。[0096]可选地，该处理器501用于：向检索服务器发送上述文件数据的索引信息，上述索引信息用于对上述文件数据进行检索。[0097]可选地，上述索引信息包括下列至少一个：上述文件数据的名称、上述文件数据的标识、上述文件数据的创建时间、上述文件数据的大小、上述预设属性名称以及上述预设属性名称对应的属性值。[0098]可选地，来自上述多个源文件系统服务器中的不同源文件系统服务器的上述文件数据在上述数据湖服务器中的存储路径的命名方式统一。[0099]应理解，装置500可以具体为上述实施例中的数据湖服务器，或者，上述实施例中数据湖服务器的功能可以集成在装置500中，装置500可以用于执行上述方法实施例中数据湖服务器对应的各个步骤和/或流程。可选地，该存储器503可以包括只读存储器和随机存取存储器，并向处理器提供指令和数据。存储器的一部分还可以包括非易失性随机存取存储器。例如，存储器还可以存储设备类型的信息。该处理器501可以用于执行存储器中存储的指令，并且该处理器执行该指令时，该处理器可以执行上述方法实施例中与数据湖服务器对应的各个步骤和/或流程。[0100]应理解，在本技术实施例中，该处理器可以是中央处理单元(central processing unit，cpu)，该处理器还可以是其他通用处理器、数字信号处理器(dsp)、专用集成电路(asic)、现场可编程门阵列(fpga)或者其他可编程逻辑器件、分立门或者晶体管逻辑器件、分立硬件组件等。通用处理器可以是微处理器或者该处理器也可以是任何常规的处理器等。[0101]在实现过程中，上述方法的各步骤可以通过处理器中的硬件的集成逻辑电路或者软件形式的指令完成。结合本技术实施例所公开的方法的步骤可以直接体现为硬件处理器执行完成，或者用处理器中的硬件及软件模块组合执行完成。软件模块可以位于随机存储器，闪存、只读存储器，可编程只读存储器或者电可擦写可编程存储器、寄存器等本领域成熟的存储介质中。该存储介质位于存储器，处理器执行存储器中的指令，结合其硬件完成上述方法的步骤。为避免重复，这里不再详细描述。[0102]本领域普通技术人员可以意识到，结合本文中所公开的实施例描述的各示例的单元及算法步骤，能够以电子硬件、或者计算机软件和电子硬件的结合来实现。这些功能究竟以硬件还是软件方式来执行，取决于技术方案的特定应用和设计约束条件。专业技术人员可以对每个特定的应用来使用不同方法来实现所描述的功能，但是这种实现不应认为超出本技术的范围。[0103]所属领域的技术人员可以清楚地了解到，为描述的方便和简洁，上述描述的系统、装置和单元的具体工作过程，可以参考前述方法实施例中的对应过程，在此不再赘述。[0104]在本技术所提供的几个实施例中，应该理解到，所揭露的系统、装置和方法，可以通过其它的方式实现。例如，以上所描述的装置实施例仅仅是示意性的，例如，所述单元的划分，仅仅为一种逻辑功能划分，实际实现时可以有另外的划分方式，例如多个单元或组件可以结合或者可以集成到另一个系统，或一些特征可以忽略，或不执行。另一点，所显示或讨论的相互之间的耦合或直接耦合或通信连接可以是通过一些接口，装置或单元的间接耦合或通信连接，可以是电性，机械或其它的形式。[0105]所述作为分离部件说明的单元可以是或者也可以不是物理上分开的，作为单元显示的部件可以是或者也可以不是物理单元，即可以位于一个地方，或者也可以分布到多个网络单元上。可以根据实际的需要选择其中的部分或者全部单元来实现本实施例方案的目的。[0106]另外，在本技术各个实施例中的各功能单元可以集成在一个处理单元中，也可以是各个单元单独物理存在，也可以两个或两个以上单元集成在一个单元中。[0107]所述功能如果以软件功能单元的形式实现并作为独立的产品销售或使用时，可以存储在一个计算机可读取存储介质中。基于这样的理解，本技术的技术方案本质上或者说对现有技术做出贡献的部分或者该技术方案的部分可以以软件产品的形式体现出来，该计算机软件产品存储在一个存储介质中，包括若干指令用以使得一台计算机设备(可以是个人计算机，服务器，或者网络设备等)执行本技术各个实施例所述方法的全部或部分步骤。而前述的存储介质包括：u盘、移动硬盘、只读存储器(read-only memory，rom)、随机存取存储器(random access memory，ram)、磁碟或者光盘等各种可以存储程序代码的介质。[0108]以上所述，仅为本技术的具体实施方式，但本技术的保护范围并不局限于此，任何熟悉本技术领域的技术人员在本技术揭露的技术范围内，可轻易想到变化或替换，都应涵盖在本技术的保护范围之内。因此，本技术的保护范围应以所述权利要求的保护范围为准。









图片声明：本站部分配图来自人工智能系统AI生成,觅知网授权图片,PxHere摄影无版权图库。本站只作为美观性配图使用,无任何非法侵犯第三方意图,一切解释权归图片著作权方,本站不承担任何责任。如有恶意碰瓷者,必当奉陪到底严惩不贷!




内容声明：本文中引用的各种信息及资料（包括但不限于文字、数据、图表及超链接等）均来源于该信息及资料的相关主体（包括但不限于公司、媒体、协会等机构）的官方网站或公开发表的信息。部分内容参考包括:(百度百科,百度知道,头条百科,中国民法典,刑法,牛津词典,新华词典,汉语词典,国家院校,科普平台)等数据,内容仅供参考使用,不准确地方联系删除处理！本站为非盈利性质站点,发布内容不收取任何费用也不接任何广告!




免责声明：我们致力于保护作者版权，注重分享，被刊用文章因无法核实真实出处，未能及时与作者取得联系，或有版权异议的，请联系管理员，我们会立即处理，本文部分文字与图片资源来自于网络，部分文章是来自自研大数据AI进行生成,内容摘自(百度百科,百度知道,头条百科,中国民法典,刑法,牛津词典,新华词典,汉语词典,国家院校,科普平台)等数据,内容仅供学习参考,不准确地方联系删除处理!的,若有来源标注错误或侵犯了您的合法权益，请立即通知我们，情况属实，我们会第一时间予以删除，并同时向您表示歉意,谢谢!