- 综合排序
- 最热优先
- 最新优先
- 来自专栏张善友的专栏
使用 MDT 2010 进行可伸缩部署
R2的用户可以使用MDT 2010来完成。 MDT 2010 不为人们熟知的功能之一是它可作为一种完整部署解决方案。在以前的版本中，MDT 通过可管理和可重复的方式帮助您创建和维护桌面映像。 MDT 2010 提供了两种主要的部署方法。第一种方法即部分接触安装，这种方法仅使用 MDT 2010 进行客户端部署。 要扩展 MDT 2010 部署解决方案，需要复制两个特定文件夹。第一个文件夹是承载所有MDT 源和配置文件的 MDT 2010 分布共享。每个部署服务器都要有这些文件。 要完成部署解决方案，您需要配置 MDT2010，以便在客户端下载 MDT引导环境时，它自动连接到其本地部署服务器。
2.2K50发布于 2018-01-19 - 来自专栏用户9757876的专栏
自动化批量安装Windows11——Windows Servcer 2022 MDT
批量化自动部署操作系统，方法有很多，个人推崇微软自带的工具，但是同时也认为WDS太简陋了，很多功能都没有，SCCM又太复杂了，门槛有点高，综合来看，还是MDT比较友好。 下面就以WDS结合MDT的方式来为大家展示一下，Windows Server 2022批量化地自动部署Windows 11的过程。注意，本文并未涉及域控。 二、安装MDT 1、首先下载Windows ADK和Windows ADK的Windows PE加载项 2、下载Microsoft Deployment Toolkit，即MDT。 4、接着安装Windows ADK的Windows PE加载项 三、配置MDT，实现自动化批量部署Windows 11 1、启动：Deployment Workbench； 2、鼠标右击“Deployment 现在安装也是一样的； 1、角色服务，保持默认都勾选； 2、这里没域控，所以选择“独立服务器”； 3、PXE服务器初始设置，“响应所有客户端计算机” ； 4、WDS安装完成后，添加启动映像； 5、选择一下刚才MDT
5.4K41编辑于 2022-05-18 - 来自专栏存储内核技术交流
聊聊Lustre Quota
Quota设计思路 lustre整体分为master和slave，其中master是负责全局的quota分配和追踪运行在MDT上;slave负责后端mdt和ost后端文件系统的hard quota 的统计和上报，运行在MDT和所有的OST上。 |grep -v md|grep enable osd-ldiskfs.bigfs-MDT0000.quota_slave.enabled // 查看默认的mdt上的quota限制 [root@CentOS-Lustre-MDS ~]$ lctl get_param osd-ldiskfs.bigfs-MDT0000.quota_slave.enabled osd-ldiskfs.bigfs-MDT0000.quota_slave.enabled ~]$ sync [root@CentOS-Lustre-MDS ~]$ lctl get_param osd-ldiskfs.bigfs-MDT0000.quota_slave.enabled osd-ldiskfs.bigfs-MDT0000
1.4K20编辑于 2023-02-26 - 来自专栏存储内核技术交流
探索Lustre文件系统文件创建实现上篇之服务端
特殊的mdt0 mdt0是lustre元数据服务的注册开启的地方，注册处理客户端请求的各种handler.mdt初始化的通过mount时候读取CONFIGS/{fsname}-MDT0000文件数据进行 'add mdt' Wed Oct 19 03:08:38 2022- #06 (120)attach 0:bigfs-MDT0000 1:mdt 2:bigfs-MDT0000_UUID /CONFIGS]$ mdt_init0的核心逻辑负责初始化mdt的obd stack操作栈，如下是mdt0初始化的核心函数,这个做了mdt操作栈初始化->fld的初始化->seq初始化->注册intent 初始化mdt的操作栈 mdt_stack_init((struct lu_env *)env, m, cfg); // mdt fid存储数据库初始化 mdt_fld_init(env, mdt_obd_name (env, mdt); } // 设置intent锁的回调函数 ldlm_register_intent(m->mdt_namespace, mdt_intent_policy); // mdt
1.4K41编辑于 2023-02-26 - 来自专栏存储内核技术交流
聊聊lustre中的fid和fld
获取整个文件系统的配置信息，挂载整个root目录树 MDT上扩展属性 lustre中MDT上对于文件的metadata是存储在mdt上文件的inode上的，而对于lustre 文件系统fid是作为文件或者数据对象的唯一标识 lustr整套服务启动后运行在MDT或者OST上的sequence server和MDT0上的sequence controller进行通信获取一个sequence的范围；每个FID客户端连接到MDT或者 上的sequence 服务 static int mdt_seq_init(const struct lu_env *env, struct mdt_device *mdt) { /* init sequence (mdt), LUSTRE_SEQ_CONTROLLER, ss); if (rc) GOTO(out_seq_fini, rc); } // 运行其他mdt(包括mdt0 controller的客户端，主要是和mdt0通信，获取sequence range rc = mdt_seq_init_cli(env, mdt); EXIT; out_seq_fini: if
1.5K31编辑于 2022-08-17 - 来自专栏存储内核技术交流
深入浅出Lustre Distributed Namespace特性
基于这些因素考虑，Lustre设计DNE来解决MDT的扩展性和性能问题。 DNE核心解决了文件或者目录的元数据可以分散存储在多个MDT上，应用请求到不同的文件或者目录元数据请求会分摊到不同的MDT上，MDT0存储了Lustre文件系统的根。 }mdt上创建Remote Directory;通过rmdir {remote_dir}删除远程目录 设置普通用户在其他的MDT(非MDT0)上创建远程目录需要调整如下参数 $ lctl set_param mdt.fsname-MDT0000.enable_remote_dir=1 $ lctl set_param.mdt.fsname-MDT0000.enable_remote_dir_gid=allowed_gid FID在FLDB中查询到后能够识别到这个FID是在哪个MDT上(MDT INDEX).下面是MDT0上的一个Remote Name Entry和远程MDT1之间的映射关系。
95520编辑于 2023-02-26 - 来自专栏存储内核技术交流
lustre中服务通过MGS加载的Device和服务的内核模块
, mdt: perrynfs-MDT0000_UUID, index: 0, gen: 1, UUID: perrynfs-MDT0000-mdc_UUID } - { index: 16, event - { index: 2, event: attach, device: perrynfs-MDT0000-mdtlov, type: lov, UUID: perrynfs-MDT0000-mdtlov_UUID device: perrynfs-MDT0000, type: mdt, UUID: perrynfs-MDT0000_UUID } - { index: 7, event: new_profile, name: perrynfs-MDT0000, lov: perrynfs-MDT0000-mdtlov } - { index: 8, event: setup, device: perrynfs-MDT0000 , UUID: perrynfs-MDT0000_UUID, node: 0, options: perrynfs-MDT0000-mdtlov, failout: f } - { index: 11,
81020编辑于 2022-08-17 - 来自专栏存储内核技术交流
深入理解Lustre分布式文件系统之Utils工具篇
--index=0 --backfstype=zfs --reformat mdspool/mdt /dev/sdg $ mount.lustre mdspool/mdt /lustre/mdt/ lwp.perrynfs-MDT0000-lwp-MDT0000 lwp.perrynfs-MDT0000-lwp-OST0000 lwp.perrynfs-MDT0000-lwp-OST0001 lwp.perrynfs-MDT0000 -osc-MDT0000 osc.perrynfs-OST0002-osc-MDT0000 osd-ldiskfs.perrynfs-MDT0000 osd-ldiskfs.perrynfs-OST0000 -osc-MDT0000 seq.cli-cli-perrynfs-OST0002-osc-MDT0000 seq.cli-ctl-perrynfs-MDT0000 seq.cli-lfsck-perrynfs-MDT0000 $ mount -t ldiskfs /dev/sdb /mnt/mgt_mdt // 进入mdt/mgt的CONFIGS目录 $ pwd /mnt/mgt_mdt $ ls -l /mnt/mgt_mdt
2.7K20编辑于 2022-08-17 - 来自专栏存储内核技术交流
深入浅出Lustre中mkdir实现
中对应的函数了 static struct tgt_handler mdt_tgt_handlers[] = { TGT_MDT_HDL(IS_MUTABLE, MDS_REINT, mdt_reint // mdt_reinters定义，这里是请求到了MDS，MDS需要针对请求的意向设置处理的函数指针 static const struct mdt_reinter mdt_reinters[] = { 函数表中的mdt_reint rc = h->th_act(tsi) { // 进入mdt_reint的函数进行处理 mdt_reint } // mdt_object_new是在mdt上创建一个mdt的内存对象 // mdt_object_new的执行路径依次是 mdt_object_new->lu_object_find_at->mdt_object_alloc->mdt_object_init->lod_object_alloc->lod_object_init
93220编辑于 2023-02-26 - 来自专栏salesforce零基础学习
salesforce零基础学习（一百二十七）Custom Metadata Type 篇二
Default_Value__mdt defaultValue = Default_Value__mdt.getInstance('Account_Customer_Priority_Default') List<Default_Value__mdt> defaultValueList = Default_Value__mdt.getAll().values(); Default_Value__mdt 需要非空判断 String customerPriorityDurableId = fieldDefinitionList.get(0).DurableId; for(Default_Value__mdt List<Default_Value__mdt> defaultValueList = Default_Value__mdt.getAll().values(); Default_Value__mdt targetDefaultValue; for(Default_Value__mdt valueItem : defaultValueList) { if(String.isNotBlank
80220编辑于 2023-03-16 - 来自专栏新智元
颜水成/程明明新作！Sora核心组件DiT训练提速10倍，Masked Diffusion Transformer V2开源
在推理过程中，MDT仍保持标准的扩散生成过程。 MDT的参数和推理成本与DiT基本一致，因为正如前文所介绍的，MDT推理过程中仍保持与DiT一致的标准的diffusion过程。 MDT在PaperWithCode的leaderboard上刷新SoTA 收敛速度比较 上图比较了ImageNet 256基准下，8×A100 GPU上DiT-S/2基线、MDT-S/2和MDTv2 得益于更优秀的上下文学习能力，MDT在性能和生成速度上均超越了DiT。MDTv2的训练收敛速度相比DiT提升10倍以上。 MDT在训练步骤和训练时间方面大相比DiT约3倍的速度提升。 MDTv2进一步将训练速度相比于MDT提高了大约5倍。
82510编辑于 2024-03-13 - 来自专栏存储内核技术交流
Lustre集群部署
共享；有条件可以单独部署 wipefs -a /dev/sdg mkdir -p /lustre/mdt mkfs.lustre --fsname=bigfs --mgs --mdt --index=0 --backfstype=zfs --reformat mdspool/mdt /dev/sdg mount.lustre mdspool/mdt /lustre/mdt/ //和上面是等价的命令 mdspool/mdt /lustre/mdt/ 节点172.16.84.44 //清理磁盘的文件系统信息 wipefs -a /dev/sdg //创建该节点挂载mdt的目录 mkdir -p / lustre/mdt // 使用zfs初始化后端的mdt,当前配置中mgs和mdt是共享一个磁盘，每个mdt的index必须是唯一的，否则服务启动会有问题，同时mdspool/mdt中,mdspool是 mdspool/mdt /dev/sdg //挂载时候就启动了该节点的lustre mds服务，元数据信息写入到了mdt中 mount.lustre mdspool/mdt /lustre/mdt/
2K51编辑于 2022-08-17 - 来自专栏存储内核技术交流
Lustre PCC 初探
Lustre 启用和配置 // 每个mdt节点启用，hsm_control=enabled [root@dgdpl1915 ~]# lctl set_param mdt.lustrefs-MDT0000 .hsm_control=enabled mdt.lustrefs-MDT0000.hsm_control=enabled [root@dgdpl1915 ~]# lctl get_param mdt.lustrefs-MDT0000 .hsm_control mdt.lustrefs-MDT0000.hsm_control=enabled //客户端节点 lhsmtool_posix --daemon --hsm-root
1.2K30编辑于 2022-08-17 - 来自专栏存储内核技术交流
lustre学习笔记之基本知识
MDS+MDT:MDS提供文件系统的统一命名空间。MDT是为MDS提供元数据存储的storage target. OSS+OST:OSS提供大容量数据存储的服务。 lustre文件系统至少有一个MDT和MDS，当然可以配置多个MDT对应一个MDS。 lustre中的mgt/mdt/ost可以采用不同的后端文件系统，比如mdt采用ldisks，ost采用zfs. 后端是ldiskfs的MDT，能存储inode的数量的上限是4亿，但是以zfs为后端的MDT没有这个限制。 针对ldiskfs的MDT,在做MDT格式化时候能存储的inodes数量就确定了。在默认的情况下每个inode占用2K的字节。MDT inode申请和OST的数据对象申请都是在第一次格式化时候做好。
4.3K41编辑于 2022-08-17 - 来自专栏存储内核技术交流
深入学习下Lustre文件布局上篇
4.18.0-240.1.1.el8_lustre.x86_64,lustre-2.14.0 10.211.55.3 节点 磁盘 类型 挂载点 10.211.55.6 Lustre Server MDT mount-lustre:/mgt_mdt,mount-ldiskfs:/mnt/mgt_mdt 10.211.55.6 Lustre Server OST0 mount-lustre:/ost0,mount-ldiskfs 一个是/mnt/lustre/dir1默认是布局；另外一个是/mnt/lustre/dir2设置stripe_count=3,stripe_size=1M.然后分别在2个文件夹下拷贝大于1M的文件，然后在MDT 端分析 O目录说明 // MGT和MDT共享一个磁盘，/mnt/mgt_mdt下的O是数据目录，其中1 是未命名log,10是命名log,200000003 是本地命令对象用于lustre内部使用[root lustre所有的客户端看到的fs的统一视图 // [root@CentOS-Lustre-Server /mnt/mgt_mdt/ROOT]$ tree ./ ./ ├── dir1 │ └──
1.3K20编辑于 2022-08-17 - 来自专栏存储内核技术交流
Lustre部署
--backfstype=zfs --reformat mdspool/mdt /dev/sdg mount.lustre mdspool/mdt /lustre/mdt/ //节点2 wipefs -a /dev/sdg mkdir -p /lustre/mdt mkfs.lustre --fsname=fs00 --mgs --mdt --index=2 --backfstype=zfs --reformat mdspool/mdt /dev/sdg mount.lustre mdspool/mdt /lustre/mdt/ //节点3 wipefs -a /dev/sdg mkdir -p /lustre/mdt mkfs.lustre --fsname=fs00 --mgs --mdt --index=3 --backfstype=zfs --reformat mdspool /mdt /dev/sdg mount.lustre mdspool/mdt /lustre/mdt/ 配置三个节点的ost(每台机器2个磁盘) //每个节点使用zfs作为ost底层的存储 //节点
2.4K60编辑于 2022-08-17 - 来自专栏存储内核技术交流
lustre中ost选择策略分析
-mdtlov.qos_threshold_rr=25% // 在mds节点上查看 [root@CentOS-Lustre-MDS_MGS ~]$ lctl get_param lod.bigfs-MDT ~]$ lctl set_param lod.bigfs-MDT*.qos_prio_free=85 lod.bigfs-MDT0000-mdtlov.qos_prio_free=85 基于权重的ost .reserved_mb_low=61 osp.bigfs-OST0001-osc-MDT0000.reserved_mb_low=61 // 在mds节点上设置 reserved_mb_low [root -osc-MDT0000.reserved_mb_high=123 // 在mds节点上设置 reserved_mb_high [root@CentOS-Lustre-MDS_MGS ~]$ lctl ost和mdt的容量差，权重和rr算法也适合后端的mdt #define LOV_QOS_DEF_THRESHOLD_RR_PCT 17 #define LMV_QOS_DEF_THRESHOLD_RR_PCT
1.1K31编辑于 2022-08-17 - 来自专栏存储内核技术交流
centos7源码编译和安装lustre
$ mkfs.lustre --fsname=samplefs --mgs --mdt --index=0 --backfstype=zfs --reformat pool/mdt /dev/sdb $ mount.lustre pool/mdt /mdt // 检查mgs/mds内核进程 $ ps -ef|grep mgs root 2541 2 0 22:38 ? 00:00:00 [mdt00_000] root 2550 2 0 22:38 ? 00:00:00 [mdt00_001] root 2551 2 0 22:38 ? 00:00:00 [mdt00_002] root 2552 2 0 22:38 ?
2.4K30编辑于 2022-08-17 - 来自专栏存储内核技术交流
lustre集群中一致校验
OST上的object的parent FID用来重构MDT上的MDT-Object上的LOV的扩展属性 // 这里的fid就是以XATTR_NAME_FID属性保存了父MDT-object信息 [root 针对MDT上除了LFSCK引擎同时也有一个辅助引擎，MDT引擎加载对象和输入进行pileline输入，然后辅助引擎通过读取pipeline的输出对对象进行一致性的校验。 MDT上的object通过LOV EA来引用stripes object(ost上的objects).每个ost上对象通过parent FID来引用mdt-obejct.在MDT上lfsck会去检验所有的 mdt-object的lov的扩展属性。 遍历MDT内命名空间，检查每个MDT-Object是否引用了link EA.保证每个entry都在正确的MDT-object上。
1.1K10编辑于 2022-08-17 - 来自专栏媒矿工厂
ICCV2023 | Masked Diffusion Transformer： 增强扩散模型对上下文关系的理解
我们的MDT可以从不完整的上下文输入中重建图像的完整信息，从而使其能够学习图像标记之间的相关关系。 MDT引入了一个蒙面潜在建模方案，专门为基于Transformer的DPMs设计，以明确增强上下文学习能力并改进图像语义之间的关联关系学习。MDT在潜在空间中进行扩散过程以节省计算成本。 MDT可以从其上下文不完整的输入中重建图像的完整信息，学习图像语义之间的关联关系。 通过这种掩码潜在建模方案，我们的MDT可以从其上下文不完整的输入中重建图像的完整信息，学习图像语义之间的关联关系。 这种比较显示了MDT相对于DiT的优越关系建模和更快的学习能力。 图1 实验结果表明，MDT在图像合成任务上表现出更高的性能，大大改善了训练过程中的效率。 这表明MDT在学习图像语义的相关关系方面具有卓越的学习能力。 在接下来的部分，我们将介绍MDT的两个关键组件：1) 潜在掩蔽操作，和2) 不对称掩蔽扩散变换器。
3.3K40编辑于 2023-11-03
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号