sean10

sean10reborn@gmail.com

主页
Archives
Tags
Categories
Github

Tags: 数据工程

Tags: 数据工程

全部 Ceph¹²⁹⁰ 分布式存储⁷⁴⁶ 自动化运维¹ OVH¹ 软件定义存储¹⁰ 社区动态⁴⁴ 技术发展⁴³ Calamari⁷ Ramona¹ Storage Management⁹ Ceph Monitoring³ Ceph 性能调优¹ 内存分配器² Jemalloc¹ TCMalloc² 性能测试³⁰ RBD⁵⁴ 块存储⁵⁸ 快照⁴³ 克隆⁴¹ 迁移¹ 虚拟化⁴² OpenStack⁴¹ 高可用性¹³⁴ Rados¹³ CRUSH算法¹¹² CephFS⁹⁷ 分布式文件系统⁵ POSIX 兼容¹ Ceph 存储系统⁴ Ceph 技术讲座¹ RGW¹⁶⁵ 对象存储⁸³ S3² Swift¹ 位置组¹ CRUSH 算法²⁹ 故障恢复⁴ 参考架构¹ 性能优化²⁴¹ 存储设计¹ 可伸缩性⁵⁷ 自动化构建² Jenkins¹⁰ Docker³⁶ Kubernetes⁸⁶ BlueStore⁷⁰ OSD⁹⁵ RocksDB⁸⁴ 高性能数据库¹ 容器化³² 自动化部署⁶ Blue Store¹⁹ Messenger 2 协议¹ 缓存设计¹ 安全性¹⁰ SEFS² Ceph 存储集群¹ CephFS 集成¹ Ceph性能优化¹⁴ RBD性能测试¹ ZetaScale存储性能测试¹ IO路径性能分析¹ Ceph性能追踪¹ Bluestore³⁵ 存储后端¹ OpenATTIC¹ 存储管理² RESTful API⁵⁰ _MONITORING_¹ 自动化⁵⁴ 开发者月度会议¹ 网络加密¹ 同步消息协议¹ 发布流程² Paddle 和 Pulpito¹ Lua 支持¹ Ceph Jel¹ Ceph基准测试⁴ Ceph基准测试工具¹ Ceph性能测试³ Ceph性能分析³ Ceph存储系统⁸ 社区合作¹ Developer Meeting¹ Distributed Storage²⁵⁹ Memory Pool Allocator¹ Quality of Service¹ Performance Optimization⁵⁹ Memory Management³ 可扩展性⁶⁰ 文件系统存储⁵⁵ 一致性⁴⁹ 去中心化⁴⁹ 性能⁴⁸ BlueFS²⁷ MON⁴⁷ MDS⁵² PG⁴⁸ RADOS⁵⁹ librados⁴⁸ libcephfs⁴⁵ cephfs⁴⁴ rbd⁴⁴ radosgw⁴⁴ 认证⁴⁰ 授权⁴³ 加密⁴⁵ 损坏纠正码⁷ 复制⁴¹ 虚拟化存储³ iSCSI²⁹ Fibre Channel²⁶ NFS³⁸ CIFS²⁶ POSIX²⁷ 监控³⁵ 仪表盘¹ 管理²³ 集成²⁷ 云计算⁵⁵ AWS³⁷ Azure³⁶ Google Cloud³⁶ 混合云³⁴ 多云³¹ 存储集群⁴⁴ 节点²⁹ 磁盘²⁰ SSD³⁶ HDD³² JBOD³³ SAN³³ NAS³³ 网络²⁹ 拓扑¹⁷ 失败域¹² 恢复²⁹ 弹性²⁹ 负载均衡³⁰ 缓存³¹ 压缩²⁹ 数据去重⁹ 层次存储¹ 性能调优¹⁹ 基准测试³⁰ 验证³⁰ 编码优化² 页面统计¹ Pull Requests⁵ 测试与监控¹ ASIC Messenger¹ FIO¹ CBT⁵ 监控框架¹ 内存管理¹⁶ 社区会议¹ 会议纪要²⁰ 蓝存储⁵ Pull Request⁹ REST API² 配置选项注释¹ Luminous 版本¹ 管理和自动化¹ 代码审查³⁷ 问题解决⁵ 可用性⁴ Bluefs¹⁸ Rocksdb¹⁸ 损坏编码⁵ 虚拟化配置¹ 仪表板²⁴ 管理自动化¹ 跨云¹ 存储¹⁷ 网络拓扑¹² 去重²⁰ 分层¹⁹ 测试⁶⁰ 测试结果¹ 功能开发⁵ 大数据分析¹ Luxio¹ 数据访问加速¹ Ceph 开发入门¹ 源代码获取¹ bug修复¹ 单元测试⁸ 元数据缓存¹ BDPR¹ 存储系统⁷ Rust 绑定¹ 应用开发¹ 数据恢复⁴ 消息传递³ 锁优化² CRC计算¹ 异步化² 调试² Memory Leak² distributed storage²¹ CRUSH algorithm¹² high availability⁵ scalability⁶ object storage⁶ block storage³ file system storage³ consistency³ decentralization³ performance⁵ ARM² 开源¹² CRUSH Algorithm²¹ High Availability³⁴ Scalability²⁹ SOFI Fest Shell¹ Backfill 优化¹ 健康检查² LRU缓存¹ 内存优化² 缓存策略⁶ 权限控制² CSI⁴ 文件系统⁴ 测试流程² Teuthology⁹ 自动化测试¹² 调试与日志¹ Messenger协议¹ 蓝店存储² NVMe¹³ 蓝店（Blue Store）¹ 测试策略² 容器化环境¹ Tautology² Ceph性能监控¹ SeaStar兼容性¹ 性能计数器⁴ 集群监控⁴ 配置更新¹ 集群选举¹ MonClient¹ Monitor³ Peering Process¹ Consistency⁵ code review¹ Ceph object store tool¹ 纠删码⁶ 失效域⁶ 性能调整¹⁰ 可用性改进² 健康状态¹ 集群管理⁷ 测试和发布流程¹ PG 日志² Orchestrator⁶³ Python模块¹ 设备故障预测¹ 开源数据集¹ 驱动器故障检测¹ Ceph性能¹³ Blue Store Alligator¹ 异步信使¹ 统计信息收集¹ 蓝鲸文件系统重构¹ 性能改进² 代码编译问题¹ Seastar³ Dashboard¹⁶ OpenStack Swift¹ Ceph Messenger¹ Cluster Replication¹ 任务分组¹ 微操作优化¹ 优化³ 故障转移³ Rook⁷² Ceph存储后端¹ 异步读取¹ CRC缓存¹ OST异步化¹ 智能监控¹ Ceph 测试² Ceph RGW⁹ Ceph 安全仪表板¹ Redmine¹ Performance¹⁵ Page Faults¹ Telltale¹ 测试框架³ 测试覆盖² 智能调度¹ PG日志³ VPP集成¹ Specter漏洞¹ 集成测试⁴ 依赖问题¹ 开发环境² Memory Allocator² Optimization⁴ 元数据管理¹ Transaction Management¹ 开发者会议⁵ 存储功能¹ 配置管理³ 内存分配器优化¹ 性能提升⁴ Cache Rebalancing¹ Lock Implementation¹ 开发进展³ 技术讨论⁴ 行动计划³ Cache Auto¹ Tuning¹ Logging¹ OSDevice (OSD)¹ PG (Placement Group)¹ Radosgw⁴ Kubernetes 存储编排器¹ 数据存储³ 共享缓存² 持久性缓存¹ Memory Usage¹ 开发⁷ 代码重构¹⁰ Crimson消息框架¹ Summer of Code¹ PR 检查¹ Toothology¹ 系统管理¹ 代码开发¹ 讨论会议¹ 虚拟消息传递¹ Orchestration²⁵ 技术进展¹ 加密协议¹ OSD架构¹ SSH Orchestrator⁴ CLI³ DeepSea² Object Storage²¹ Block Storage⁷ File System Storage⁵ Decentralization⁴ Authentication⁴ Authorization³ Encryption⁶ Erasure Coding¹⁶ Replication³ Snapshots³ Clones³ Thin Provisioning³ Monitoring¹⁴ Management³ Automation¹⁴ Integration⁴ Containerization¹⁰ Virtualization⁴ Cloud Computing¹⁶ Hybrid Cloud³ Multi¹⁸ cloud⁴ Storage Cluster¹⁵ Node³ Disk³ Network³ Topology³ Failure Domain³ Recovery³ Resilience³ Load Balancing⁴ Caching³ Compression³ Deduplication⁴ Tiering³ Performance Tuning⁴ Benchmarking⁸ Testing⁶ Validation³ Ceph集群操作¹ Recovery State Machine¹ Ceph消息传递性能优化¹ Ceph消息传递协议¹ Ceph集群状态监控¹ Python 3 迁移³ Coverity¹ 蓝图存储⁵ 自动调优² 自动修复¹ 副本池¹ 平衡器模式¹ 崩溃记录¹ 媒体错误处理¹ TLS¹ LSM 储存库¹ Ceph文档更新² 文档协作¹ pull request¹ 自动化脚本¹ PR更新¹ 库优化¹ Ceph Orchestration² Tipsy Orchestrator¹ Deep¹ sea Orchestrator¹ Ceph Storage⁹ 社区¹ Crimson OSD⁶ Crimson SeaStor¹ OSD Weekly Meeting¹ Performance Testing¹⁰ RGW性能优化¹ Crimson 存储性能¹ 性能瓶颈¹ 架构差异¹ CI³ 自动化升级² 面对面会议¹ 巴塞罗那¹ 测试环境¹ Python版本支持² Nautilus³ Barcelona 会议¹ Crimson¹⁸ 稳定性和可靠性¹ 自动发布¹ 升级² 升级指南¹ Interoperability¹ API³ 烟雾测试¹ Request Workflow¹ ORchestration³ Bug Fixes⁴ Security⁸ Development³ Cephalocon¹ Monitor Election¹ Data Center Testing¹ Memory Target Setting¹ 异常处理² 调试工具³ 功能改进² Storage¹³ site Replication¹ performance testing² POSIX interface¹ DPDK¹ Ceph测试⁸ 部署工具¹ KVM¹ Pull Request管理¹ TLS配置¹ 会议安排² orchestrator¹ 云迁移¹ 快照管理¹ 灾难恢复⁶ 降级支持¹ 升级降级策略¹ 测试方案¹ 拉取请求² 硬件分配¹ 文档承包商¹ 用户文档¹ Ceph 项目¹ 社区贡献² 用户体验⁴ 升级降级¹ smoke测试¹ 测试用例¹ 多操作系统测试¹ Crimson Flavor¹ Rook Traverse¹ ESS Afton¹ Upgrade Testing¹ Resource Allocation¹ Deployment Automation¹ Storage Class Device Set¹ StatefulSet¹ bluestore¹² bluefs¹¹ rocksdb¹¹ 多点同步¹ IO环境引擎¹ 数据缓存¹ AutoTuning¹ RocksDB数据布局¹ 代码布局¹ API扩展¹ Sister API¹ Rook Toolkit¹ Ceph Orchestrator¹³ CI/CD¹⁴ 垃圾回收³ 安全模式¹ GitHub³ Python代码统一¹ API生成¹ Drive Groups² Dashboard Integration¹ 文档改进¹⁰ 开发者体验¹ Crimson存储引擎¹ 错误处理³ Ceph 驱动器组¹ Rook 项目² Ceph 集成² Orchestrator 性能¹ 驱动器组元描述¹ 存储卷¹ 动态存储¹ 纠错码⁶ 瘦分配⁹ 编排¹⁵ 故障域¹¹ BlueStar¹ Rook Module¹ CRimsonOS¹ 兼容性¹ 贡献与沟通¹ 开源项目⁵ 贡献者引导¹ 扩展性⁵ Orchestrators¹ Storage Orchestration³ PR Review⁴ Crimson 项目⁹ 开源软件² 文档编写³ 社区管理¹ 存储优化¹⁴ Alec尺寸调整¹ OSD Replacement¹ 线程问题¹ UNIX域套接字¹ 代码合并¹ 研发会议² 资源配置¹ BlueStore优化¹ QoS功能¹ RBD兼容性¹ 高性能计算⁴ Rook模块¹ API设计¹ OSD替换¹ 驱动器组¹ Cubanetosca¹ 文档结构³ 社区协作⁴ Librados⁴ Libcephfs³ Cephfs⁴ Rbd³ 消息编码³ GitHub API¹ Ceph存储⁶ Jenkins集成¹ 代码调试¹ 测试问题¹ FFS架构¹ 用户理解¹ Device Management¹ Completion Implementation¹ Dashboard Locking Mechanism¹ Meeting Summary³ Ceph分布式存储⁴ Kubernetes集成³ Kubernets事件¹ Cuban客户端代码对象¹ 纠错编码⁴ 项目管理⁶ Rook CI¹ Testing Framework² 集群¹ 自动恢复¹ 社区参与³ 持续集成⁵ 会议时间调整¹ 测试与验证² Storage Engine³ 异步配置¹ 外部集群¹ 翻译¹ Docker 镜像¹ Crimson Project² Error Handling² Python 3³ SSH 协排¹ sage daemon¹ Inventory¹ Upgrade² Configuration² F2FS文件系统¹ 代码优化³ Sister项目¹ Open Channel SSD¹ Zoned Native Storage¹ 系统监控¹ 软件集成² 项目进展¹ 版本发布¹ 小对象存储优化¹ 瞬时挂载¹ 分布式重复数据删除¹ 崩溃报告² CI/CD流程¹ 会议时间¹ Rook项目² 社区讨论¹ 瘦配置¹ 等级存储² POSIX Stack¹ Native Stack¹ PG Autoscaler¹ Dashboard PR¹ Mimic 项目¹ Storage Performance⁶ Translation¹ 软件开发⁵ Ceph文档¹ Sphinx模板¹ 网站更新¹ 社区日历¹ HPN¹ 用户空间驱动程序² 内核性能¹ Code Review⁵ Test Framework¹ 上线测试¹ 蓝鲸存储⁴ 多进程设计¹ 性能问题¹ 线程池² parallel SSH¹ pssh¹ 持久内存¹ 自动标量¹ System Unit¹ 文档更新¹² 版本迁移¹ 新设计方案¹ Storage Design¹ Ceph Manager⁵ NASA¹ 数据管理³ 存储性能⁵ NooBaa¹ Ceph社区动态¹ 测试进展¹ Pull Request 测试流程¹ Rook Orchestrator¹ Ceph版本更新¹ 文档审查² Rados命令¹ 文档管理³ OSD Management¹ B+树² 异步版本¹ B+树实现¹ 事务处理² 写放大³ 自动缩放³ 版本升级² 安全更新¹ Jenkins流程¹ openSUSE支持¹ 科学计算³ 社区活动³ 用户组会议¹ Ceph 文档更新¹ PG 修复¹ 开发者指南⁴ 文档请求热线¹ 分区自动缩放¹ 空间放大¹ Crimson 引擎¹ Code Generation¹ CI系统改进¹ 代码逻辑简化¹ Python 客户端库¹ PG修复¹ IO Benchmark¹ 监控系统¹ 用户启用¹ 版本特定更改¹ 问题修复² IO 500¹ Octopus版本¹ 集群部署² 硬盘⁴ 分级存储¹ 代码架构¹ 状态图¹ NFS Integration¹ Project Updates¹ 测试改进² Ceph CI² 擦除编码³ Ceph 性能² IO 500 测试² 内存泄漏² 数据压缩¹ SAP EWM¹ integration testing¹ 薄分配⁵ Availability¹ 开发环境优化¹ Ceph文档改进⁴ 文档组织¹ 团队协作² 搜索功能¹ Def ADM¹ PR审核¹ 开发与调试¹ 身份验证⁴ 损坏码⁴ Google Season of Docs² Ceph网站改进¹ 信息检索倡议¹ Ceph社区¹⁷ Daily Test Suite¹ 优雅关机¹ 社区发展⁴ ADM¹ CephADM¹ CLI重构¹ 管理与自动化¹ 分支管理¹ CBT工具³ B3节点¹ layout.h¹ AVX2编码¹ 内存增长¹ OSD性能¹ Upgrade Strategy¹ Documentation⁶ Configuration Optimization² 故障与解决方案¹ Recovery Mechanism¹ Code Formatting¹ Octopus 版本² MeerKAT¹ 射电望远镜¹ 分布式存储系统¹ 管理模块¹ DevOps⁷ 粒子物理¹ CERN⁹ Crimson Messenger² PubSub¹ 云存储⁵ Ceph用户体验¹ 初学者教程¹ 文档优化¹ 用户支持¹ PMEM¹ hardware offloading¹ performance optimization³ Real-World Workloads¹ Data Analysis⁵ 性能分析⁶ VMware集成¹ HPC集群¹ Deep Learning¹ Storage Optimization²⁸ Data Processing² AI Performance¹ AI应用¹ 监控内存目标¹ 遥测³ QoS技术¹ SEF对象存储¹ 质量服务² Archive Storage¹ Inditex¹ Storage Architecture² ARM架构² CI增强¹ UADK集成¹ Asynchronous IO¹ Storage Networking² 固件更新¹ 故障处理² 用户行为管理¹ CephFS备份¹ Ceph存储解决方案¹ 备份策略² Cinder¹ Cloud Native³ UADK¹ Security Acceleration¹ SSD性能¹ 蓝店性能¹ Enterprise Email System¹ Deutsche Telekom¹ 故障排除⁶ Data Center³ Storage Solutions⁵ Brazil¹ FSCRYPT¹ User Space Implementation¹ Storage Systems⁴ Open Source¹⁴ Ceph对象存储² 数据管道¹ 数据工程¹ 事件驱动架构¹ 无服务器框架¹ CMake¹ User Interface⁴ API Integration¹ I/O操作¹ Paxos² Work Queue¹ 冷存储池¹ 数据移动¹ 冗余性¹ PG温映射¹ PG强制映射¹ Silo架构¹ scrub⁴ repair¹ IO优先级¹ Scrub⁵ SnapTrim² 本地可修复代码¹ Erasure Code³ Kinetic Drive¹ Storage Backend¹ RDMA更新¹ Firefly升级¹ IO链式操作¹ 开发流程⁴ Localization² Gettext¹ Wiki页面建设¹ 资源整合¹ Ceph资源¹ Ceph开发⁴ 多站点复制³ 文件创建¹ 对象级回溯¹ 多实例¹ Rados集群¹ 一致性检查² forward scrub¹ 数据完整性¹ Kernel RBD Client¹ Copy² on² read¹ Clone¹ Object Map¹ Storage Efficiency⁴ Database Performance¹ bucket index scalability¹ storage systems¹ Ceph测试工具¹ Ceph特性测试¹ RDMA⁴ Accelio² Messenger² 系统追踪¹ 导出/导入¹ 分片² 指纹验证¹ Buffer Encoding¹ checksums¹ storage reliability¹ Calamari API¹ Community Involvement¹ Clustered Target¹ SCSI¹ Object Versioning¹ Object Snapshots¹ 冷存储¹ 数据持久性² Bucket Index Scalability¹ 多区域¹ Checksums¹ Data Integrity⁴ AngularJS¹ Hadoop集成¹ 测试与优化¹ Forward Scrub¹ Reverse Scrub¹ Metadata Integrity¹ Scrub and Repair¹ 存储修复¹ IO Prioritization¹ OSD Tiering¹ Fine¹ Grained Promotion¹ 代码改进¹ Cache Control¹ Object Data¹ IO Hints¹ Cache Tier² R/W Latency¹ Read¹ Kernel Client¹ 事务编码¹ 数据库优化² Shingled Erasure Code (Shake)¹ Data Recovery⁴ Accelerator Integration¹ XIO Protocol¹ CFS配额¹ 子树配额¹ 子卷¹ librbd³ 独占锁¹ 对象映射¹ 共享标志¹ API Development¹ Container Storage² 项目治理¹ 用户委员会¹ 自我治理¹ 插件系统¹ 版本控制⁷ C++接口¹ C接口¹ Manila¹ tenancy³ OpenStack Integration¹ unified work queue¹ 两阶段提交³ 数据一致性⁷ Storage clustering¹ Distributed storage³ SCSI Target¹ Repair² Multitenancy² Keystone² Async Mirroring¹ Data Replication⁴ Disaster Recovery⁴ dm¹ crypt¹ 密钥管理¹ Lux¹ 监控器¹ Active¹ Active 架构¹ 同步机制¹ Hit Set¹ Proxy Mechanism¹ Data Storage Optimization¹ LMDB¹ SEF² Storage Efficiency Framework¹ COSBench¹ Tracepoint¹ Ceph性能基准¹ Rados Gateway⁴ StorageCluster¹ 数据对等连接¹ 尾部延迟¹ I/O优化¹ 分层存储⁴ 动态数据迁移¹ 插件接口¹ Hadoop Integration¹ Kernel¹ 缓存层优化¹ 缓存驱逐算法¹ 策略引擎¹ 硬件存储¹ LibRBD² 元数据机制¹ 配置灵活性¹ object transaction¹ OSD transaction¹ Transaction coordination¹ 开发任务¹ CephFS开发² fsck¹ 文件系统检查¹ 元数据修复¹ Ceph 安全¹ 暴力破解保护¹ 黑名单机制¹ 认证安全¹ 日志记录³ Apache Mesos¹ Seth Mesos Framework¹ Hadoop² 消息优先级¹ Token Bucket¹ PD Cream¹ 小对象存储¹ Ceph性能回归¹ 自动化性能测试¹ Ceph测试框架² 内存映射¹ 非易失性存储¹ 非功能性测试¹ 性能评估³ Quorum¹ Passive Monitor¹ Brain Split¹ 对等过程¹ 日志一致性¹ QoS⁶ I/O Scheduler¹ 元数据日志模式¹ 低延迟² 事务支持¹ 多对象事务¹ RBD Journal Blueprint¹ Ceph 分布式存储³ RBD 镜像复制² 跨数据中心¹ Ceph RBD³ RADOS Block Device¹ site Sync¹ Multisite Configuration¹ 读取延迟¹ 一致性模型¹ 数据保护² Pacific版本² PG balancer¹ IOHints¹ CephFS Optimization¹ 快照复制¹ 数据修复¹ Ceph Pacific¹ Cephadm¹³ C⁶ Store⁵ Quincy Version¹ Reef Version¹ Ceph 治理¹ Ceph Dashboard⁷ Ceph 开发² 多集群监控² 用户反馈⁴ site¹ AVL分配器³ RADOS Gateway³ Ceph 文档¹ Ceph 文档改进¹ Ceph 社区² Ceph 发展¹ oF⁵ Gateway¹ Cluster Upgrade¹ 蓝店¹ 配置分析¹ Subdeveloper Planning Summit¹ Data Corruption² 物理存储³ 服务器管理¹ E优化¹ RadosGW² Seth项目¹ Cluster¹ Squid¹ 功能增强¹ S3 Select³ Resharding² 多站点² Zipper¹ Telemetry⁸ Storage Metrics¹ Ceph Stretch Mode¹ OSD利用率管理¹ upmap balancer¹ 群集平衡¹ 数据分布² 镜像功能¹ 数据复制² 状态机² Personal Storage¹ Home Cloud¹ Storage Solution¹ Mirroring¹ Demurrer Daemon¹ Snapshot Synchronization¹ MDS Monitoring¹ Ceph Architecture¹ 内核客户端¹ Journal¹ Metadata² MDS Locker² 代码解析¹ Path traversal¹ CephFS 数据结构¹ CephFS 代码实现¹ 代码分析¹ R¹ Stats¹ scrubbing² file system check¹ k客户端¹ 内核组件¹ 高速存储集群¹ NVMe存储¹ Ceph Days NYC 2024¹ 紧急支持¹ 莫纳什大学¹ 存储解决方案⁷ GitHub Actions¹ 容器存储¹ I/O流程¹ Ceph存储集群¹ Election Mechanism¹ Paxos Algorithm¹ Metadata Servers¹ Ceph Code Walkthrough¹ Bucket Notifications¹ AMQP¹ Kafka³ I/O Flow¹ Kernel Driver¹ SMR¹ Code Optimization¹ 代码实现² Ceph 架构¹ Python 模块¹ CoDel算法¹ dmclock算法¹ 读写一致性¹ 租约机制¹ Librbd¹ 代码走读¹ 快照技术¹ Integration Testing³ Paddles Framework¹ Database Wrapper¹ 瘦化配置¹ Crash Reporting² Observability⁵ RBD 测试¹ 系统调试¹ Bluestar¹ Sea Star¹ 线程管理² 线程数量限制¹ Automated Testing¹ 测试与调试¹ 缓存管理³ 技术测试¹ Crimson 存储引擎¹ 装饰器¹ 测试验证¹ Code Refactoring¹ 内存数据结构管理¹ 摧毁编码² 瘦 Provisioning¹ 调度¹ 结构测试与修复¹ 垃圾收集² 请求处理流程¹ 智能指针¹ GC修改¹ 自我管理代理¹ 推模型¹ 拉模型¹ 可靠性¹ 架构设计¹ 错误调试¹ 系统指标¹ performance tuning² OSD优化¹ 设备映射器接口¹ 错误报告¹ Scrubbing PR¹ Clang 编译问题¹ 可中断分配器¹ 扩展放置管理器¹ 键值大小限制¹ Crimson项目⁵ MLIS案例分析¹ Extent Placement Manager¹ 裸金属存储¹ software development¹ 错误修复¹ 性能指标¹ 系统更新¹ 设备管理¹ Rook Integration¹ Bug修复⁴ 日志处理² 消息码¹ 数据库² 消除编码¹ authentication¹ authorization¹ encryption² erasure coding¹ replication¹ snapshots¹ clones¹ thin provisioning¹ monitoring¹ dashboard¹ management¹ orchestration¹ automation¹ integration¹ containerization² virtualization¹ cloud computing¹ hybrid cloud¹ multi¹ storage cluster² node¹ disk¹ network¹ topology¹ failure domain¹ recovery² resilience¹ load balancing¹ caching¹ compression¹ deduplication¹ tiering¹ benchmarking¹ testing² validation¹ SeaStore² 构建问题² 故障排查³ 软件构建¹ 开发团队¹ 网络存储² 网络文件系统² 多核messenger¹ 医疗助手PR¹ Albion指针PR¹ MGR¹ 日志级别¹ 池压缩¹ System Failures¹ Build Automation¹ 功能实现¹ Ceph存储引擎¹ 快照与克隆操作¹ 系统设计与优化¹ 代码审查与验证¹ Crimson Suite¹ AArch64¹ Chorus工具¹ Upmap¹ POSIX 文件系统¹ HPC 环境¹ Genomic Research¹ Sage Weil² 存储技术⁴ Flatiron Institute¹ Compute Canada¹ 云服务¹ Seafile¹ 同步与共享¹ Sönke Schippmann¹ High Energy Physics¹ Data Management² Nautilus版本更新¹ 自动化管理¹ openATTIC¹ 高可靠性¹ LHC实验¹ 高吞吐量¹ 数据处理¹ 版本更新² 硬件平台¹ 大科学¹ 容器编排² CephCO¹ SAP² 管理解决方案¹ SSD 性能¹ 备份存储性能提升¹ 存储 consolidation¹ Geo Replication¹ Automation Deployment¹ 安全实践² 加密技术¹ Apache Arrow¹ Data Query Optimization¹ S3 Storage¹ Ceph微云¹ Ceph管理¹ Ceph部署² Ceph架构² Ceph集群管理⁴ Ceph版本升级¹ Ceph存储服务¹ oF Recovery¹ System Design¹ deep scrub¹ Deep Scrub¹ Data Consistency³ Storage Mechanism¹ Ceph Storage System¹ Object storage¹ Performance optimization¹ Ceph Days Asia¹ MicroCeph³ Cluster Management³ Snap¹ Ubuntu² 体育数据存储¹ Storage Classes² Lua Scripting⁴ TCO Analysis¹ 数据安全² 存储加固¹ NVMe over Fabrics² IBM³ SQLite¹ 社区更新¹ Bloomberg⁴ Telemetry System¹ Storage Engineering¹ Crimson OST¹ Manager 可扩展性¹ Replicated Writeback Cache (RWD)¹ Dashboard 设计改进¹ 高效追踪¹ 分布式NVMe命名空间¹ 日志分析¹ Prometheus⁸ Alerting¹ OSD Map优化¹ 客户端使用效率¹ 集群隔离¹ Windows支持¹ 薄配额¹ GSoC 实习生项目¹ Ceph 开发者会议¹ Ceph 性能优化² Ceph配置文件¹ EIO问题¹ 大规模集群测试¹ 资源受限环境¹ SMR 驱动器¹ Crimson Update¹ Ceph Store¹ 跟踪系统¹ 自动扩展¹ 指标收集² 管理器¹ 蓝图¹ 日志管理¹ 可观察性¹ Zero Block Detection¹ Performance Counters³ 测试与发布流程¹ 社区生态建设¹ Plugin System² IBM Storage¹ 可访问性¹ Debugging² OpenEuler¹ 审计模块¹ 去重功能¹ 资源消耗¹ 用户调查⁴ 持久化¹ 日志忽略列表¹ Boost JSON¹ S3 测试维护¹ 测试优化¹ Jenkins CI¹ CI测试¹ Clang-Tidy¹ OpenTelemetry² 测试基础设施¹ CephDeveloperSummit¹ Quincy版本³ Trello Backlog¹ Ceph生态系统² 用户界面² 开发计划¹ Developer Summit¹ Quincy⁴ Development Environment¹ 开发者峰会² RADOSGW¹ performance improvement¹ Ceph 文档优化¹ SEO 改进¹ 文档生成自动化¹ 项目实习生¹ Ceph 文档团队¹ Git管理¹ Ceph ATM指南¹ 视频教程¹ API 文档¹ 文档编辑链接¹ 搜索优化¹ 版本间跳转¹ 搜索引擎优化¹ 错误报告流程¹ 项目页面优化¹ 文档开发¹ 开发指南¹ RADOS协议¹ 文档项目¹ 开发者贡献¹ 文档编辑¹ 上游文档¹ 文档¹ Ceph多集群管理¹ Ceph监控² Ceph集群⁷ Gateway Management¹ Ceph Cluster¹ Manager Module¹ 负载均衡器¹ Open Attic¹ UCX¹ 稳定版本发布¹ 版本管理¹ fscrypt¹ transparent encryption¹ Ceph Pacific版本¹ CephFS更新¹ CephFS功能改进¹ 故障案例分析¹ 最佳实践¹ 市场发展¹ 开源社区⁵ Windows服务器集成¹ 社区大使计划¹ Ceph活动组织¹ Ceph用户交流¹ 技术更新¹ RBD镜像¹ CephFS快照¹ Ceph升级² Cephadm更新¹ Pacific 版本² Quincy 版本⁴ RBD Replication¹ OpenStack Cinder¹ Cosbench¹ Storage Testing² Lua² High² Density Commodity Disk Servers¹ Performance Evaluation¹ Intel QLC SSD¹ 成本效益² SSD vs HDD¹ Open Discussion¹ All Flash Storage¹ aarch64¹ Arm64¹ Server¹ Storage Appliance¹ Project Aquarium¹ Ceph Management¹ Pacific¹ krbd¹ 性能比较¹ 客户端¹ 硬件配置¹ GoCeph¹ S3 Bucket Inventory¹ site Support¹ NVMe-over-TCP¹ Storage Gateway² 多站点部署¹ Notification System¹ Enterprise Features¹ 版本兼容性¹ Octopus Release² Feature Planning¹ Scale-Out Storage¹ 管理标签¹ Ceph 管理模块¹ 视频会议字幕翻译² PR审查⁷ Manila团队¹ 虚拟IP¹ Kubernetes 集成¹ 本地存储¹ Regression¹ Systemd¹ SSH³ IPv6² 管理工具⁴ 安全证书管理¹ Secret store¹ Ceph升级流程¹ Ceph计划功能¹ 容器版本管理¹ Saif EDM¹ 管理与运维¹ Upgrade Experience¹ Integration Test¹ Container Images² OSD 移除设计¹ 硬件信息收集¹ 文档整合¹ Ceph配置¹ 配置模板¹ 代码审核¹ 多站点配置² 用户界面设计¹ Technical Discussion¹ 监控工具¹ 升级流程¹ 虚拟IP分配¹ Ganesha² OpenStack集成² NFS模块¹ Self¹ adm Agent¹ Reconciliation Loop¹ Push Model¹ Architecture Improvement¹ Etsy Hosts¹ NFS EdgeRW¹ Rook Manager¹ OpenShift¹ Self Orchestrator¹ 设计文档¹ 工具和流程¹ 技术问题¹ Meeting summary¹ Template management¹ Manager performance¹ LSO¹ 用户集成测试¹ LSO Project¹ Podman¹ 客户端管理¹ LVM¹ TopoLVM¹ Agent² Repaving Oasis¹ Log Aggregation¹ Async SSH¹ 决策¹ ELSO¹ 升级问题¹ 监控堆栈¹ Backport¹ Container Registry Management¹ Manila Integration¹ Ganesha Interaction¹ 大规模集群¹ 配置文件² 控制台¹ Monitoring Stack¹ IPVS¹ Meeting¹ 分级² CPU限制¹ NFS服务¹ OSD内存¹ 超时机制² 离线主机检测¹ 回溯策略¹ Surf Loop¹ 团队变动¹ 回归问题¹ NFS Manager¹ 版本降级¹ NF¹ 系统稳定性² 开发者文档¹ 防火墙管理¹ 监控配置¹ 代码结构¹ vstart¹ 开发工具¹ Service Discovery¹ 镜像选择算法¹ 镜像版本¹ 文档维护¹ 多集群支持¹ 集群命名¹ 未来计划¹ HAProxy¹ 透明代理¹ Ganesha服务¹ 磁盘管理¹ 调试与优化¹ GANESHA¹ Failover¹ 网络过滤¹ 日志配置¹ 二进制重构¹ API测试¹ 监控与安全¹ RGW Multi¹ Site¹ Configuration Automation¹ Open Source Day¹ Compilation¹ 视频编译¹ 代码质量² 存储后端比较² 后端兼容性¹ 依赖管理¹ 文档恢复¹ 编译工作¹ 测试与构建流程¹ Host Maintenance Mode¹ Emergency Flag¹ Maintenance Mode Enhancement¹ Ceph Community² Keepalived¹ Manager¹ Virtual IP¹ OSD Flags¹ 升级过程¹ OpenStack Manila² Ceph NFS服务¹ 迁移计划¹ 超时处理¹ 软件打包¹ 重构⁴ 命名规范¹ 代码格式化¹ Python Black¹ bufferless¹ 小向量¹ 缓存机制¹ 异步消息传递¹ 调试信息¹ OMAP¹ 异步库¹ PG自动缩放器¹ 缓冲区优化¹ 编码基础设施优化¹ OSD 设计¹ Sharding¹ 跨核心通信¹ 内存分配² 自动压缩¹ 研究论文¹ 压缩测试¹ 拓扑结构¹ 数据结构³ Intel合作¹ Deadlock¹ Cache Optimization¹ 数据收集¹ FFS改进¹ OSD内存目标¹ TC Malloc¹ 流控制¹ CPU分区¹ SMR存储技术¹ 蓝店 (BlueStore)¹ 回滚¹ 存储池¹ 开发进度¹ Crimson性能优化¹ 小对象存储方案¹ IOU Ring¹ Linux存储栈¹ SPDK¹ I/O调度¹ 库存管理¹ 构建时间¹ 快速关闭¹ 客户端请求大小¹ 稳定性¹ PR 审查¹ FIO测试¹ Scrub 优化¹ 缓存技术¹ Opencast¹ MClock¹ PR¹ Ford合作¹ Snapshot Mapper¹ Arbitrary Mirror¹ Snapmapper¹ Snap Mapper¹ 博客文章¹ Tombstone Management¹ PR 讨论¹ 协作开发¹ Shared Blob¹ RBD Mirroring¹ PRS¹ Seagate Motor¹ Deos² 自动化工具¹ 删除范围¹ Database Optimization¹ 研究讨论¹ 延迟问题¹ 写放大问题¹ 蓝店缓冲IO¹ HTTP 3¹ 集群配置¹ Snappy库¹ RBD性能¹ Elastic Shared Blobs¹ Ceph性能调优¹ China Mobile¹ 质量分级¹ 资源分配¹ 调度算法¹ QoS Optimization¹ MClock Algorithm¹ DPU¹ Refactoring⁶ part Uploads¹ 模块化² 代码清理¹ 多对象删除¹ Object Lambda¹ 配置变量¹ 测试和重构¹ 复制可靠性¹ 一致性保证¹ C++20¹ 软件重构² 同步策略² Code Analysis¹ Site Synchronization¹ S3代理¹ Zipper API¹ IAM账户功能¹ 复制状态头设计¹ Kafka客户端库变更¹ Cloud Transition¹ SSL兼容性¹ 测试覆盖率¹ 多部分上传修复¹ 归档区域¹ 配额管理² GitHub 2FA¹ 删除竞赛问题¹ 解决方案讨论¹ 跟踪技术² Config Variables¹ Site Projects¹ 多站点测试¹ 字符串优化¹ 通知重试清理¹ MD5优化¹ E¹ Tag计算¹ 多重Zipper后端¹ OLH修复¹ 通知重试机制¹ RGW重构⁵ 存储桶扩展¹ Lua包重载¹ 异步请求¹ 线程池优化¹ Neo¹ rados迁移¹ AWS SNS¹ 主题策略¹ 多站点通知复制¹ SNS 主题策略¹ 持久通知性能¹ IAM¹ 账户管理¹ 生命周期处理¹ Data Logging¹ 数据模型¹ 配置初始化¹ librdkafka¹ Bucket Notification¹ Site Support¹ Lifecycle Management³ Role Ownership¹ 通知系统² HTTP通信优化¹ Lua集成¹ LDAP弃用¹ Topic 授权¹ Topic 迁移¹ 持久化通知¹ 存储重构¹ IAM策略¹ Bucket 日志¹ 云恢复¹ 日志记录标准化¹ Ceph版本发布¹ 多区域复制² 加密对象复制¹ 索引存储优化¹ Bucket Sync¹ Keystone Cache¹ Multi-Part Upload¹ 通知同步¹ 并行重分片¹ 协程¹ 向量数据库¹ 元数据同步¹ S3接口¹ 特性跟踪¹ 安全令牌服务¹ 开发透明度¹ 竞态条件¹ 权限管理¹ Distributed System¹ COE¹ Feature Development¹ 时间戳精度¹ 数据损坏修复¹ Ceph用户组¹ 故障分析¹ 升级与部署¹ Cloud Storage³ S3网关¹ 科学工作组¹ 硬件问题¹ 软件升级¹ 升级部署¹ 硬件与部署¹ DigitalOcean² 小型集群² 多数据中心¹ Lua scripting¹ NATS¹ Storage notifications¹ Open source¹ Test Automation¹ Error Detection¹ 规模测试¹ Red Hat⁴ Ceph Storage Gateway¹ 边缘计算¹ 视频流¹ OpenCV¹ 持久化桶通知¹ 异步通知¹ Secure Token Service¹ Ceph Rados¹ Storage Security² Data Collection¹ Performance Monitoring² 日志收集¹ PR处理¹ Flake 分析¹ 机器学习¹ 开发讨论¹ Samba Testing¹ IPv6 Support¹ OpenSUSE² 社区反馈¹ Installer Interface¹ Orchestrator Module¹ 内存ECC错误¹ LZ4压缩算法¹ NVM¹ 算法¹ PG Remapper¹ 磁带存储¹ 功能请求¹ S3 Rados Gateway¹ User Group¹ Community Engagement² Ceph Development¹ 用户案例¹ 成功故事¹ EL10¹ RGW快照¹ Crush Map¹ upmap¹ 调查问卷¹ 问卷修订¹ Blender¹ Python¹ NVMe/TCP¹ Envy Me TCP¹ 高性能存储² Open Source Storage¹ 异步恢复¹ 公共云¹ 私有云¹ Scientific Computing¹ Large Clusters¹ Cache Autotuning¹ Linux Kernel¹ Ceph Object Storage¹ Geo¹ Redundancy¹ Client Notifications¹ Windows集成¹ 开源技术² Ceph源代码结构¹ Ceph组件² Ceph 用户反馈¹ 用户开发会议¹ SUSE¹ 云原生¹ Cloud Solutions¹ QLC SSD¹ Conditional Tracing¹ System Monitoring¹ CRC¹ 异步编程² Storage Scalability¹ 瘦省配额¹ 演示¹ Ceph 配置¹ OSD 优化¹ 内存存储优化¹ RocksDB 集成¹ 内存复制¹ 同步问题¹ 连接管理¹ 消息传递机制² ZooKeeper¹ Crimson Seastar¹ segment fault¹ system allocator¹ ninja命令¹ GDB PMP¹ wall clock¹ Crimson消息传递器¹ D4N缓存¹ 集群维护¹ Salt¹ Data Encryption² Dell¹ Data Security¹ All² Flash Storage² Distract¹ Performance Computing¹ Temporary Data Storage¹ HPC Cluster¹ Squid版本¹ 薄存卷¹ 磁盘摘要¹ 自动节点分割（ANS）¹ cluster management¹ Email Storage¹ Harvey Sense¹ Near¹ Storage Pool¹ Aggregate Module¹ Tracing¹ Scale-Out¹ Server-Side Encryption¹ Client-Side Encryption¹ 数据冗余² 多地域复制¹ system architecture¹ Rook Operator¹ Tombstones¹ I/O Performance¹ MDS Scalability¹ 存储架构³ 限制与挑战¹ Ceph集群设计¹ Ceph运维² Ceph-Ansible¹ 基准测试工具¹ star框架¹ Global Scale¹ Storage Protocols¹ NVMe-oF¹ Developer¹ Fault Recovery¹ System Optimization¹ 集群健康¹ medic¹ Somatic工具¹ Ceph RBD镜像¹ 异步复制¹ 地理冗余¹ 环境影响¹ 财务优化¹ 可持续发展¹ 数据中心¹ 监控与告警¹ Data Distribution¹ Proxmox¹ Hyperconvergence¹ Storage Infrastructure¹ Open-source¹ 软件定义存储 (SDFS)¹ Sibench工具¹ QAT¹ Intel¹ Business Continuity¹ CSI (Container Storage Interface)¹ Live Migration¹ Image Import¹ Instant Restore¹ 监控优化¹ 网络监控¹ 健康警报¹ ansible¹ 存储集群管理¹ S3 API³ 开发者问答¹ ZTE¹ 软件工程¹ Zoned Storage¹ Data Infrastructure¹ SMR Technology¹ Ceph社区发展¹ 新技术趋势¹ 产品发布¹ 未来规划¹ Foundation Management¹ 会议² Data Storage² 弹性存储¹ 开源存储¹ 开源参与¹ Ceph技术更新¹ Community Development¹ Hardware & Software Integration¹ Open Source Community¹ 学术研究¹ Swisscom¹ SoftIron¹ 硬件加速¹ Storage Technology² Research and Development¹ Ceph功能¹ 企业应用¹ 开发者¹ Ceph技术交流¹ Ceph会议日程¹ 服务器解决方案¹ Ceph Octopus¹ Ceph conference¹ Cloud computing¹ Storage technologies¹ 同步复制¹ 状态应用¹ 在线学习¹ City Cloud Academy¹ Open EDX¹ 日志恢复¹ Snapshot¹ based Mirroring¹ 硬件选型¹ Tape Archiving¹ Data Storage Efficiency¹ Ingress Control¹ Service Mesh¹ 天文学数据存储¹ 互连技术¹ 网络扩展¹ Messenger V2¹ Wire Protocol¹ 简化部署¹ Distributed Systems¹ AI/ML¹ Data Pipeline¹ HDFS¹ Real-time Streaming¹ Centralized Logging¹ Grafana¹ 持续交付¹ over¹ Fabrics¹ Workload Balancer¹ PG间接层¹ 读平衡器¹ 算法改进¹ Provisioning¹ 对象WORM功能¹ Management UI¹ Parallel Processing¹ Scatter/Gather Algorithm¹ Crimson 与 Seastar¹ LSE 技术应用¹ 多工作负载平衡¹ CPU开销¹ Ceph多站点存储¹ High Throughput¹ Particle Physics¹ IO Optimization¹ AI & ML Workloads¹ RGW Optimization¹ Storage Class¹ 红帽¹ QoS平台¹ 治理结构¹ bandwidth control¹ dmClock¹ Public Cloud¹ Cloud Storage Optimization¹ Cloud Platform¹ FS/RGW¹ 瓶颈识别¹ 分布式追踪¹ 可视化技术¹ 中小型数据中心¹ 实际应用案例¹ MDS QoS Scheduling¹ Static¹ Dynamic Subtree Partitioning¹ Ceph Optimization¹ Ceph Performance¹ Pulpito¹ 功能更新¹ 对象类¹ C++¹ Ceph技术进展² RBD特性¹ 字幕翻译¹ 会议总结¹ Notification Sync¹ Multi-Site Replication¹ Zone Group¹ 队列管理¹ API重构¹ D3N项目¹ 原子化存储¹ S3测试¹ AWS S3¹ Compatibility¹ 高性能网络¹ Melanox¹ Parallel NFS¹ 存储集成¹ Gluster¹ 实验性研究¹ HGST¹ Open Ethernet Drive Architecture¹ Software¹ defined Storage¹ 高性能I/O¹ XIO Messenger¹ Container Orchestration² Storage Integration¹ I/O 性能¹ 用户空间驱动器¹ NASA satellite data¹ Ceph storage¹ High throughput computing¹ Data processing¹ Ceph 构建基础设施¹ 安全狗发布流程¹ 缓冲列表¹ Remote Replication¹ Serverless¹ Data Anonymization¹ Real¹ Time Processing¹ MicroShift¹ Ceph优化¹ Read Affinity¹ 容器化存储¹ Ceph备份¹ to¹ Flashcache¹ SQL查询¹ AWS服务¹ Cache Tiering¹ GitOps¹ DevStack¹ Anible¹ Scrub 代码¹ Security Token Service (STS)¹ Access Control² Cliso公司¹ Canonical¹ MicroCloud¹ Reef版本¹ Ceph基金会¹ Ceph Days¹ POSIX兼容¹ Ceph SFS¹ Mellanox¹ High Performance Computing¹ 科研ICT¹ 扩展集群¹ Sunbeam项目¹ Stretch Cluster¹ Availability Zones¹ Distributed File System¹ POSIX Compliance¹ Scheduling¹ 测试分析¹ 测试开发¹ 优化升级¹ Lua脚本² 图遍历¹ Small Objects Optimization¹ 软件定义网络 (SDN)¹ MidoNet¹ 硬件管理¹ SMB¹ Linux² File System² 云解决方案¹ Samba² CTDB¹ 生态系统集成¹ 微服务器¹ Sandisk¹ eBPF¹ 性能诊断¹ 系统架构¹ Ceph 发布流程¹ Samba integration¹ Volume Shadow Copy Service (VSSS)¹ Data snapshots¹ Backup and recovery¹ Ceph大使¹ 用户增长¹ 系统优化¹ Seastore¹ 硬件选择¹ 安全性和稳定性¹ Ceph 文件系统¹ Caps 机制¹ Email System Security¹ Project Management¹ 部署最佳实践¹ 案例分析¹ 代码维护¹ Ceph实践¹ Walmart¹ Client Operations¹ Hardware Upgrade¹ 路线图¹ KMS 缓存¹ 调优¹ Scale Testing¹ Bucket Index Snapshots¹ 新特性¹ MSR规则¹ EC集群¹ Cluster Scalability¹ Data Lakehouse¹ Technical Catalog¹ Data Governance¹ 审计日志¹ Performance Benchmarking¹ SMB 协议¹ AI生成代码¹ 法律风险¹ Tools Development¹ 存储恢复¹ 系统故障¹ 大数据存储¹ 压缩冗余编码¹ NVMe over TCP¹ Multi-Cluster Management¹ Management Gateway¹ Cloud-S3 Module¹ Data Transfer¹ Data Lifecycle Management¹ 零信任安全¹ Lakehouse 架构¹ 数据治理¹ 版本支持¹

2023-05-05

视频总结

Building and Scaling Data Pipelines for Data Engineering With Ceph Object Storage - Kyle Bader, IBM

Ceph对象存储
事件驱动架构
数据工程
数据管道
无服务器框架

站点总访客数：站点总访问量：

博客内容遵循知识共享署名 - 非商业性 - 相同方式共享 4.0 国际协议

sean10 © 2015 - 2025 Power by Hexo Theme indigo

扫一扫，分享到微信