User Tools

Site Tools


hardware:reesi

Differences

This shows you the differences between two versions of the page.

Link to this comparison view

Both sides previous revision Previous revision
Next revision
Previous revision
hardware:reesi [2018/03/26 13:33]
djgalloway
hardware:reesi [2019/08/01 23:49] (current)
djgalloway
Line 10: Line 10:
  
 ===== Hardware Specs ===== ===== Hardware Specs =====
-|            ^ Count    ^ Manufacturer ​ ^ Model                                      ^ Capacity ​ ^ Notes                                                                                                  +|            ^ Count    ^ Manufacturer ​ ^ Model                                      ^ Capacity ​ ^ Notes                                                                                                                    
-^ Chassis ​   | 2U       | Supermicro ​   | SSG-6028R-E1CR12H ​                         | N/A       ​| ​                                                                                                       +^ Chassis ​   | 2U       | Supermicro ​   | SSG-6028R-E1CR12H ​                         | N/A       ​| ​                                                                                                                         
-^ Mainboard ​ | N/A      | Supermicro ​   | X10DRH-iT ​                                 | N/A       ​| ​                                                                                                       +^ Mainboard ​ | N/A      | Supermicro ​   | X10DRH-iT ​                                 | N/A       ​| ​                                                                                                                         
-^ CPU        | 1        | Intel         | Intel(R) Xeon(R) CPU E5-2620 v4 @ 2.10GHz ​ | N/A       | [[https://​ark.intel.com/​products/​92986/​Intel-Xeon-Processor-E5-2620-v4-20M-Cache-2_10-GHz|ARK]] ​       +^ CPU        | 1        | Intel         | Intel(R) Xeon(R) CPU E5-2620 v4 @ 2.10GHz ​ | N/A       | [[https://​ark.intel.com/​products/​92986/​Intel-Xeon-Processor-E5-2620-v4-20M-Cache-2_10-GHz|ARK]] ​                         
-^ RAM        | 4 DIMMs  | Samsung ​      | M393A2G40EB1-CRC ​                          | 16GB      | 64GB total                                                                                             ​+^ RAM        | 4 DIMMs  | Samsung ​      | M393A2G40EB1-CRC ​                          | 16GB      | 64GB total                                                                                                               ​
-^ SSD        | 2        | Intel         | SSDSC2BB150G7 (S3520) ​                     | 150GB     | Software RAID1 for OS                                                                                  +^ SSD        | 2        | Intel         | SSDSC2BB150G7 (S3520) ​                     | 150GB     | Software RAID1 for OS                                                                                                    
-^ HDD        | 12       | Seagate ​      | ST4000NM0025 ​                              | 4TB       | SAS 7200RPM for OSDs                                                                                   ​|+^ HDD        | 11       | Seagate ​      | ST4000NM0025 ​                              | 4TB       | SAS 7200RPM for OSDs                                                                                                     | 
 +^ HDD        | 1        | HGST          | HUH721212AL5200 ​                           | 12TB      | SAS 7200RPM added 1AUG2019 at Brett'​s request. ​                                                                          |
 ^ NVMe       | 1        | Micron ​       | MTFDHBG800MCG-1AN1ZABYY ​                   | 800GB     | Carved up as logical volumes on two partitions. ​ 400GB as an OSD and the other 400GB divided by 12 for HDD OSD journals ​ | ^ NVMe       | 1        | Micron ​       | MTFDHBG800MCG-1AN1ZABYY ​                   | 800GB     | Carved up as logical volumes on two partitions. ​ 400GB as an OSD and the other 400GB divided by 12 for HDD OSD journals ​ |
-^ NIC        | 2 ports  | Intel         | X540-AT2 ​                                  | 10Gb      | RJ45 (not used)                                                                                        +^ NIC        | 2 ports  | Intel         | X540-AT2 ​                                  | 10Gb      | RJ45 (not used)                                                                                                          
-^ NIC        | 2 ports  | Intel         | 82599ES ​                                   | 10Gb      | 1 port cabled per system on front VLAN                                                                 ​+^ NIC        | 2 ports  | Intel         | 82599ES ​                                   | 10Gb      | 1 port cabled per system on front VLAN                                                                                   ​
-^ BMC        | 1        | Supermicro ​   | N/A                                        | N/A       | Reachable at $host.ipmi.sepia.ceph.com ​                                                                ​|+^ BMC        | 1        | Supermicro ​   | N/A                                        | N/A       | Reachable at $host.ipmi.sepia.ceph.com ​                                                                                  ​|
  
  
 ===== OSD/Block Device Information ===== ===== OSD/Block Device Information =====
-The reesi have 12x 4TB HDD and 1x 800GB NVMe.+The reesi have 11x 4TB HDD, 1x 12TB HDD, and 1x 800GB NVMe
 + 
 +The 12TB were added to so we can say we're testing on drives larger than 8TB.
  
 The NVMe device is split into two equal partitions: The NVMe device is split into two equal partitions:
Line 89: Line 92:
 for disk in sd{a..l}; do ansible -a "sudo lvcreate -L 31G -n $disk journals"​ reesi*; done for disk in sd{a..l}; do ansible -a "sudo lvcreate -L 31G -n $disk journals"​ reesi*; done
 </​code>​ </​code>​
 +
 +===== Replacing Drives =====
 +Like the [[hardware:​mira]],​ the drive letters do **not** correspond to drive bays.  So ''/​dev/​sda''​ isn't necessarily in Drive Bay 1.  Keep this in mind when zapping/​setting up OSDs.  Also, drive ''/​dev/​sda''​ may not necessarily have its WAL Block on ''/​dev/​journals/​sda''​.
 +
 +While watching the front of a system, send ''​dd if=/​dev/​$DRIVE of=/​dev/​null''​ where ''​$DRIVE''​ is the drive you're replacing to identify each drive.
  
 ===== Set up a new OSD with journal on NVMe logical volume ===== ===== Set up a new OSD with journal on NVMe logical volume =====
hardware/reesi.1522071224.txt.gz · Last modified: 2018/03/26 13:33 by djgalloway