HP 3PAR problem Thin Provisioned VV unable to allocate SD space from CPG

[mainland]

Hello, I have a cabin HP 3PAR 7200 with firmware 3.2.1 MU1.

The systema storage is formed by the integrated controllers in which there are 24 enclousure 1.2TB SAS disks.

And a enclousure Disk 3.5 "3TB NL SAS.

The CPGs that are created are the default.

I am migrating an HP EVA8400 and VMware 4.1 with storage VMotion, and even when cloned VMs that are in the Datastores the 3PAR system, I get this error:

"Thin Provisioned VV xxxxxx SD Unable to allocate space from CPG yyyyy"

showpd -p -devtype FC -c

                             -------- Normal Chunklets --------- ---- Spare Chunklets ----

                             - Used -- -------- Unused --------- - Used - ---- Unused ----

Id CagePos Type State  Total   OK Fail  Free Uninit Unavail Fail OK  Fail Free Uninit Fail

 0 0:0:0   FC   normal  1116   51    0   972      0       0    0  0     0   93      0    0

 1 0:1:0   FC   normal  1116   52    0   971      0       0    0  0     0   93      0    0

 2 0:2:0   FC   normal  1116   52    0   971      0       0    0  0     0   93      0    0

 3 0:3:0   FC   normal  1116   52    0   971      0       0    0  0     0   93      0    0

 4 0:4:0   FC   normal  1116   51    0   972      0       0    0  0     0   93      0    0

 5 0:5:0   FC   normal  1116   52    0   971      0       0    0  0     0   93      0    0

 6 0:6:0   FC   normal  1116   51    0   972      0       0    0  0     0   93      0    0

 7 0:7:0   FC   normal  1116   51    0   972      0       0    0  0     0   93      0    0

 8 0:8:0   FC   normal  1116   51    0   972      0       0    0  0     0   93      0    0

 9 0:9:0   FC   normal  1116   52    0   971      0       0    0  0     0   93      0    0

10 0:10:0  FC   normal  1116   52    0   971      0       0    0  0     0   93      0    0

11 0:11:0  FC   normal  1116   52    0   971      0       0    0  0     0   93      0    0

12 0:12:0  FC   normal  1116   51    0   972      0       0    0  0     0   93      0    0

13 0:13:0  FC   normal  1116   52    0   971      0       0    0  0     0   93      0    0

14 0:14:0  FC   normal  1116   51    0   972      0       0    0  0     0   93      0    0

15 0:15:0  FC   normal  1116   51    0   972      0       0    0  0     0   93      0    0

16 0:16:0  FC   normal  1116   51    0   972      0       0    0  0     0   93      0    0

17 0:17:0  FC   normal  1116   52    0   971      0       0    0  0     0   93      0    0

18 0:18:0  FC   normal  1116   51    0   972      0       0    0  0     0   93      0    0

19 0:19:0  FC   normal  1116   51    0   972      0       0    0  0     0   93      0    0

20 0:20:0  FC   normal  1116   51    0   972      0       0    0  0     0   93      0    0

21 0:21:0  FC   normal  1116   52    0   971      0       0    0  0     0   93      0    0

22 0:22:0  FC   normal  1116   51    0   972      0       0    0  0     0   93      0    0

23 0:23:0  FC   normal  1116   51    0   972      0       0    0  0     0   93      0    0

------------------------------------------------------------------------------------------

24 total               26784 1234    0 23318      0       0    0  0     0 2232      0    0

 showpd -p -devtype NL -c

                             -------- Normal Chunklets --------- ---- Spare Chunklets ----

                             - Used -- -------- Unused --------- - Used - ---- Unused ----

Id CagePos Type State  Total   OK Fail  Free Uninit Unavail Fail OK  Fail Free Uninit Fail

24 1:0:0   NL   normal  2708  153    0  1152   1204       0    0  0     0   20    179    0

25 1:1:0   NL   normal  2708  153    0  1152   1204       0    0  0     0   20    179    0

26 1:2:0   NL   normal  2708  153    0  1151   1205       0    0  0     0   20    179    0

27 1:4:0   NL   normal  2708  153    0  1150   1206       0    0  0     0   20    179    0

28 1:5:0   NL   normal  2708  153    0  1148   1208       0    0  0     0   20    179    0

29 1:6:0   NL   normal  2708  153    0  1151   1205       0    0  0     0   20    179    0

30 1:8:0   NL   normal  2708  153    0  1150   1206       0    0  0     0   20    179    0

31 1:9:0   NL   normal  2708  153    0  1152   1204       0    0  0     0   20    179    0

32 1:10:0  NL   normal  2708  153    0  1148   1208       0    0  0     0   20    179    0

33 1:12:0  NL   normal  2708  153    0  1153   1203       0    0  0     0   20    179    0

34 1:13:0  NL   normal  2708  153    0  1150   1206       0    0  0     0   20    179    0

35 1:14:0  NL   normal  2708  153    0  1151   1205       0    0  0     0   20    179    0

36 1:16:0  NL   normal  2708  153    0  1151   1205       0    0  0     0   20    179    0

37 1:17:0  NL   normal  2708  153    0  1152   1204       0    0  0     0   20    179    0

38 1:20:0  NL   normal  2708  153    0  1151   1205       0    0  0     0   20    179    0

39 1:21:0  NL   normal  2708  153    0  1150   1206       0    0  0     0   20    179    0

------------------------------------------------------------------------------------------

16 total               43328 2448    0 18412  19284       0    0  0     0  320   2864    0

regards

[Dennis Handly]

You should NOT be putting all of the same class drives in the same cage.

The default is "-ha cage" and since you have all in the same cage, you won't be able to allocate any space.

(Otherwise you need to use "-ha mag".)

If you haven't allocated any VVs yet, I suggest you start all over with a more balanced PD arrangement.

You can use showspace to see how much storage you can allocate, based on the type of CPG:

showspace -ha cage -p -devtype FC

showspace -ha cage -p -devtype NL

And retry with cage replaced by mag.

Or to list by CPG use:  showspace -cpg cpg-name

[Sheldon Smith]

I don't think there's a choice.

Those NL drives look like 2TB drives, and AFAIK, the bigger NL drives only come in a LFF size. So he's stuck with HA Mag.

[Dennis Handly]

>Those NL drives look like 2TB drives, and AFAIK, the bigger NL drives only come in a LFF size.

Ah right, he said 3 TB.  A showcage would show that.

So you need to create some new CPGs using "-ha mag".

If these are not the default FC_r* or NL_r6 CPGs, you can use "setcpg -ha mag cpg-name"

[Sheldon Smith]

And, he wrote "The CPGs that are created are the default."

I am assuming it's one of those he's attempting to use.

The system won't create an inoperable CPG, so the FC_* and NL_* CPGs must already be -HA MAG.

So still not sure what the problem is.

Mainland, have you contacted HP Support and opened a case?

[mainland]

Hello, the cabin has this design has been carried out with the official tool HP NinjaStart

19TiB should be free in Raid 5 (3 + 1) SAS disks
29TiB should be free in RAID6 (6 + 2) NL-SAS disks

Check out some commands

showcpg

                               -----------------(MB)-----------------

               -Volumes- -Usage- ----- Usr ----- --- Snp --- -- Adm ---

Id Name Warn% VVs TPVVs Usr Snp   Total   Used Total Used Total Used

0 FC_r1     -   2     2   2   0   4096   4096 28672   0 8192 256

1 FC_r5     - 15   15 15   3 1238656 1238656 41344 1536 16384 2816

3 NL_r6     - 31   31 31 10 2288128 2288128 34304 5120 16384 5760

-----------------------------------------------------------------------

3 total                 48 13 3530880 3530880 104320 6656 40960 8832

showsys -space

---------System Capacity (MB)----------

Total Capacity             :   71794688

Allocated               :   10622976

   Volumes               :   4820992

     Non-CPGs             :         0

       User               :         0

       Snapshot           :         0

       Admin             :         0

     CPGs (TPVVs & CPVVs) :   4820992

       User               :   4545411

         Used            :   4545411

         Unused           :         0

       Snapshot           :     152701

         Used             :       8672

         Unused           :     144029

       Admin             :     122880

         Used           :     26496

         Unused           :     96384

     Unmapped             :         0

   System                 :   5801984

     Internal             :     256000

     Spare               :   5545984

       Used               :        0

       Unused             :   5545984

Free                     :   61171712

   Initialized           :   61171712

   Uninitialized         :         0

Unavailable             :         0

Failed                   :         0

showpd -p -devtype NL -c

                             -------- Normal Chunklets --------- ---- Spare Chunklets ----

                             - Used -- -------- Unused --------- - Used - ---- Unused ----

Id CagePos Type State Total   OK Fail Free Uninit Unavail Fail OK Fail Free Uninit Fail

24 1:0:0   NL   normal 2708 189   0 2320     0       0   0 0     0 199     0   0

25 1:1:0   NL   normal 2708 189   0 2320     0       0   0 0     0 199     0   0

26 1:2:0   NL   normal 2708 189   0 2320     0       0   0 0     0 199     0   0

27 1:4:0   NL   normal 2708 189   0 2320     0       0   0 0     0 199     0   0

28 1:5:0   NL   normal 2708 189   0 2320     0       0   0 0     0 199     0   0

29 1:6:0   NL   normal 2708 189   0 2320     0       0   0 0     0 199     0   0

30 1:8:0   NL   normal 2708 189   0 2320     0       0   0 0     0 199     0   0

31 1:9:0   NL   normal 2708 189   0 2320     0       0   0 0     0 199     0   0

32 1:10:0 NL   normal 2708 189   0 2320     0       0   0 0     0 199     0   0

33 1:12:0 NL   normal 2708 189   0 2320     0       0   0 0     0 199     0   0

34 1:13:0 NL   normal 2708 189   0 2320     0       0   0 0     0 199     0   0

35 1:14:0 NL   normal 2708 189   0 2320     0       0   0 0     0 199     0   0

36 1:16:0 NL   normal 2708 189   0 2320     0       0   0 0     0 199     0   0

37 1:17:0 NL   normal 2708 189   0 2320     0       0   0 0     0 199     0   0

38 1:20:0 NL   normal 2708 189   0 2320     0       0   0 0     0 199     0   0

39 1:21:0 NL   normal 2708 189   0 2320     0       0   0 0     0 199     0   0

------------------------------------------------------------------------------------------

16 total               43328 3024   0 37120     0       0   0 0     0 3184     0   0

showpd -p -devtype FC -c

                             -------- Normal Chunklets --------- ---- Spare Chunklets ----

                             - Used -- -------- Unused --------- - Used - ---- Unused ----

Id CagePos Type State Total   OK Fail Free Uninit Unavail Fail OK Fail Free Uninit Fail

0 0:0:0   FC   normal 1116   79   0   944      0       0   0 0     0   93     0   0

1 0:1:0   FC   normal 1116   82   0   941     0       0   0 0     0   93     0   0

2 0:2:0   FC   normal 1116   79   0   944     0       0   0 0     0   93     0   0

3 0:3:0   FC   normal 1116   83   0   940     0       0   0 0     0   93     0   0

4 0:4:0   FC   normal 1116   79   0   944     0       0   0 0     0   93     0   0

5 0:5:0   FC   normal 1116   83   0   940     0       0   0 0     0   93     0   0

6 0:6:0   FC   normal 1116   79   0   944     0       0   0 0     0   93     0   0

7 0:7:0   FC   normal 1116   82   0   941     0       0   0 0     0   93     0   0

8 0:8:0   FC   normal 1116   79   0   944     0       0   0 0     0   93     0   0

9 0:9:0   FC   normal 1116   82   0   941     0       0   0 0     0   93     0   0

10 0:10:0 FC   normal 1116   79   0   944     0       0   0 0     0   93     0   0

11 0:11:0 FC   normal 1116   83   0   940     0     0   0 0     0   93     0   0

12 0:12:0 FC   normal 1116   79   0   944     0       0   0 0     0   93     0   0

13 0:13:0 FC   normal 1116   82   0   941     0       0   0 0     0   93     0   0

14 0:14:0 FC   normal 1116   78   0   945     0       0   0 0     0   93     0   0

15 0:15:0 FC   normal 1116   82   0   941     0       0   0 0     0   93     0   0

16 0:16:0 FC   normal 1116   79   0   944     0       0   0 0     0   93     0   0

17 0:17:0 FC   normal 1116   83   0   940     0       0   0 0     0   93     0   0

18 0:18:0 FC   normal 1116   79   0   944     0       0   0 0     0   93     0   0

19 0:19:0 FC   normal 1116   82   0   941     0       0   0 0     0   93     0   0

20 0:20:0 FC   normal 1116   79   0   944     0       0   0 0     0   93     0   0

21 0:21:0 FC   normal 1116   82   0   941     0       0   0 0     0   93     0   0

22 0:22:0 FC   normal 1116   78   0   945     0       0   0 0    0   93     0   0

23 0:23:0 FC   normal 1116   82   0   941     0       0   0 0     0   93     0   0

------------------------------------------------------------------------------------------

24 total               26784 1934   0 22618     0       0   0 0     0 2232     0   0

What I have seen is that if earlier in the CPGs in UNINIT appeared much information and was not zero.

[Dennis Handly]

>the cabin has this design

(I assume you mean array.)

>showcpg

What does "showcpg -sdg" show?

>earlier in the CPGs in UNINIT was not zero.

Yes, with enough time the chunklets have been initialized.