<!DOCTYPE html PUBLIC "-//W3C//DTD HTML 4.01 Transitional//EN">

<html>

<head>

  <meta content="text/html;charset=ISO-8859-1" http-equiv="Content-Type">

</head>

<body bgcolor="#ffffff" text="#000000">

Hi Srinivas,<br>

the trouble happens creating files like this:<br>

<br>

dd if=/dev/zero of=./file bs=100M count=60<br>

<br>

When the file arrives to 5GB the filesystem outputs a error about no

more free space!<br>

<br>

Theorically there is about 63 GB of free space:<br>

<br>

df -kh | grep mail<br>

300G&nbsp; 238G&nbsp;&nbsp; 63G&nbsp; 80% /home/mail<br>

<br>

This trouble happens creating small files, too<br>

<br>

The inodes seems not to be exhausted:<br>

<br>

df -i | grep mail<br>

78642183 62365063 16277120&nbsp;&nbsp; 80% /home/mail<br>

<br>

I think, there are so few orphaned inodes and maybe it doesn't affect:<br>

<br>

echo "ls //orphan_dir:0000" | debugfs.ocfs2 /dev/sda1<br>

<br>

debugfs.ocfs2 1.4.3<br>

debugfs:&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 16&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp;&nbsp;&nbsp; 2&nbsp; .<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 10&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 16&nbsp;&nbsp; 2&nbsp;&nbsp;&nbsp; 2&nbsp; ..<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 79813023&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 0000000004c1d99f<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28472617&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 0000000001b27529<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 8438318&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 000000000080c22e<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 80973610&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 0000000004d38f2a<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 213406992&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 000000000cb85510<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13234609&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 0000000000c9f1b1<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 228704523&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 000000000da1c10b<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 225968869&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 000000000d7802e5<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 256692752&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 000000000f4cd210<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 103224605&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 000000000627151d<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 83675914&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 0000000004fccb0a<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 225968588&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 000000000d7801cc<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 278103558&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 0000000010938606<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 256692760&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 000000000f4cd218<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13235439&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 0000000000c9f4ef<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 8861985&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 0000000000873921<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 228997031&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 000000000da637a7<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 111786205&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 0000000006a9b8dd<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 24850261&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 00000000017b2f55<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 29889095&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 0000000001c81247<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 311022924&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 000000001289d54c<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13235309&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 0000000000c9f46d<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 129665645&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 0000000007ba8a6d<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 79605831&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 0000000004beb047<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28104589&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 0000000001acd78d<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 294769884&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 000000001191d4dc<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 253519012&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 000000000f1c64a4<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 80973232&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 0000000004d38db0<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13234376&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 0000000000c9f0c8<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 312527073&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 0000000012a0c8e1<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 25863407&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 00000000018aa4ef<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 305612210&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 00000000123745b2<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 226494741&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 000000000d800915<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 228705439&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 000000000da1c49f<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 79604433&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 40&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 0000000004beaad1<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 80973605&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 0000000004d38f25<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 226494890&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 000000000d8009aa<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 80973659&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 0000000004d38f5b<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13236194&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 56&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 0000000000c9f7e2<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 80973320&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 56&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 0000000004d38e08<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 46226861&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 0000000002c15dad<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 228995934&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 000000000da6335e<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 294770302&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 000000001191d67e<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 256692906&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 000000000f4cd2aa<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 255321636&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 56&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 000000000f37e624<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 80974273&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 0000000004d391c1<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 209062548&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 56&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 000000000c760a94<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 46227042&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 168&nbsp; 16&nbsp;&nbsp; 1&nbsp; 0000000002c15e62<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 108197615&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 28&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 000000000672f6ef<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 13236185&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 56&nbsp;&nbsp; 16&nbsp;&nbsp; 1&nbsp; 0000000000c9f7d9<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 294768980&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 112&nbsp; 16&nbsp;&nbsp; 1&nbsp; 000000001191d154<br>

&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 294768983&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 212&nbsp; 16&nbsp;&nbsp; 1&nbsp; 000000001191d157<br>

<br>

<br>

I will show you some info about the partition:<br>

<br>

Block size:<br>

<br>

tunefs.ocfs2 -q -Q "BS=%5B\n" /dev/sda1<br>

BS= 1024<br>

<br>

Cluster size:<br>

<br>

tunefs.ocfs2 -q -Q "CS=%5T\n" /dev/sda1<br>

CS= 4096<br>

<br>

Number Cluster Nodes:<br>

<br>

tunefs.ocfs2 -q -Q "CN=%5N\n" /dev/sda1<br>

CN=&nbsp;&nbsp;&nbsp; 5<br>

<br>

I think is better to give you more information about this partition.<br>

<br>

In this 300 GB ocfs2 partition are the maildir's of about 3K users with

a lot of small files ( ~ 62 M used inodes). <br>

In the near future we are planning to mount a 2-mail-cluster system,

because this volume is in a SAN.<br>

<br>

Perhaps the cluster and node size are to much big? Maybe the trouble is

fragmentation?<br>

What are the best ocfs2 options to format this mail volume?<br>

<br>

Thanks in advanced.<br>

<br>

Regards,<br>

Pablo<br>

<br>

<br>

<br>

<br>

Srinivas Eeda escribi&oacute;:

<blockquote cite="mid:4AE9E320.8000500@oracle.com" type="cite">

  <meta content="text/html;charset=ISO-8859-1" http-equiv="Content-Type">

Do you run into ENOSPC creating new files or extending existing files?

What is the cluster size? Don't think this may be the issue, but any

files under orphan directory? run (echo "ls //orphan_dir:000X" |

debugfs.ocfs2 &lt;device&gt;) to check if there are any.<br>

  <br>

  <br>

Juan Pablo Marco Cardona wrote:

  <blockquote cite="mid4AE9E00B.3080203@cast-info.es" type="cite">Hi

Sunil,<br>

we still have problems with the ocfs2 mail partition. The old problem

with the free space still continues.<br>

Theorically we hace 62 GB free space, but we only can use about 5 GB!<br>

    <br>

df -kh | grep mail<br>

300G&nbsp; 238G&nbsp;&nbsp; 63G&nbsp; 80% /home/mail<br>

    <br>

Also, yesterday we have a power outage that force a fsck.ocfs2 of the

partition.<br>

    <br>

We have upgraded to ocfs2 1.4.4 and ocfs2 1.4.3 tools and the kernel

version is the same:<br>

    <br>

rpm -qa | grep ocfs2<br>

ocfs2-2.6.18-128.2.1.el5-1.4.4-1.el5<br>

ocfs2-tools-1.4.3-1.el5<br>

ocfs2console-1.4.3-1.el5<br>

    <br>

modinfo ocfs2 | grep ^version<br>

version:&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp;&nbsp; 1.4.4<br>

    <br>

uname -r<br>

2.6.18-128.2.1.el5<br>

    <br>

What we can make? Maybe make a fsck.ocfs2 or mkfs.ocfs2 with the new

tools version (1.4.3) ??<br>

    <br>

Thanks in advance.<br>

    <br>

Regards,<br>

Pablo<br>

    <br>

    <br>

    <br>

    <br>

    <br>

&nbsp;<br>

    <br>

    <br>

    <br>

    <div class="moz-signature">-- <br>

<!-- saved from url=(0022)http://internet.e-mail -->

    <title>firm_email</title>

    <meta http-equiv="Content-Type" content="text/html; ">

    <style type="text/css">

a:link {color: #961A4E} 

a:active {color: #961A4E} 

a:visited {color: #961A4E} 

a:hover {color: #961A4E} 

body { color:#000; font-family:Arial; font-size:12px;}

table { text-align:left; width:90%}

.nom { color:#961A4E; font-size:14px; font-weight:bold; padding-left:44px; padding-top:20px}

.dades { color:#961A4E; font-size:14px;  padding-left:44px}

.email { color:#961A4E; font-size:12px; padding-left:44px ;padding-top:8px}

.mobil { color:#961A4E; font-size:12px; padding-left:10px; padding-left:44px}

.logo {  padding-top:10px; padding-left:10px}

.direccio { color:#961A4E; font-size:11px; padding-top:6px; padding-left:44px; padding-bottom:10px}

a { text-decoration:underline; color:#961A4E}</style><br>

    </div>

    <pre wrap=""><hr size="4" width="90%">

_______________________________________________

Ocfs2-users mailing list

<a moz-do-not-send="true" class="moz-txt-link-abbreviated"

 href="mailto:Ocfs2-users@oss.oracle.com">Ocfs2-users@oss.oracle.com</a>

<a moz-do-not-send="true" class="moz-txt-link-freetext"

 href="http://oss.oracle.com/mailman/listinfo/ocfs2-users">http://oss.oracle.com/mailman/listinfo/ocfs2-users</a></pre>

  </blockquote>

</blockquote>

<div class="moz-signature"><br>

</div>

</body>

</html>