Bonjour Laurent,
J'ai un traitement de fichier CSV, plusieurs centaines ... entre 30 lignes et 500 lignes et les performances de traitement ne sont pas terrible terrible.
Les fichiers CSV ont le format suivant :
Fichier 1 :
Machine; IP; Disk
Host1; 127.0.0.1; 123
Host2; 127.0.0.1; 456
Host3; 127.0.0.1; 789
...
Host8; 127.0.0.1; 147
...
Fichier 2 :
Machine; IP; USB
Host1; 127.0.0.1; 3
Host2; 127.0.0.1; 7
...
Host8; 127.0.0.1; 5
...
et ainsi de suite, et je cherche a faire un fichier qui résulte l'ensemble des fichiers qui pourrais ressembler a
Fichier 2 :
Machine; IP; Disk; USB
Host1; 127.0.0.1; 123; 3
Host2; 127.0.0.1; 456; 7
Host3; 127.0.0.1; 789; .
...
Host8; 127.0.0.1; 147; 5
...
J'ai fait un premier traitement qui charge le premier fichier CSV puis dans le deuxième fichier je fais une comparaison des valeurs Machine et IP si ça correspond met la valeur de la colonne 3 du fichier 2
(Dans le
fichier 2 il n'y a pas les informations \"host3\")
Le Script ressemble a : (j'ai changé certaines informations)
[code:1]$StartScript = Get-Date -Format \"hh:mm:«»ss\"
$csv = Get-ChildItem \".\*_tabl.csv\"
$Test = @()
foreach($item in $csv)
{
if($Test.Count -eq 0)
{
$Test += Import-Csv -Path $item.FullName -Delimiter \",\"
}
else
{
$OtherFile = Import-Csv -Path $item.FullName -Delimiter \",\"
$NewHeader = (($OtherFile | gm) | Where-Object {$_.MemberType -eq \"NoteProperty\" -and $_.Name -ne \"MACHINE\" -and $_.Name -ne \"IP\"}).Name
$test | Add-Member -NotePropertyName $NewHeader -NotePropertyValue \" \"
foreach($xx in $OtherFile)
{
$Resultat = $Test | Where-Object {$_.MACHINE-EQ ($xx.MACHINE) -and $_.IP -EQ $xx.IP}
if($Resultat -eq $null)
{
# DANS LE CAS OU LA LIGNE N'EXISTE PAS (A VOIR PLUS TARD)
#$Test += $xx.MACHINE
}
$Resultat.$NewHeader = $xx.$NewHeader
}
$test
}
}
$StartScript
Get-Date -Format \"hh:mm:«»ss\"[/code:1]
Sauf que les controles (vérifications) sont vraiment lente
plus de 3 heures pour faire 11 fichiers, je recherche donc un autre moyen pour faire le traitement plus rapide et je me suis penché sur DATATABLE
Le datatable n'a pas le propriété DataSource j'ai donc utilisé le DataGridView
J'ai donc fait
[code:1][System.Collections.ArrayList]$dd = Import-Csv -Path \".\*fichier.csv\" -Delimiter \",\" -Encoding Default
$form = New-Object System.Windows.Forms.Form
$form.Size = New-Object System.Drawing.Size(900,600)
$dataGridView = New-Object System.Windows.Forms.DataGridView -Property @{
Size=New-Object System.Drawing.Size(800,400)
ColumnHeadersVisible = $true
DataSource = $dd
}[/code:1]
pour faire des recherches, des traitements (insert, ...) j'ai besoin de faire cette convertion du DataGridView vers datatable et je pourrais faire un truc dans l'exemple que j'ai trouvé :
# Uses SQL syntax
$dt.Select(\"Genre like '%Rap'\")
$dt.Select(\"ReleaseYear > 1988\")
$dt.Select(\"Artist = 'Poison'\")
# Change Eazy-E's genre
$eazy = ($dt.Select(\"Artist = 'Eazy-E'\"))
$eazy[0][\"Genre\"] = \"West Coast Rap\"
# Find this new genre
$dt.Select(\"Genre like '%Coast%'\")
