首页
学习
活动
专区
圈层
工具
发布
社区首页 >问答首页 >在powershell中更高效地使用Import-CSV

在powershell中更高效地使用Import-CSV
EN

Stack Overflow用户
提问于 2015-06-06 07:20:38
回答 1查看 903关注 0票数 0

我正在尝试找出一种使用Import-CSV (powershell)将值放入csv文件数组的更有效的方法。问题是,其中一些文件有几十万行,将此脚本与其他代码行一起运行似乎是一个很大的瓶颈。你们有什么建议可以让这段代码更高效更快吗?

代码语言:javascript
复制
foreach($csv in $csvfiles)
{
    $csvname = $csv.name;
    $paygroup = $csvname.substring(4,3);
    $batch = $csvname.substring(14,4);
    write-host "Writing $csvname";
    $csvimportdata = Import-CSV $CurrentPath"\$csvname";
        foreach($record in $csvimportdata)
        {
        $record.chartfield1 = $paygroup;
        $record.chartfield2 = $batch;
        $record.chartfield3 = $record.line_descr.substring(0,6);
        }
    $csvimportdata | Export-CSV $CurrentPath"\$csvname" -NoTypeInformation
};
EN

回答 1

Stack Overflow用户

发布于 2015-06-08 22:30:15

如果您的CSV很大,那么加载到内存中可能不是一个好主意。这样如何:

代码语言:javascript
复制
foreach($csv in $csvfiles)
{
    $csvname = $csv.name
    $paygroup = $csvname.substring(4,3)
    $batch = $csvname.substring(14,4)
    write-host "Writing $csvname"

    Get-Content $CurrentPath"\$csvname" -Readcount 1 | % {
      # Regex below assumes a three column CSV
      $_ -replace '^([^,]+,[^,]+,[^,]{6}).*$', '$1'
    } | Set-Content $CurrentPath"\$csvname"
}
票数 0
EN
页面原文内容由Stack Overflow提供。腾讯云小微IT领域专用引擎提供翻译支持
原文链接:

https://stackoverflow.com/questions/30677211

复制
相关文章

相似问题

领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档