Vba 基于大型电子表格的列数据生成新工作表

我有一个800k行和150列的电子表格。我正在尝试根据列的内容创建新的工作表。例如，如果Y列有许多元素（“alpha”、“beta”、“gamma”等），那么我想创建名为“alpha”、“beta”、“gamma”的新工作表，其中只包含原始工作表中具有相应字母的行。我发现有两个脚本适用于较小的电子表格，但是由于这个电子表格的大小，它们不起作用

以下是我尝试过的两个脚本：

Sub parse_data()
Dim lr As Long
Dim ws As Worksheet
Dim vcol, i As Integer
Dim icol As Long
Dim myarr As Variant
Dim title As String
Dim titlerow As Integer
vcol = 1       
Set ws = Sheets("Sheet1")       
lr = ws.Cells(ws.Rows.Count, vcol).End(xlUp).Row
title = "A1:C1"           
titlerow = ws.Range(title).Cells(1).Row
icol = ws.Columns.Count
ws.Cells(1, icol) = "Unique"
For i = 2 To lr
    On Error Resume Next
    If ws.Cells(i, vcol) <> "" And Application.WorksheetFunction.Match(ws.Cells(i, vcol), ws.Columns(icol), 0) = 0 Then
        ws.Cells(ws.Rows.Count, icol).End(xlUp).Offset(1) = ws.Cells(i, vcol)
    End If
Next
myarr = Application.WorksheetFunction.Transpose(ws.Columns(icol).SpecialCells(xlCellTypeConstants))
ws.Columns(icol).Clear
For i = 2 To UBound(myarr)
    ws.Range(title).AutoFilter field:=vcol, Criteria1:=myarr(i) & ""
    If Not Evaluate("=ISREF('" & myarr(i) & "'!A1)") Then
        Sheets.Add(after:=Worksheets(Worksheets.Count)).Name = myarr(i) & ""
    Else
        Sheets(myarr(i) & "").Move after:=Worksheets(Worksheets.Count)
    End If
    ws.Range("A" & titlerow & ":A" & lr).EntireRow.Copy Sheets(myarr(i) & "").Range("A1")
    Sheets(myarr(i) & "").Columns.AutoFit
Next
ws.AutoFilterMode = False
ws.Activate
End Sub

Sub columntosheets()

Const sname As String = "VOTERFILE_WITHABSENTEEINFORMATI" 'change to whatever starting sheet
Const s As String = "O" 'change to whatever criterion column
Dim d As Object, a, cc&
Dim p&, i&, rws&, cls&
Set d = CreateObject("scripting.dictionary")
With Sheets(sname)
    rws = .Cells.Find("*", , , , xlByRows, xlPrevious).Row
    cls = .Cells.Find("*", , , , xlByColumns, xlPrevious).Column
    cc = .Columns(s).Column
End With
For Each sh In Worksheets
    d(sh.Name) = 1
Next sh

Application.ScreenUpdating = False
With Sheets.Add(after:=Sheets(sname))
    Sheets(sname).Cells(1).Resize(rws, cls).Copy .Cells(1)
    .Cells(1).Resize(rws, cls).Sort .Cells(cc), 2, Header:=xlYes
    a = .Cells(cc).Resize(rws + 1, 1)
    p = 2
    For i = 2 To rws + 1
        If a(i, 1) <> a(p, 1) Then
            If d(a(p, 1)) <> 1 Then
                Sheets.Add.Name = a(p, 1)
                .Cells(1).Resize(, cls).Copy Cells(1)
                .Cells(p, 1).Resize(i - p, cls).Copy Cells(2, 1)
            End If
            p = i
        End If
    Next i
    Application.DisplayAlerts = False
    .Delete
    Application.DisplayAlerts = True
    Application.ScreenUpdating = True
End With
Sheets(sname).Activate

End Sub

子解析_数据（）
变暗lr为长
将ws设置为工作表
Dim vcol，i作为整数
如长
Dim myarr作为变异体
将标题设置为字符串
作为整数的Dim titlerow
vcol=1
设置ws=图纸（“图纸1”）
lr=ws.Cells（ws.Rows.Count，vcol）.End（xlUp）.Row
title=“A1:C1”
titlerow=ws.Range（title）.Cells（1）.Row
icol=ws.Columns.Count
ws.Cells（1，icol）=“唯一”
对于i=2至lr
出错时继续下一步
如果ws.Cells（i，vcol）“”和Application.WorksheetFunction.Match（ws.Cells（i，vcol），ws.Columns（icol），0）=0，则
ws.Cells（ws.Rows.Count，icol）.End（xlUp）.Offset（1）=ws.Cells（i，vcol）
如果结束
下一个
myarr=Application.WorksheetFunction.Transpose（ws.Columns（icol）.SpecialCells（xlCellTypeConstants））
ws.Columns（icol）.清除
对于i=2至UBound（myarr）
ws.Range（title）.AutoFilter字段：=vcol，标准1:=myarr（i）&“”
如果不进行评估（“=ISREF（”&myarr（i）&“！A1）”），则
Sheets.Add（之后：=工作表（Worksheets.Count））.Name=myarr（i）和“”
其他的
工作表（myarr（i）和“”）。移动后：=工作表（Worksheets.Count）
如果结束
ws.Range（“A”&标题栏&“：A”&标题栏）.EntireRow.Copy图纸（myarr（i）&“）.Range（“A1”）
图纸（myarr（i）和“”）.Columns.AutoFit
下一个
ws.AutoFilterMode=False
ws.Activate
端接头

这将返回“溢出”

我尝试过的其他代码：

Sub parse_data()
Dim lr As Long
Dim ws As Worksheet
Dim vcol, i As Integer
Dim icol As Long
Dim myarr As Variant
Dim title As String
Dim titlerow As Integer
vcol = 1       
Set ws = Sheets("Sheet1")       
lr = ws.Cells(ws.Rows.Count, vcol).End(xlUp).Row
title = "A1:C1"           
titlerow = ws.Range(title).Cells(1).Row
icol = ws.Columns.Count
ws.Cells(1, icol) = "Unique"
For i = 2 To lr
    On Error Resume Next
    If ws.Cells(i, vcol) <> "" And Application.WorksheetFunction.Match(ws.Cells(i, vcol), ws.Columns(icol), 0) = 0 Then
        ws.Cells(ws.Rows.Count, icol).End(xlUp).Offset(1) = ws.Cells(i, vcol)
    End If
Next
myarr = Application.WorksheetFunction.Transpose(ws.Columns(icol).SpecialCells(xlCellTypeConstants))
ws.Columns(icol).Clear
For i = 2 To UBound(myarr)
    ws.Range(title).AutoFilter field:=vcol, Criteria1:=myarr(i) & ""
    If Not Evaluate("=ISREF('" & myarr(i) & "'!A1)") Then
        Sheets.Add(after:=Worksheets(Worksheets.Count)).Name = myarr(i) & ""
    Else
        Sheets(myarr(i) & "").Move after:=Worksheets(Worksheets.Count)
    End If
    ws.Range("A" & titlerow & ":A" & lr).EntireRow.Copy Sheets(myarr(i) & "").Range("A1")
    Sheets(myarr(i) & "").Columns.AutoFit
Next
ws.AutoFilterMode = False
ws.Activate
End Sub

Sub columntosheets()

Const sname As String = "VOTERFILE_WITHABSENTEEINFORMATI" 'change to whatever starting sheet
Const s As String = "O" 'change to whatever criterion column
Dim d As Object, a, cc&
Dim p&, i&, rws&, cls&
Set d = CreateObject("scripting.dictionary")
With Sheets(sname)
    rws = .Cells.Find("*", , , , xlByRows, xlPrevious).Row
    cls = .Cells.Find("*", , , , xlByColumns, xlPrevious).Column
    cc = .Columns(s).Column
End With
For Each sh In Worksheets
    d(sh.Name) = 1
Next sh

Application.ScreenUpdating = False
With Sheets.Add(after:=Sheets(sname))
    Sheets(sname).Cells(1).Resize(rws, cls).Copy .Cells(1)
    .Cells(1).Resize(rws, cls).Sort .Cells(cc), 2, Header:=xlYes
    a = .Cells(cc).Resize(rws + 1, 1)
    p = 2
    For i = 2 To rws + 1
        If a(i, 1) <> a(p, 1) Then
            If d(a(p, 1)) <> 1 Then
                Sheets.Add.Name = a(p, 1)
                .Cells(1).Resize(, cls).Copy Cells(1)
                .Cells(p, 1).Resize(i - p, cls).Copy Cells(2, 1)
            End If
            p = i
        End If
    Next i
    Application.DisplayAlerts = False
    .Delete
    Application.DisplayAlerts = True
    Application.ScreenUpdating = True
End With
Sheets(sname).Activate

End Sub

子列ToSheets（）
Const sname As String=“VOTERFILE_with缺席信息”'更改为任何起始页
常量s As String=“O”更改为任意条件列
尺寸d作为对象，a，cc&
尺寸p＆i＆rws＆cls&
Set d=CreateObject（“scripting.dictionary”）
带床单（sname）
rws=.Cells.Find（“*”，xlByRows，xlPrevious）.Row
cls=.Cells.Find（“*”，xlByColumns，xlPrevious）.Column
cc=.Columns（s）.Column
以
对于工作表中的每个sh
d（sh.Name）=1
下一个sh
Application.ScreenUpdating=False
使用Sheets.Add（之后：=Sheets（sname））
工作表（sname）.单元格（1）.调整大小（rws，cls）.复制.单元格（1）
.Cells（1）.调整大小（rws，cls）.排序.单元格（cc），2，标题：=xlYes
a=.Cells（cc）.Resize（rws+1,1）
p=2
对于i=2至rws+1
如果a（i，1）a（p，1），那么
如果d（a（p，1））1那么
Sheets.Add.Name=a（p，1）
.单元格（1）.调整大小（，cls）.复制单元格（1）
.单元格（p，1）.调整大小（i-p，cls）.复制单元格（2，1）
如果结束
p=i
如果结束
接下来我
Application.DisplayAlerts=False
.删除
Application.DisplayAlerts=True
Application.ScreenUpdating=True
以
工作表（sname）。激活
端接头

返回错误“excel没有足够的资源”

---

可以在我的硬件上执行我想要的操作吗？

您可以参考另一篇文章“”中修改的子例程

---

将

Integer

变量更改为

Single

，顶部的代码应该可以工作，尽管速度很慢。我会将其转换为使用数组。或者更好的是，为什么要使用Excel处理800K+行？看起来数据库可能更合适。SQL Server Express是一个免费下载，可以处理数百万行。你犯的错误是我不是数据库，别管我。Excel是一把强大的锤子。糟糕的是，并非所有数据驱动的问题都是钉子。“为什么不使用数据库？”对于使用Excel处理大量数据的海报来说，这是一个显而易见的问题，但我认为我们往往太快忘记了刚开始编码时的情况——我知道我完全不知道“真正的”数据库是什么，更不用说关于如何设置和使用它的任何想法了。有时候，锤子是你唯一能接触到的东西。这不是我正在创建的数据。这是我从网站下载的.txt文件。这可能是一个非常新的问题，但是SQLServerExpress的学习曲线有多大？我只需要计算几个统计数据。@faeophyta，我是一个相对的SQL新手，我要说的是，学习曲线（对于基本功能）并不太陡峭。您可以非常轻松地将

.txt

文件加载到SQL中，然后从中进行查询。