Разделить файл CSV на равные части?

Как я уже сказал в комментарии, CSV-файлы должны быть разделены по границам строк (или строк). Ваш код этого не делает и потенциально разбивает их где-то посередине, что, как я подозреваю, является причиной вашего _csv.Error.

Следующее позволяет избежать этого, обрабатывая входной файл как серию строк. Я протестировал его, и, похоже, он работает автономно в том смысле, что он разделил образец файла на фрагменты примерно одинакового размера, потому что маловероятно, что целое число строк точно поместится в фрагмент.

Обновить

Это существенно более быстрая версия кода, чем я изначально опубликовал. Улучшение заключается в том, что теперь он использует собственный метод tell() временного файла для определения постоянно меняющейся длины файла по мере его записи вместо вызова os.path.getsize(), что устраняет необходимость flush() файла и вызова os.fsync() для него после записи каждой строки.

import csv
import multiprocessing
import os
import tempfile

def split(infilename, num_chunks=multiprocessing.cpu_count()):
    READ_BUFFER = 2**13
    in_file_size = os.path.getsize(infilename)
    print 'in_file_size:', in_file_size
    chunk_size = in_file_size // num_chunks
    print 'target chunk_size:', chunk_size
    files = []
    with open(infilename, 'rb', READ_BUFFER) as infile:
        for _ in xrange(num_chunks):
            temp_file = tempfile.TemporaryFile()
            while temp_file.tell() < chunk_size:
                try:
                    temp_file.write(infile.next())
                except StopIteration:  # end of infile
                    break
            temp_file.seek(0)  # rewind
            files.append(temp_file)
    return files

files = split("sample_simple.csv", num_chunks=4)
print 'number of files created: {}'.format(len(files))

for i, ifile in enumerate(files, start=1):
    print 'size of temp file {}: {}'.format(i, os.path.getsize(ifile.name))
    print 'contents of file {}:'.format(i)
    reader = csv.reader(ifile)
    for row in reader:
        print row
    print ''