Django: Пакетное обновление/создание с использованием update_or_create?

Вопрос касался пакетных обновлений в PostgreSQL, и, как уже упоминал @imposeren, начиная с версии 9.5 в Postgres появилась возможность использовать команды upsert. В MySQL 5.7 такая возможность тоже присутствует (см. http://dev.mysql.com/doc/refman/5.7/en/insert-on-duplicate.html), в зависимости от ваших точных требований. Тем не менее, вероятно, проще будет использовать курсор базы данных. Ничего плохого в этом нет, он предназначен для случаев, когда ORM недостаточен.

Вам подойдет что-то вроде следующего. Это псевдокод, так что не стоит просто копировать и вставлять его, но концепция в нем ясна:

class GroupByChunk(object):
    def __init__(self, size):
        self.count = 0
        self.size = size
        self.toggle = False

    def __call__(self, *args, **kwargs):
        if self.count >= self.size:  # Позволяет использовать размер 0
            self.toggle = not self.toggle
            self.count = 0
        self.count += 1
        return self.toggle

def batch_update(db_results, upsert_sql):
    with transaction.atomic():
        cursor = connection.cursor()   
        for chunk in itertools.groupby(db_results, GroupByChunk(size=1000)):
            cursor.execute_many(upsert_sql, chunk)

Предположения здесь следующие:

• db_results — это какой-то итератор результатов, либо в виде списка, либо в виде словаря.
• Результат из db_results можно напрямую использовать в SQL-выражении.
• Если любое из пакетных обновлений завершается неудачей, будет откат всех обновлений. Если вы хотите сделать откат для каждого пакета, просто переместите блок with немного ниже.