Есть ли предел MAX числа строк при загрузке CSV в Big Query?

Вопрос:

У меня есть коллега, пытающаяся загрузить CSV файл в Big Query с помощью веб-интерфейса. Размер файла меньше 100 КБ и имеет 1352 строки. Похоже, что только первые 1000 строк загружаются в Big Query.

Я не видел ни одного ограничения по количеству, указанного на этой странице – https://developers.google.com/bigquery/preparing-data-for-bigquery. Является ли 1000 строк действительно пределом для загрузки CSV? Используется ли тот же предел для gsutil при загрузке в Big Query? Есть ли способ настроить этот предел для каждого проекта?

Лучший ответ:

Я только что услышал от своего коллеги, кажется, ошибка пользователя. Он запросил список, который он только что загрузил, и запрос по умолчанию имел “LIMIT 1000” в конце текста SQL. Когда он удалил LIMIT, он смог подтвердить, что все содержимое было загружено.

Ответ №1

Рад, что вам удалось решить проблему.

Для справки, веб-интерфейс позволяет загружать до 10 МБ. Для ограничений на уровне API см. Https://developers.google.com/bigquery/quota-policy.

Оцените статью
TechArks.Ru
Добавить комментарий