Overview

This document is an example of batch uploading raw files split into multiple files using tbloader.

Method

1. List raw files

[tibero@node3 SAM_100]$ ls
a.ctl lineitem.tbl.194 lineitem.tbl.303 lineitem.tbl.413 lineitem.tbl.62 orders.tbl.166 orders.tbl.276 orders.tbl.386 orders.tbl.496
customer.tbl.1 lineitem.tbl.195 lineitem.tbl.304 lineitem.tbl.414 lineitem.tbl.63 orders.tbl.167 orders.tbl.277 orders.tbl.387 orders.tbl.497
customer.tbl.10 lineitem.tbl.196 lineitem.tbl.305 lineitem.tbl.415 lineitem.tbl.64 orders.tbl.168 orders.tbl.278 orders.tbl.388 orders.tbl.498
customer.tbl.11 lineitem.tbl.197 lineitem.tbl.306 lineitem.tbl.416 lineitem.tbl.65 orders.tbl.169 orders.tbl.279 orders.tbl.389 orders.tbl.499
customer.tbl.12 lineitem.tbl.198 lineitem.tbl.307 lineitem.tbl.417 lineitem.tbl.66 orders.tbl.17 orders.tbl.28 orders.tbl.39 orders.tbl.5
customer.tbl.13 lineitem.tbl.199 lineitem.tbl.308 lineitem.tbl.418 lineitem.tbl.67 orders.tbl.170 orders.tbl.280 orders.tbl.390 orders.tbl.50
customer.tbl.14 lineitem.tbl.2 lineitem.tbl.309 lineitem.tbl.419 lineitem.tbl.68 orders.tbl.171 orders.tbl.281 orders.tbl.391 orders.tbl.500
customer.tbl.15 lineitem.tbl.20 lineitem.tbl.31 lineitem.tbl.42 lineitem.tbl.69 orders.tbl.172 orders.tbl.282 orders.tbl.392 orders.tbl.501
customer.tbl.16 lineitem.tbl.200 lineitem.tbl.310 lineitem.tbl.420 lineitem.tbl.7 orders.tbl.173 orders.tbl.283 orders.tbl.393 orders.tbl.502
customer.tbl.2 lineitem.tbl.201 lineitem.tbl.311 lineitem.tbl.421 lineitem.tbl.70 orders.tbl.174 orders.tbl.284 orders.tbl.394 orders.tbl.503
customer.tbl.3 lineitem.tbl.202 lineitem.tbl.312 lineitem.tbl.422 lineitem.tbl.71 orders.tbl.175 orders.tbl.285 orders.tbl.395 orders.tbl.504
customer.tbl.4 lineitem.tbl.203 lineitem.tbl.313 lineitem.tbl.423 lineitem.tbl.72 orders.tbl.176 orders.tbl.286 orders.tbl.396 orders.tbl.505
customer.tbl.5 lineitem.tbl.204 lineitem.tbl.314 lineitem.tbl.424 lineitem.tbl.73 orders.tbl.177 orders.tbl.287 orders.tbl.397 orders.tbl.506
customer.tbl.6 lineitem.tbl.205 lineitem.tbl.315 lineitem.tbl.425 lineitem.tbl.74 orders.tbl.178 orders.tbl.288 orders.tbl.398 orders.tbl.507
customer.tbl.7 lineitem.tbl.206 lineitem.tbl.316 lineitem.tbl.426 lineitem.tbl.75 orders.tbl.179 orders.tbl.289 orders.tbl.399 orders.tbl.508
customer.tbl.8 lineitem.tbl.207 lineitem.tbl.317 lineitem.tbl.427 lineitem.tbl.76 orders.tbl.18 orders.tbl.29 orders.tbl.4 orders.tbl.509
customer.tbl.9 lineitem.tbl.208 lineitem.tbl.318 lineitem.tbl.428 lineitem.tbl.77 orders.tbl.180 orders.tbl.290 orders.tbl.40 orders.tbl.51
lineitem.tbl.1 lineitem.tbl.209 lineitem.tbl.319 lineitem.tbl.429 lineitem.tbl.78 orders.tbl.181 orders.tbl.291 orders.tbl.400 orders.tbl.510
lineitem.tbl.10 lineitem.tbl.21 lineitem.tbl.32 lineitem.tbl.43 lineitem.tbl.79 orders.tbl.182 orders.tbl.292 orders.tbl.401 orders.tbl.511
lineitem.tbl.100 lineitem.tbl.210 lineitem.tbl.320 lineitem.tbl.430 lineitem.tbl.8 orders.tbl.183 orders.tbl.293 orders.tbl.402 orders.tbl.512
lineitem.tbl.101 lineitem.tbl.211 lineitem.tbl.321 lineitem.tbl.431 lineitem.tbl.80 orders.tbl.184 orders.tbl.294 orders.tbl.403 orders.tbl.52
lineitem.tbl.102 lineitem.tbl.212 lineitem.tbl.322 lineitem.tbl.432 lineitem.tbl.81 orders.tbl.185 orders.tbl.295 orders.tbl.404 orders.tbl.53
lineitem.tbl.103 lineitem.tbl.213 lineitem.tbl.323 lineitem.tbl.433 lineitem.tbl.82 orders.tbl.186 orders.tbl.296 orders.tbl.405 orders.tbl.54
lineitem.tbl.104 lineitem.tbl.214 lineitem.tbl.324 lineitem.tbl.434 lineitem.tbl.83 orders.tbl.187 orders.tbl.297 orders.tbl.406 orders.tbl.55
lineitem.tbl.105 lineitem.tbl.215 lineitem.tbl.325 lineitem.tbl.435 lineitem.tbl.84 orders.tbl.188 orders.tbl.298 orders.tbl.407 orders.tbl.56
lineitem.tbl.106 lineitem.tbl.216 lineitem.tbl.326 lineitem.tbl.436 lineitem.tbl.85 orders.tbl.189 orders.tbl.299 orders.tbl.408 orders.tbl.57
lineitem.tbl.107 lineitem.tbl.217 lineitem.tbl.327 lineitem.tbl.437 lineitem.tbl.86 orders.tbl.19 orders.tbl.3 orders.tbl.409 orders.tbl.58
lineitem.tbl.108 lineitem.tbl.218 lineitem.tbl.328 lineitem.tbl.438 lineitem.tbl.87 orders.tbl.190 orders.tbl.30 orders.tbl.41 orders.tbl.59
lineitem.tbl.109 lineitem.tbl.219 lineitem.tbl.329 lineitem.tbl.439 lineitem.tbl.88 orders.tbl.191 orders.tbl.300 orders.tbl.410 orders.tbl.6
lineitem.tbl.11 lineitem.tbl.22 lineitem.tbl.33 lineitem.tbl.44 lineitem.tbl.89 orders.tbl.192 orders.tbl.301 orders.tbl.411 orders.tbl.60
lineitem.tbl.110 lineitem.tbl.220 lineitem.tbl.330 lineitem.tbl.440 lineitem.tbl.9 orders.tbl.193 orders.tbl.302 orders.tbl.412 orders.tbl.61
lineitem.tbl.111 lineitem.tbl.221 lineitem.tbl.331 lineitem.tbl.4 ...

2. Batch upload with tbloader

$ for data_file in 'ls orders.tbl*|sort'; do
> date
> tbloader userid=tpch/tpch control=orders.ctl data=$data_file log=./loader/$data_file.log bad=./loader/$data_file.bad direct=Y >> ./orders.log
> date
> done