آرشیو برچسب: تکرار دسته‌ای

تیم‌های داده هر شب فایل‌های CSV را به‌صورت دستی از SQL Server داخلی (on-prem) صادر می‌کنند، آن‌ها را در S3 آپلود می‌کنند، سپس به Snowflake وارد می‌کنند. این فرایند ۳ ساعت طول می‌کشد، ماهی یک‌بار خراب می‌شود، و گزارش‌های صبحگاهی را تا زمانی که کسی خط لوله‌ی ازکارافتاده را تعمیر کند، مسدود می‌کند. سه روش […]