Cara membuka file excel besar

Kami membahas penggunaan Power Query di Excel untuk csv yang sangat besar dan kekurangannya. Diikuti dengan solusi Bring Your Own Database dan kemudahan menggunakan Dropbase untuk menyelesaikan semua teka-teki flat file Anda

Terkadang, batas juta baris Excel jauh di bawah yang Anda butuhkan untuk pekerjaan Anda. Anda juga dapat mengalami kelesuan, kesalahan pemformatan, dan crash acak jauh di bawah batas. Jadi, apa yang dapat Anda lakukan jika Anda memiliki file data yang memiliki hampir atau lebih dari 1.048.576 baris? . Pada artikel ini, kita akan membahas trik Excel untuk bekerja dengan csv yang sangat besar, diikuti dengan menyelesaikan masalah untuk membersihkan file besar terlebih dahulu.

Cara memanfaatkan Power Query untuk bekerja dengan file csv besar

1. Temukan file sumber data Teks/CSV Anda. Dalam metode ini, Anda tidak dapat mengubah nama file atau memindahkan file sumber setelah membuat kueri. Jadi pastikan file sumber Anda memiliki nama yang bagus dan Anda dapat mengaksesnya
2. Buka Excel dan arahkan ke Data > Get & Transform Data > From Text/CSV. Ini akan membuka browser file di mana Anda dapat memilih file sumber Anda. Klik Impor
3. Inilah bagian penting pertama. setelah jendela pratinjau data terbuka, klik panah kecil di samping Muat untuk membuka menu dropdown dan klik Muat Ke

4. Ini akan membuka jendela pop-up Impor Data. Karena file Excel Anda tidak dapat menangani seluruh file, opsi apa pun selain Tabel akan berfungsi. Laporan PivotTable dan PivotChart adalah untuk membuat ringkasan Pivot dari data Anda. Opsi Hanya Buat Koneksi memungkinkan Anda membuat kueri data dengan Power Query

5. Yang penting, centang kotak Tambahkan data ini ke Model Data jika Anda berencana menggabungkan tabel yang berbeda dengan cara apa pun

Model Data di Excel adalah kumpulan tabel dalam Daftar Bidang. Menambahkan tabel ke Model Data memungkinkan Anda membangun hubungan di antara mereka—persis seperti database relasional

6. Setelah sedikit (atau banyak) pemuatan, Anda harus memuat semua baris dan siap untuk dianalisis

Kelemahan menggunakan Excel

Menggunakan fitur Dapatkan Data Excel sangat bagus jika Anda baik-baik saja dengan data dasar Anda tetap sebagai csv dan ingin melakukan analisis cepat dan kotor di Excel. Opsi ini berfungsi paling baik jika Anda harus bekerja sekali dengan file data yang besar. Namun, opsi ini gagal karena sejumlah alasan

1. Power Query tidak melakukan pengulangan dengan baik. Jika Anda ingin menerapkan langkah-langkah transformasi yang sama pada file sumber yang lebih baru, maka Anda harus melakukan langkah-langkah tersebut dari awal lagi atau menulis sedikit kode M untuk mengarahkan kueri ke file lain
2. Menggunakan Power Query mengunci Anda ke Excel. Menggunakan Excel mencegah Anda mengekspor langkah transformasi Anda ke alat lain. Langkah-langkah yang diubah hanya ada sebagai kueri di atas file asli dan Anda tidak dapat menyalurkan hasilnya ke alat lain. Kerugian yang cukup besar jika Anda adalah bagian dari tim
3. Excel tidak menyimpan versi file sumber yang diedit. Anda mungkin menyadari saat menggunakan Power Query bahwa semua langkah transformasi Anda hanya membuat tampilan data yang diubah. File sumber dasar Anda tidak diubah. Ini bagus jika file masuk Anda dibersihkan dan bertindak sebagai sumber kebenaran. Tetapi bagaimana jika file tersebut tidak dibersihkan atau diformat sejak awal?

Power Query tidak melakukan pengulangan dengan baik, Anda dikunci ke Excel, dan file sumber tidak akan pernah bisa dibersihkan dari dalam Excel untuk koneksi downstream

→ Kemudian, Anda perlu memasukkan file Anda ke dalam database dan membersihkan file di sana. Ada dua cara untuk melakukan ini

Menyiapkan database Anda sendiri

Opsi pertama adalah mengatur server database Anda sendiri. Ada banyak, banyak keputusan yang harus dibuat untuk opsi ini

• Keputusan pertama adalah penyimpanan yang Anda punya 3 pilihan luas
• Server pribadi + perangkat lunak basis data. Dalam opsi ini, Anda memiliki atau akan memiliki server khusus tempat Anda akan menginstal perangkat lunak basis data. Anda akan memiliki keamanan untuk selalu mengetahui di mana data Anda berada, tetapi ini adalah opsi yang paling menuntut secara teknis dan paling tidak dapat diskalakan
• Server awan + perangkat lunak basis data. Anda dapat membeli/menyewa ruang server dari penyedia seperti Cloudware, tempat Anda dapat menginstal perangkat lunak database. Jelas lebih mudah disiapkan daripada opsi sebelumnya, tetapi Anda akan dikenakan biaya yang konsisten
• Basis data awan. Sejauh ini opsi yang paling populer dan termudah adalah dengan menggunakan database terkelola. Ini memiliki nama yang akrab seperti Amazon Web Services (AWS) dan Microsoft Azure. Anda dapat menemukan daftar yang terbaik di Simplilearn
• Keputusan kedua adalah memilih perangkat lunak server database (jika Anda membutuhkannya). Setiap perangkat lunak cocok untuk berbagai tingkat skala dan hadir dengan harga yang bervariasi
• Untuk dua pilihan pertama di langkah sebelumnya, Anda memiliki tempat yang luas untuk perangkat lunak server apa yang dapat Anda instal. Anda bisa mulai dengan perangkat lunak gratis seperti MySQL dan lihat apakah opsi ini cocok untuk Anda
• Untuk basis data cloud, perangkat lunak yang dapat Anda akses bergantung pada penyedia layanan tertentu meskipun biasanya Anda memiliki banyak pilihan

Dan setelah Anda membuat keputusan itu dan mengatur database Anda, Anda dapat mengimpor file sumber besar Anda dan menanyakannya menggunakan SQL untuk mengatur data

Menyiapkan database Anda sendiri adalah yang terbaik jika Anda memiliki pengetahuan teknis untuk menavigasi berbagai opsi dan mengeksekusi. Opsi ini paling baik jika waktu penyetelan tidak menjadi kendala dan Anda ingin mempelajari manajemen basis data di sepanjang jalan

Cara menggunakan Dropbase untuk bekerja dengan file csv besar

Tetapi bagaimana jika Anda ingin bekerja dengan csv besar Anda sekarang tanpa mengganggu tim teknis Anda?

1. Anda menyeret dan melepaskan file csv Anda ke Dropbase
2. Terapkan langkah transformasi apa pun dan simpan sebagai pipeline
3. Klik Muat ke Basis Data

Itu dia. Anda sekarang memiliki kredensial akses ke database setelah Anda menavigasi ke Workspace Settings. Dengan kredensial ini, Anda dapat menghubungkan alat BI favorit Anda untuk membuat wawasan berbasis data atau mengunduh file. Lihat video singkat ini untuk menjalankan Dropbase dengan cepat. Jika Anda ingin mencoba kemampuan Dropbase untuk bekerja dengan csv besar, daftar uji coba gratis di sini

Bagaimana Anda membuka file Excel yang terlalu besar?

Bagaimana saya bisa membuka file Excel besar tanpa macet?

Bagaimana cara membuka file Excel 800 MB?

Bagaimana cara membuka lebih dari 1048576 baris di Excel?