Pukal mengimport fail CSV ke MongoDB menggunakan mongoose dengan node.js

Topik ini adalah satu yang sangat menyeronokkan untuk saya. Ia agak biasa dalam banyak aplikasi web untuk menerima input pengguna dan menyimpan rekod tunggal ke pangkalan data anda. Tetapi bagaimana pula apabila pengguna anda (atau anda) ingin melakukan pelbagai sisipan dalam satu arahan? Berinteraksi dengan MongoDB. Jika anda tidak, saya akan mencadangkan membaca

Pengenalan kepada Mongoose untuk artikel MongoDB dan Node.js

pertama. Artikel ini menerangkan bagaimana Mongoose berinteraksi dengan MongoDB dengan mencipta skema yang kuat yang model dibuat dari. Sekiranya anda sudah mempunyai pemahaman yang baik tentang Mongoose, maka mari kita teruskan. Dalam command prompt, navigasi ke mana anda ingin menjadi tuan rumah aplikasi Node.js anda dan lakukan arahan berikut:

Menggunakan bendera bermaksud bahawa projek itu akan dimulakan dengan nilai lalai di tempat, jadi aplikasi akan bermula dengan

index.js

. Sebelum membuat dan menguraikan fail CSV, kita perlu melakukan beberapa persediaan awal terlebih dahulu. Kami mahu menjadikan aplikasi web ini; Untuk melakukan itu, anda akan menggunakan pakej Express untuk mengendalikan semua persediaan pelayan Nitty-Gritty. Dalam command prompt anda, pasang Express dengan menjalankan arahan berikut:

Oleh kerana aplikasi web ini akan menerima fail melalui borang web, kami juga akan menggunakan muat naik fail Express Sub-Package Express. Mari pasang sekarang juga:

mkdir csvimport<br>cd csvimport<br>npm init -y<br>

-y Kami telah melakukan konfigurasi awal yang mencukupi untuk menyediakan aplikasi web dan membuat halaman web asas yang akan membuat borang muat naik fail. Fail ini menetapkan pelayan web. 

npm install express --save<br>

Fail ini mengimport Express dan perpustakaan muat naik fail ekspres, mengkonfigurasi aplikasi web untuk menggunakan muat naik fail, dan mendengar pada port 8080. Laluan ini mengembalikan fail index.html

yang mengandungi borang web yang akan membolehkan pengguna memuat naik fail CSV. Ini bermakna anda telah berjaya disambungkan ke pelayan Web. Fail ini mencipta borang untuk memuat naik fail CSV.

1. Pautan ke /template yang, apabila diklik, akan memuat turun templat CSV yang boleh dihuni dengan maklumat yang akan diimport.
adalah kaedah pengekodan yang digunakan dalam HTML apabila borang mengandungi muat naik fail. 
2. encType Apabila anda melawat multipart/form-data http: // localhost: 8080/file anda akan melihat borang yang dibuat lebih awal. Jika anda membaca artikel Pengenalan kepada Mongoose , skema pengarang telah diwujudkan. Dalam artikel ini, anda akan mencipta semula skema ini dan membenarkan pengguna untuk mengimport koleksi pengarang ke dalam pangkalan data MongoDB. Mari kita lihat skema pengarang. Sebelum kita berbuat demikian, anda mungkin meneka -kita perlu memasang pakej mongoose: multipart/form-data

Membuat skema dan model

Fokus pada membuat templat CSV yang boleh dimuat turun dengan mengklik pada pautan templat. Untuk membantu dengan penjanaan templat CSV, kami akan menggunakan pakej JSON2CSV

. Pakej NPM ini menukarkan JSON ke CSV dengan tajuk lajur dan ujung baris yang betul. Anda akan menambahkan kod baru ini untuk laluan template ke fail index.js

sebelum ini yang dibuat:

Perkara pertama yang dilakukan oleh kod ini termasuk fail

mkdir csvimport<br>cd csvimport<br>npm init -y<br>

template.js

Laluan ini akan memanggil fungsi

dalam template.js

fail. Ia kemudian mencipta dan mengeksport fungsi . Fungsi ini menerima objek permintaan dan tindak balas dari pelayan ekspres. Ini boleh dilakukan dalam salah satu daripada dua cara. Cara pertama (yang dilakukan dalam tutorial ini) adalah untuk membuat senarai statik bidang yang akan dimasukkan ke dalam templat. Cara kedua adalah untuk membuat senarai medan secara dinamik dengan mengekstrak sifat -sifat dari skema pengarang.

mkdir csvimport<br>cd csvimport<br>npm init -y<br>

Ia akan menjadi idea yang bagus untuk menggunakan kaedah dinamik, tetapi ia menjadi agak rumit apabila anda tidak mahu memasukkan pelbagai sifat dari skema ke templat CSV. Dalam kes ini, templat CSV kami tidak termasuk sifat _id dan created kerana ini akan dihuni melalui kod. Walau bagaimanapun, jika anda tidak mempunyai medan yang anda ingin mengecualikan, kaedah dinamik akan berfungsi juga. Objek

ini akan menjadi hasil laluan ini.

http: // localhost: 8080/

Pada penyemak imbas web anda, borang web akan dipaparkan dengan pautan untuk memuat turun templat. Mengklik pautan untuk memuat turun template akan membolehkan anda memuat turun fail . Fail ini akan dihuni sebelum dimuat naik. dan membentuk gambar. Mari kita dapatkan daging dan kentang contoh ini dan menghuraikan fail CSV itu. Fail json2csv index.js csv memerlukan beberapa pengemaskinian untuk menyambung ke MongoDB dan membuat laluan pos baru yang akan menerima muat naik fail:

res dengan sambungan pangkalan data dan laluan pos baru yang dikonfigurasikan, sudah tiba masanya untuk menghuraikan fail CSV. Nasib baik, terdapat beberapa perpustakaan hebat yang membantu dengan pekerjaan ini. Untuk tutorial ini, kami akan menggunakan pakej yang boleh dipasang dengan perintah berikut:

Laluan pos dibuat sama dengan laluan templat, yang menyeru fungsi dari muatload.js fail. Ia tidak perlu meletakkan fungsi ini dalam fail berasingan; Walau bagaimanapun, adalah lebih baik untuk membuat fail berasingan untuk laluan ini kerana ia membantu mengekalkan kod yang bagus dan teratur. Tiga baris pertama termasuk pakej yang diperlukan yang diperlukan untuk menghuraikan dan menyimpan data CSV.

Seterusnya, fungsi post ditakrifkan dan dieksport untuk digunakan oleh fail index.js . Di dalam fungsi ini adalah di mana sihir berlaku.

Fungsi pertama memeriksa bahawa terdapat fail yang terkandung dalam badan permintaan. Sekiranya tidak ada, ralat dikembalikan menunjukkan bahawa fail mesti dimuat naik.

Apabila fail telah dimuat naik, rujukan kepada fail disimpan ke pembolehubah yang dipanggil authorFile. Ini dilakukan dengan mengakses array files dan harta file dalam array. Properti file sepadan dengan nama nama input fail saya yang telah ditakrifkan terlebih dahulu dalam contoh index.html . Arahan ini akan digunakan untuk menyimpan data ke pangkalan data. Fungsi ini menerima fail CSV sebagai rentetan. Rentetan diekstrak dari harta

. Harta

mengandungi kandungan fail CSV yang dimuat naik. Ini kedua -duanya ditetapkan untuk authors. Ini memberitahu perpustakaan bahawa baris pertama fail CSV akan mengandungi tajuk dan baris kosong harus diabaikan. Acara

dipanggil sekali untuk setiap baris fail CSV. Acara ini mengandungi objek JavaScript data parsed.

fast-csv Objek dikemas kini untuk memasukkan sifat fromString skema pengarang dengan authorFile.data baru. Objek ini kemudiannya ditambahkan ke array data.

Apabila fail CSV telah dihuraikan sepenuhnya, acara fast-csv dicetuskan. Di dalam fungsi panggilan balik acara, kami akan memanggil fungsi headers pada model pengarang, lulus array ignoreEmpty ke sana. Jika tidak, mesej kejayaan dipaparkan kepada pengguna yang menunjukkan berapa banyak penulis telah dimuat naik dan disimpan ke pangkalan data. Hanya memuat naik beberapa rekod. Jika kes penggunaan anda memerlukan keupayaan untuk memuat naik beribu -ribu rekod, mungkin idea yang baik untuk menyimpan rekod dalam ketulan yang lebih kecil. true

Ini boleh dilakukan dalam beberapa cara. Sekiranya saya melaksanakannya, saya akan mencadangkan mengemas kini fungsi panggilan balik data untuk memeriksa panjang array penulis. Apabila array melebihi panjang yang ditetapkan, mis. 100, panggil fungsi Author.create pada array, dan kemudian tetapkan semula array untuk kosong. Ini kemudian akan menyimpan rekod dalam potongan 100. Mary adalah pemaju perisian yang berpusat di Lagos, Nigeria, dengan kepakaran dalam Node.js, JavaScript, MySQL, dan NoSQL Technologies.

Atas ialah kandungan terperinci Pukal mengimport fail CSV ke MongoDB menggunakan mongoose dengan node.js. Untuk maklumat lanjut, sila ikut artikel berkaitan lain di laman web China PHP!