Google sheets có bị chậm với dữ liệu lớn (3 người xem)

[nguyendu277]

Mình đang muốn chuyển từ làm việc trên Excel truyền thống sang làm việc online theo nhóm với 1 bảng tính khoảng 6sheet, mỗi sheet sẽ có dữ liệu sử dụng hơn 1000 dòng với 30 cột, công thức ở sheet báo cáo chủ yếu là Sumif. Mình tim hiểu thấy chưa thể nhúng VBA vào nên khả năng sheet báo cáo sẽ làm theo kiểu truyền thống của Excel nên sợ sẽ bị nặng khi dữ liệu lớn quá.

Bạn nào có kinh nghiệm rồi chia sẻ mình với. Thanks các bạn

 

[Nguyễn Duy Tuân]

Mình đang muốn chuyển từ làm việc trên Excel truyền thống sang làm việc online theo nhóm với 1 bảng tính khoảng 6sheet, mỗi sheet sẽ có dữ liệu sử dụng hơn 1000 dòng với 30 cột, công thức ở sheet báo cáo chủ yếu là Sumif. Mình tim hiểu thấy chưa thể nhúng VBA vào nên khả năng sheet báo cáo sẽ làm theo kiểu truyền thống của Excel nên sợ sẽ bị nặng khi dữ liệu lớn quá.

Bạn nào có kinh nghiệm rồi chia sẻ mình với. Thanks các bạn

Google sheet sinh ra để lưu chữ dữ liệu ở mức độ hạn chế. Và nó không ưu hỗ trợ tốt ghi người dùng mở làm việc trực tiếp, chỉ tốt hơn nếu tác động thông qua môi trường lập lập trình để nhận và gán giá trị cho nó.
Nếu bạn đang làm Excel với số dòng vài chục ngàn trở lên, số báo cáo nhiều mà bạn lẫm làm trên Excel tốt, nếu mang vào Google là PHÁ SẢN.

Nguyên lý của Google Sheet: Khi client (người dùng) mở một file thì google sẽ load dữ liệu từ Google Server về dần vào các ô, tại môi trường client là bản sao không đầu đủ của nó trên server. Vì l;ý do qua mạng nên tốc độ sẽ rất chậm so với Excel mở tại máy tính LOCAL hoặc mạng LAN.

Nguyên lý của Excel: Khi người dùng mở file thì Excel load toàn bộ dữ liệu các sheet vào bộ nhớ tại máy đó, quá trình này chỉ là tốc độ ghi chép dữ liệu từ ổ điwã vào bộ nhớ thông thường. Các thao tác của người dùng và dữ liệu là thao táo vào bộ nhớ máy tính đó, nó được lưu vaofa ổ đĩa khi người dùng nhấn SAVE. Vì lý do này nên Excel bao giờ cũng chạy nhanh hơn Google. Nếu nói đến giải thuật khác nữa thì Excel có tốc độ chạy mịn và nhanh.

Nói tóm lại Google Sheet chỉ nên dùng với dạng lưu trữ đơn giản, không lớn, không cần tác nghiệp với ứng dụng văn phòng.

 

[yeudoi]

Mình đang muốn chuyển từ làm việc trên Excel truyền thống sang làm việc online theo nhóm với 1 bảng tính khoảng 6sheet, mỗi sheet sẽ có dữ liệu sử dụng hơn 1000 dòng với 30 cột, công thức ở sheet báo cáo chủ yếu là Sumif. Mình tim hiểu thấy chưa thể nhúng VBA vào nên khả năng sheet báo cáo sẽ làm theo kiểu truyền thống của Excel nên sợ sẽ bị nặng khi dữ liệu lớn quá.

Bạn nào có kinh nghiệm rồi chia sẻ mình với. Thanks các bạn

Như vậy sao gọi là lớn được phải trên 30000 dòng cơ. Mình đã làm cho 1 bạn file mỗi ngày nhập 300 dòng nhưng chạy vù vù.

 

[nguyendu277]

Mình không muốn ngoài vòng cuộc chơi điện toán đám mây nên nhất định lần này sẽ mạnh dạn thò 1 chân vào, chắc chắn hạ tầng truyền dẫn internet ở VN trong tương lai gần sẽ được cải thiện, trước mắt mình sẽ nghiên cứu về nó và sử dụng với 1 vài công việc nhẹ nhàng trước để tích lũy kiến thức và kinh nghiệm. Cám ơn các bạn đã chia sẻ, chắc chắn thời gian tới sẽ cần sự giúp đỡ thêm của mọi người

 

[Vô danh Tiểu tốt]

Tôi không dám đem kinh nghiệm dùng mạng Lan với máy cá nhân đi đánh giá một hệ thống máy tính kết nối khổng lồ và phức tạp như Google. Tuy nhiên dựa vào trải nghiệm của tôi trên một hệ thống bèo hơn cả Google thì lại cho cái nhìn khác.

Trước đây tôi có làm một CSDL chạy trên máy cá nhân thì mỗi query nhiều khi chạy đến hơn 30s. Đến khi upload nó lên một cái host miễn phí (đồ chùa thì so với đồ tốn phí thì tệ còn hơn cỡ nào ) thì chỉ mất cỡ 2, 3s trong khi cái host ấy gánh vác cả mấy vạn CSDL, ứng dụng của người khác nữa.

Tôi nghĩ giới hạn hiện tại của GoogleSheet cõ lẽ nằm ở khả năng hiển thị kết quả tức thời do phụ thuộc vào tốc độ của truy cập internet, chứ còn về tính toán thì chắc chắn là ăn đứt mọi máy tính cá nhân.

 

[nguyendu277]

Tôi đang tìm hiểu và so sánh để lựa chọn giải pháp làm việc online trên bảng tính theo nhóm cho mình thì thấy.
Với Excel online của Microsoft thì hay ở chỗ upload thẳng file Excel của mình lên OneDrive là có thể làm việc được luôn, và tốc độ xử lý rất nhanh nhưng ko thiết lập được quyền của từng User đối với từng vùng của trang tính
Đối với GG Sheet của Google thì tốc độ xử lý chậm hơn, không tương thích hoàn toàn với file Excel nhưng khả năng phân quyền nhập liệu vào bảng tính mạnh hơn Excel Online.
Hiện tại đang rất phân vân khi phải lựa chọn.

 

[Nguyễn Duy Tuân]

Tôi đang tìm hiểu và so sánh để lựa chọn giải pháp làm việc online trên bảng tính theo nhóm cho mình thì thấy.
Với Excel online của Microsoft thì hay ở chỗ upload thẳng file Excel của mình lên OneDrive là có thể làm việc được luôn, và tốc độ xử lý rất nhanh nhưng ko thiết lập được quyền của từng User đối với từng vùng của trang tính
Đối với GG Sheet của Google thì tốc độ xử lý chậm hơn, không tương thích hoàn toàn với file Excel nhưng khả năng phân quyền nhập liệu vào bảng tính mạnh hơn Excel Online.
Hiện tại đang rất phân vân khi phải lựa chọn.

Nếu bạn quan tâm phân quyền cho từng user đc xem file nào, sheet nào, vùng nào, chỉ đọc hay đc sửa, có chạy macro thì cả hai Excel và Google sheet hiện tại đều không làm đc. Với Microsoft Excel thì đc với điều kiện cài Add-in A-Tools.

 

[nguyendu277]

Nếu bạn quan tâm phân quyền cho từng user đc xem file nào, sheet nào, vùng nào, chỉ đọc hay đc sửa, có chạy macro thì cả hai Excel và Google sheet hiện tại đều không làm đc. Với Microsoft Excel thì đc với điều kiện cài Add-in A-Tools.

Add-in-A-Tools mình cũng đang nghiên cứu và thấy cũng là 1 giải pháp phù hợp với DN mình hiện tại
Hiện tại công ty mình đang giao nhiệm vụ cho mình nghiên cứu và đề xuất giải pháp để có thể thu thập báo cáo tại thời gian thực để thông tin điều hành hoặt động sản xuất kinh doanh được kịp thời hơn. Hiện nay chế độ báo cáo DN mình chỉ 1 thời điểm trong ngày
Trước kia cũng đã từng mời một vài đơn vị chuyên về phần mềm về khảo sát để thực hiện dự án xong đều thất bại bởi lý do nghe rất là buồn đó là đơn vị mình chưa chuẩn hóa được hết mọi nghiệp vụ, biểu mẫu, một phần do sức ỳ của DN, 1 phần do bị chi phối bởi Tập đoàn mẹ rất nhiều dẫn tới cơ chế, chính sách thay đổi liên tục, phần mềm đóng gói luôn luôn phải đi theo sau để chỉnh sửa dẫn tới dự án thất bại và lại dùng Excel bởi Excel ít nhiều DN mình có thể làm chủ đc nên có thể tự sửa lại cho kịp thời.
Với Add-in A-Tools mình chỉ do dự một vấn đề là công bố được báo cáo đó trên nền web ở thời gian thực nữa thôi

 

[Nguyễn Duy Tuân]

Add-in-A-Tools mình cũng đang nghiên cứu và thấy cũng là 1 giải pháp phù hợp với DN mình hiện tại
Hiện tại công ty mình đang giao nhiệm vụ cho mình nghiên cứu và đề xuất giải pháp để có thể thu thập báo cáo tại thời gian thực để thông tin điều hành hoặt động sản xuất kinh doanh được kịp thời hơn. Hiện nay chế độ báo cáo DN mình chỉ 1 thời điểm trong ngày
Trước kia cũng đã từng mời một vài đơn vị chuyên về phần mềm về khảo sát để thực hiện dự án xong đều thất bại bởi lý do nghe rất là buồn đó là đơn vị mình chưa chuẩn hóa được hết mọi nghiệp vụ, biểu mẫu, một phần do sức ỳ của DN, 1 phần do bị chi phối bởi Tập đoàn mẹ rất nhiều dẫn tới cơ chế, chính sách thay đổi liên tục, phần mềm đóng gói luôn luôn phải đi theo sau để chỉnh sửa dẫn tới dự án thất bại và lại dùng Excel bởi Excel ít nhiều DN mình có thể làm chủ đc nên có thể tự sửa lại cho kịp thời.
Với Add-in A-Tools mình chỉ do dự một vấn đề là công bố được báo cáo đó trên nền web ở thời gian thực nữa thôi

Đẩy số liệu lên web không khó. Từ máy chủ chạy A-Tools bên Bluesofts sẽ viết đoạn macro đẩy dữ liệu cần len web vào CSDL của web, kỹ thuật làm website đẩy dữ liệu len web là xong. Nếu bạn thống nhất đc lựa chọn giải pháp với cty thì liên hệ với mình là ok nhé.

 

[nguyendu277]

Đẩy số liệu lên web không khó. Từ máy chủ chạy A-Tools bên Bluesofts sẽ viết đoạn macro đẩy dữ liệu cần len web vào CSDL của web, kỹ thuật làm website đẩy dữ liệu len web là xong. Nếu bạn thống nhất đc lựa chọn giải pháp với cty thì liên hệ với mình là ok nhé.

Mình đang lập kế hoạch lựa chọn giải pháp để trình lãnh đạo lựa chọn, hi vọng sẽ có sự hợp tác giữa 2 đơn vị trong thời gian tới.

 

[nguyencanh_92]

Đẩy số liệu lên web không khó. Từ máy chủ chạy A-Tools bên Bluesofts sẽ viết đoạn macro đẩy dữ liệu cần len web vào CSDL của web, kỹ thuật làm website đẩy dữ liệu len web là xong. Nếu bạn thống nhất đc lựa chọn giải pháp với cty thì liên hệ với mình là ok nhé.

Excel Online của Microsoft có mất phí không nhỉ
Bên mình nhiều máy tính sử dụng ko cố định, nhân viên thay đổi khá nhiều thì có sử dụng được A tool ko?

 

[Nguyễn Duy Tuân]

Excel Online của Microsoft có mất phí không nhỉ
Bên mình nhiều máy tính sử dụng ko cố định, nhân viên thay đổi khá nhiều thì có sử dụng được A tool ko?

Trong trường hợp nhân viên nghỉ việc thì phía không ty mua bản quyền phải báo lại bên mình để gỡ bỏ license ở máy nhân viên nghỉ việc rồi chuyển sang máy mới nhé.

 

[hic1802]

Chào mọi người, chào a Tuân,
Bên e cũng đang sử dụng Atools bên a cho công việc và nhận thấy rất tốt. Em cũng có nghiên cứu cả về Google sheet. Mặc dù google sheet chưa thể đáp ứng được như Excel kết hợp với Atools nhưng e thấy nó cũng rất hay. Lúc trước e có thấy a Tuân có giới thiệu đồng bộ giữa Excel và Google sheet mà lâu rồi không thấy a cho ra đời nhỉ. E vẫn rất mong chờ sản phẩm đó của a. @Nguyễn Duy Tuân

 

[Nguyễn Duy Tuân]

Chào mọi người, chào a Tuân,
Bên e cũng đang sử dụng Atools bên a cho công việc và nhận thấy rất tốt. Em cũng có nghiên cứu cả về Google sheet. Mặc dù google sheet chưa thể đáp ứng được như Excel kết hợp với Atools nhưng e thấy nó cũng rất hay. Lúc trước e có thấy a Tuân có giới thiệu đồng bộ giữa Excel và Google sheet mà lâu rồi không thấy a cho ra đời nhỉ. E vẫn rất mong chờ sản phẩm đó của a. @Nguyễn Duy Tuân

Cảm ơn em đã dùng A-Tools và chờ đợi bản nâng cấp. Về công nghệ đồng bộ giữa Excel và Google Sheet anh đã làm được trên A-Tools nhưng tốc độ bị chậm nên anh chưa chính thức đóng gói. Anh cần thêm thời gian để cải tiến tốc độ thật tốt mới đưa vào phiên bản mới.

 

[anhtuanle123]

mình cũng đang gặp vấn đề này trong google script,
thấy trên mạng có kỹ thuật xử lý song song, mà chưa lĩnh hội được @@

 

[befaint]

mình cũng đang gặp vấn đề này trong google script,
thấy trên mạng có kỹ thuật xử lý song song, mà chưa lĩnh hội được @@

Gớm vậy. Bạn úp cái script đó lên đây xem nào.
Script mà tham chiếu từng cell thì rùa bò bằng 1 chân rồi.

 

[anhtuanle123]

mình đọc file txt từ google drive
tách ra từng cột rùi up lên sheet thôi !
đọc txt rùi tách cột khoảng 1 giây !
còn up lên sheet thì khoảng 2 phút @@

file txt ngang khoảng 30 cột, cao khoảng 70000 dòng thôi ah

nói chung mọi cái xử lý trên mảng tạm, rùi dùng dòng code bên dưới đẩy ra ngoài sheet, riêng dòng này xử lý khoảng 2 phút !
sheet.getRange(1,1,rows,cols).setValues(data1); // xuất kết quả

note : à mà thôi , mình code đc đoạn chạy // rùi , than kiu @@