الطريقة الأكثر فعالية لتحميل الملفات الثنائية المنسقة في بيثون

Question

لديّ ملفات ثنائية لا يزيد حجمها عن 20 ميجابايت والتي تحتوي على قسم رأس ثم قسم بيانات يحتوي على تسلسلات من Uchars. لديّ numpy ، scipy ، وما إلى ذلك ، وكل مكتبة لديها طرق مختلفة للتحميل في البيانات. أي اقتراحات للطرق الأكثر كفاءة يجب أن أستخدمها؟

Answer 1

بنية يجب أن تعمل في قسم الرأس ، بينما Numpy's memmap سيكون فعالًا لقسم البيانات إذا كنت ستتعامل معها في Numpy على أي حال. ليست هناك حاجة للتأكيد على عدم اتساق هنا. كلتا الطريقتين متوافقة ، فقط استخدم الأداة الصحيحة لكل وظيفة.

Answer 2

استخدم ال بنية الوحدة النمطية ، أو ربما وحدة مخصصة مكتوبة في C إذا كان الأداء أمرًا بالغ الأهمية.

Answer 3

BDEC يبدو واعدا.

Answer 4

لقد وجدت ذلك array.fromfile هي أسرع الطرق للبيانات المتجانسة.