57.大数据线性处理csdn数据(fread,fwrite) 百万数据秒读数据

• 创建结构体存储csdn数据

   struct csdn
   {
       char name[];
       char password[];
       char email[];
  
   };

• 对于分配的大小要先获取最大的长度,定义如下

   //姓名最大长度
   int namemax = -;
   //密码最大长度
   int passmax = -;
   //邮件最大长度
   int mailmax = -;

   //获取各部分最大长度
   void getmax(char *str)
   {
       //遍历,把所有'#'转化成'\0'
       for (char *p = str; *p != '\0'; p++)
       {
           if (*p == '#')
           {
               *p = '\0';
           }
       }
       //max1:姓名的长度
       int max1 = strlen(str);
       if (max1>namemax)
       {
           namemax = max1;
       }
       //max2:密码的长度
       char *pstr1 = str + strlen(str) + ;
       int max2 = strlen(pstr1);
       if (max2>passmax)
       {
           passmax = max2;
       }
  
       //max3:email的长度
       char *pstr2 = pstr1 + strlen(pstr1) + ;
       int max3 = strlen(pstr2);
       if (max3>mailmax)
       {
           mailmax = max3;
       }
   }

• fgets读取到的数据写入到结构体中

   //字符串初始化结构体
   void init(struct csdn *pdata, char *str)
   {
       //遍历,把所有'#'转化成'\0'
       for (char *p = str; *p != '\0';p++)
       {
           if (*p=='#')
           {
               *p = '\0';
           }
       }
       //把姓名copy到结构体中
       strcpy(pdata->name, str);
       //加字符串长度到字符串后一位'\0',再加1到下一个字符串起始位置
       char *pstr1 = str + strlen(str) + ;
       //把密码copy到结构体中
       strcpy(pdata->password, pstr1);
       char *pstr2 = pstr1 + strlen(pstr1) + ;
       //把email copy到结构体中
       strcpy(pdata->email, pstr2);
   }

• 读取文件并写入到结构体中,然后在把结构体写到文件中

   //写入数据
   void readfiletxt()
   {
       //读取文件
       FILE *pfr = fopen("csdn.txt", "r");
       //以二进制方式写文件
       FILE *pfw = fopen("csdn.bin", "wb");
  
       //如果打开失败则返回
       if (pfr==NULL)
       {
           return;
       }
       //否则写数据
       else
       {
           //如果没有到文件末尾
           while (!feof(pfr))
           {
               //存取读取到的数据
               char str[] = {  };
               //读取一行
               fgets(str, , pfr);
               //创建结构体
               struct csdn csdn1;
               //把读取到到的数据写到结构体中
               init(&csdn1, str);
               //把结构体写入文件
               fwrite(&csdn1, sizeof(struct csdn), , pfw);//写入
           }
  
       }
       //关闭文件
       fclose(pfr);
       fclose(pfw);
   }

• 测试代码

   void main()
   {
  
       FILE *pf = fopen("csdn.bin", "rb+");
       while ()
       {
           printf("请输入你要读取的第N个元素:");
           int N;
           scanf("%d", &N);
  
           struct csdn csdn1 = {};
           //移动到相应的结构体位置(注意:fwrite写入的必须是同一种类的,这样才好读取)
           fseek(pf, sizeof(struct csdn)*(N - ), SEEK_SET);
           //读取
           fread(&csdn1, sizeof(struct csdn), , pf);
           //输出结果
           printf("\n%s,%s,%s", csdn1.name, csdn1.password, csdn1.email);
       }
       fclose(pf);
       system("pause");
   }

完整代码:

 #define  _CRT_SECURE_NO_WARNINGS
 #include <stdio.h>
 #include <stdlib.h>

 //csdn结构体
 struct csdn
 {
     char name[];
     char password[];
     char email[];

 };
 //姓名最大长度
 int namemax = -;
 //密码最大长度
 int passmax = -;
 //邮件最大长度
 int mailmax = -;

 //字符串初始化结构体
 void init(struct csdn *pdata, char *str)
 {
     //遍历,把所有'#'转化成'\0'
     for (char *p = str; *p != '\0';p++)
     {
         if (*p=='#')
         {
             *p = '\0';
         }
     }
     //把姓名copy到结构体中
     strcpy(pdata->name, str);
     //加字符串长度到字符串后一位'\0',再加1到下一个字符串起始位置
     char *pstr1 = str + strlen(str) + ;
     //把密码copy到结构体中
     strcpy(pdata->password, pstr1);
     char *pstr2 = pstr1 + strlen(pstr1) + ;
     //把email copy到结构体中
     strcpy(pdata->email, pstr2);
 }

 //获取各部分最大长度
 void getmax(char *str)
 {
     //遍历,把所有'#'转化成'\0'
     for (char *p = str; *p != '\0'; p++)
     {
         if (*p == '#')
         {
             *p = '\0';
         }
     }
     //max1:姓名的长度
     int max1 = strlen(str);
     if (max1>namemax)
     {
         namemax = max1;
     }
     //max2:密码的长度
     char *pstr1 = str + strlen(str) + ;
     int max2 = strlen(pstr1);
     if (max2>passmax)
     {
         passmax = max2;
     }

     //max3:email的长度
     char *pstr2 = pstr1 + strlen(pstr1) + ;
     int max3 = strlen(pstr2);
     if (max3>mailmax)
     {
         mailmax = max3;
     }
 }

 //写入数据
 void readfiletxt()
 {
     //读取文件
     FILE *pfr = fopen("csdn.txt", "r");
     //以二进制方式写文件
     FILE *pfw = fopen("csdn.bin", "wb");

     //如果打开失败则返回
     if (pfr==NULL)
     {
         return;
     }
     //否则写数据
     else
     {
         //如果没有到文件末尾
         while (!feof(pfr))
         {
             //存取读取到的数据
             char str[] = {  };
             //读取一行
             fgets(str, , pfr);
             //创建结构体
             struct csdn csdn1;
             //把读取到到的数据写到结构体中
             init(&csdn1, str);
             //把结构体写入文件
             fwrite(&csdn1, sizeof(struct csdn), , pfw);//写入
         }

     }
     //关闭文件
     fclose(pfr);
     fclose(pfw);
 }

 void main()
 {

     FILE *pf = fopen("csdn.bin", "rb+");
     while ()
     {
         printf("请输入你要读取的第N个元素:");
         int N;
         scanf("%d", &N);

         struct csdn csdn1 = {};
         //移动到相应的结构体位置(注意:fwrite写入的必须是同一种类的,这样才好读取)
         fseek(pf, sizeof(struct csdn)*(N - ), SEEK_SET);
         //读取
         fread(&csdn1, sizeof(struct csdn), , pf);
         //输出结果
         printf("\n%s,%s,%s", csdn1.name, csdn1.password, csdn1.email);
     }
     fclose(pf);
     system("pause");
 }