利用php脚本+redis，生成CSV测试文件，重复率为20%

<?php
/**
 * Created by PhpStorm.
 * User: 1612953660@qq.com
 * Date: 2019/2/28
 */
// 头部标题
$csv_header = ['数据'];
$redis = new redis();
$redis->connect('127.0.0.1',6379);

// 内容
/**
 * 开始生成
 * 1. 首先将数组拆分成以逗号（注意需要英文）分割的字符串
 * 2. 然后加上每行的换行符号，这里建议直接使用PHP的预定义
 * 常量PHP_EOL
 * 3. 最后写入文件
 */
// 打开文件资源，不存在则创建
$fp = fopen('data_test.csv','a');
// 处理头部标题
$header = implode(',', $csv_header) . PHP_EOL;
// 处理内容
$content = '';
$total = 100000;//总条数
$num1 = 0.8*$total;//不重复条数
$num2 = $total-$num1;//重复条数
for($i=0;$i<$num1;$i++){
   $data = make_password();
   $content .=  $data . PHP_EOL;
   $redis->SADD('tempdata',$data);
}
$data2 = $redis->SRANDMEMBER('tempdata',$num2);
foreach ($data2 as $k => $v) {
     $content .= $v . PHP_EOL;
}

// 拼接
$csv = $header.$content;
// 写入并关闭资源
fwrite($fp, $csv);
fclose($fp);
//清除redis缓存
$redis->DEL('tempdata');
/*
*生成随机64位测试数据*
*@param $length
*/
function make_password( $length = 64 )
{
    // 密码字符集，可任意添加你需要的字符
    $chars = array('a', 'b', 'c', 'd', 'e', 'f', 'g', 'h',
    'i', 'j', 'k', 'l','m', 'n', 'o', 'p', 'q', 'r', 's',
    't', 'u', 'v', 'w', 'x', 'y','z', 'A', 'B', 'C', 'D',
    'E', 'F', 'G', 'H', 'I', 'J', 'K', 'L','M', 'N', 'O',
    'P', 'Q', 'R', 'S', 'T', 'U', 'V', 'W', 'X', 'Y','Z',
    '0', '1', '2', '3', '4', '5', '6', '7', '8', '9');
    // 在 $chars 中随机取 $length 个数组元素键名
//    $keys = array_rand($chars, 1); 
    $password = '';
    for($i = 0; $i < $length; $i++)
    {
        //$keys = array_rand($chars, 1);  
        // 将 $length 个数组元素连接成字符串
        $password .= $chars[array_rand($chars, 1)];
    }
    return $password;
}