最近在一个项目中,有一批绿洲图片上传失败的数据,需要重新处理 step1 利于阿里云命令下载 搜索关键字 根据时间段查询日志 下载到本地 阿里云下载命令参考使用如下: step2 下载到本地后,然后利于awk命令过滤截取关键信息 step3 … 继续阅读 阿里云日志下载到本地提取数据
标签:奇淫技巧
linux grep 非贪婪匹配
有时候搜索 grep 非贪婪匹配 grep -E 贪婪模式 可以在grep中使用perl语法,所以grep -P可以工作
大日志文件搜索数据
大日志文件搜索 例如搜索aaa 相关的日志 直接用grep “aaa”, 如果一个日志文件>10G, 那么搜起来相当慢 第一步 可以先搜索aaa相关行, 第二步,可以根据行数 搜索一端范围内的日志 放到一个临时 … 继续阅读 大日志文件搜索数据
正则生成批处理插入语句
csv 文件 快速生成批量插入语句
excel打款csv文件去掉科学计数法
csv文件如果用excel打款,单列的数据如果全是数字,超过15位,excel会用科学计数法表示,后面看到的全是00000 可以用excel 导入csv数据,然后再导入的过程中 制定每列导入的格式 为文本 就去掉烦人的科学计数法了
妙用diff对比两个文件的差异
工作中有时候要找出两个文件的差异,如第一个文件中的id在第二个文件中不存在 类似 sql中 not exists的用法 diff a.txt b.txt 例如a.txt里面orderSn列表 b.txt 也是orderSn列表 首先将a.t … 继续阅读 妙用diff对比两个文件的差异
正则替换的妙用
正则表达式能给我们的工作带来极大的便利, 例如我们在一个csv文件中,文本里面有乱码换行符, 我只想要storeId列表 源文件是这样的: 981640″””,”20181231134817026230 ” 982575,”20181231 … 继续阅读 正则替换的妙用
idea-代码模板Live template
1,声明日志: /** logger */ private static final Logger LOGGER = LoggerFactory.getLogger($CLASS$.class); 2,静态字符变量 private fina … 继续阅读 idea-代码模板Live template