# 1、背景

在日常开发中，日志是问题排查最为常见的手段。  

那么怎么样打日志，才能快速的筛选出来想要的信息呢？

这个时候，需要引入trace_id的概念了。

在每一行日志增加trace_id作为标识符，筛选的时候，只需要通过trace_id来过滤，就能快速筛选出来需要的信息。



# 2、Django增加trace_id

## 2.1 安装依赖

```shell
# 我使用的Django版本是2.2
pip install django-log-request-id~=2.0.0
```
Github地址 https://github.com/dabapps/django-log-request-id


## 2.2 配置

**配置字段有点多，耐心点看完哦**

```python
# settings.py

# 中间件配置
MIDDLEWARE = [
    "log_request_id.middleware.RequestIDMiddleware", # 放在列表的第一个
		 ...
]

# 按照库的文档配置就好，或者直接照抄
LOG_REQUEST_ID_HEADER = "HTTP_X_REQUEST_ID"
GENERATE_REQUEST_ID_IF_NOT_IN_HEADER = True
REQUEST_ID_RESPONSE_HEADER = "TRACE-ID"

# 日志配置
    "formatters": {
        "color": {
            "()": "colorlog.ColoredFormatter",
          # 日志格式，重点是%(request_id)s， 其他按照自己喜好来
            "format": "%(green)s%(asctime)s [%(request_id)s] %(name)s %(log_color)s%(levelname)s [pid:%(process)d] "
            "[%(filename)s->%(funcName)s:%(lineno)s] %(cyan)s%(message)s",
        }
        
    },
      "filters": {
        # 过滤器增加下面这行
        "request_id": {"()": "log_request_id.filters.RequestIDFilter"},
    },
    
      "handlers": {
            "default": {
	     ...
             # handler增加下面这一行
            "filters": ["request_id"],
        },
```



## 2.3 trace_id实战

### 前端展示trace_id
模拟接口500报错，直接把响应header里面的trace_id展示出来。
前端实现也是非常简单，axios拦截器中取出trace_id就行

![image.png](https://img.huacai.one/huacai-blog/c3e1e7f0a859d457f2a7f6bece961a4c.image.webp)

![image.png](https://img.huacai.one/huacai-blog/58ac6fbcfa22a03447b6dcc44c1367e5.image.webp)

![image.png](https://img.huacai.one/huacai-blog/e371e00cf3efba776dedf5198ac3e5b4.image.webp)


### 根据trace_id定位日志
只需要grep一下trace_id，能快速定位到报错信息啦~
`docker logs 容器名 | grep trace_id`

![image.png](https://img.huacai.one/huacai-blog/02b3b4e419b36332d72af7af01cced66.image.webp)

# 3、最后
- 日常开发中，日志要输出关键的入参和出参，方便生产问题排查，而不要依赖本地debug
- Django中间件是个好东西，适合全局性统一处理，无需入侵业务代码
- 日志截图中，邮件告警同样是使用中间件实现，并且也是非常简单

Django增加链路追踪trace_id

# 1、背景
在技术群里面有个讨论，枚举字段是否需要增加索引的问题  
有人说必须要，有人说加了索引没什么用。  
talk is cheap, show me the data.
讨论那么多，还是得先有数据来验证。  
说到这里，你可以先猜猜哪种最快，是储存过程最快的吗？




# 2、建表语句
> 数据库字段使用字符串代替枚举，由程序控制字段的值
 ```sql
create table users
(
    id     int auto_increment
        primary key,
    name   varchar(255) not null,
    age    int          not null,
    gender varchar(10)  not null
);

```
# 3、插入数据对比
## 3.1 存储过程
```sql
CREATE PROCEDURE GenerateData()
             BEGIN
               DECLARE i INT DEFAULT 1;
             
               WHILE i <= 1000000 DO
                 INSERT INTO users (name, age, gender)
                 VALUES (
                   CONCAT('User', i),
                   FLOOR(18 + RAND() * (100 - 18)),
                   CASE
                     WHEN i % 3 = 1 THEN 'male'
                     WHEN i % 3 = 2 THEN 'female'
                     ELSE 'unknown'
                   END
                 );
                 SET i = i + 1;
               END WHILE;
             
             END
 CALL GenerateData();
             
```
## 3.2 python生成insert语句批量提交
```python
import pymysql
import random

# 连接数据库
conn = pymysql.connect(host='localhost',port=3306, user='root', password='root', db='my_database', charset='utf8mb4')
cur = conn.cursor()

try:
    # 开启事务
    conn.begin()

    for i in range(1, 1000001):
        name = f'User{i}'
        age = random.randint(18, 100)
        gender = 'male' if i % 3 == 1 else 'female' if i % 3 == 2 else 'unknown'

        # 执行插入语句
        cur.execute("INSERT INTO users (name, age, gender) VALUES (%s, %s, %s)", (name, age, gender))

    # 提交事务
    conn.commit()
except Exception as e:
    print(f"An error occurred: {e}")
    # 发生错误时回滚
    conn.rollback()
finally:
    # 关闭游标和连接
    cur.close()
    conn.close()
    
```
## 3.3 使用文件导入
### 3.3.1 生成csv文件
```python
import csv
import random

# 生成包含1,000,000条用户记录的CSV文件
with open('users.csv', 'w', newline='') as file:
    writer = csv.writer(file)
    for i in range(1, 1000001):
        name = f'User{i}'
        age = random.randint(18, 100)
        gender = 'male' if i % 3 == 1 else 'female' if i % 3 == 2 else 'unknown'
        writer.writerow([name, age, gender])
        
```

### 3.3.2 导入文件
```sql
# 数据库需要能读取到这个路径，否则会报错
# [2023-07-26 23:08:28] [HY000][13] (conn=151) Can't get stat of '/tmp/users.csv' (Errcode: 2 "No such file or directory")
# 如果使用的容器，需要把宿主机上的文件拷贝到容器
# 下面的例子是把宿主机/local/users.csv 拷贝到容器的根目录/
# docker cp /local/users.csv db-docker-compose-db-1:/


LOAD DATA INFILE '/users.csv'
INTO TABLE users
FIELDS TERMINATED BY ','
LINES TERMINATED BY '\n'
(name, age, gender);

```


如果数据库不在本地，不方便拷贝。可以使用IDEA自带的database导入功能

![image.png](https://img.huacai.one/huacai-blog/1d5d0f000ea3b33999f4f907cc2a8bfa.image.webp)


## 3.4 从已有的表中拷贝
```sql
INSERT INTO user_has_index SELECT * FROM users
```

# 4、耗时对比
## 4.1 文件导入
- 所有字段均无索引
![没有索引](https://img.huacai.one/huacai-blog/1cde43709a489d596a38e870e033c02e.image.webp)

- gender字段有索引
![有索引](https://img.huacai.one/huacai-blog/e63f377145715983c7fbc60dd11edce6.image.webp)

## 4.2 从已有的表中拷贝
![image.png](https://img.huacai.one/huacai-blog/76a589c8031baa0b2cfe6c99e7c3d465.image.webp)

## 4.3 储存过程
![太慢啦，我手动中断，此时有57w左右的数据](https://img.huacai.one/huacai-blog/4574957835582e27b0009b54b7051428.image.webp)

## 4.4 python批量插入
python批量插入（没计算时间，等了也有几分钟，很慢）

# 5、总结
- 存储过程并不是最快的，甚至很慢
- 文件导入是最快的
- 使用Python直接批量insert不可取

你猜对了吗？  
或者还有更快的方案，比如说分批+事务。  
欢迎留言和我交流。

生成100w条数据，哪种方式最快？

# 背景

最近刚搬了新到房子（合租，一套房隔成多个房间，有ABCDEF），东西比较多，椅子比较又占地方，就把椅子放在了隔壁房间。那两个房间看起来比较久没人住的样子。

万万没想到，上周四（2023-07-06）我回到租房后，发现我放椅子房间（E房）的门居然被关上了。  

我心想，不会有人住了吧。再看一眼另外一个空房间，好像杂物都被清理掉。顿时，一阵不好的预感涌上心头，我的人体工学椅子呢？？？

房东不会把我的椅子给丢掉了吧，这是两千多的椅子啊。

一开始还想着直接去打开那个房间一探究竟，后面仔细想想，这样很容易被当成变态，甚至可能被暴打一顿。。




再三思考后，在租客群里面问了房东

<img src="https://img.huacai.one/image-20230709200413296.webp" alt="image-20230709200413296" style="zoom:33%;" />


这是不是意味着我的椅子已经没了？？？  

房东的话听起来有点道理，我东西确实不应该随便放。

但我这么放，就能直接处理掉，不需要问我吗？（我也不懂，希望律师大佬解释一波）

心想着，我确实有点理亏，于是在某宝看起来同款椅子。


![C8F0DF93-F8F6-444B-B4C3-AF685C25806F_1_105_c.jpeg](https://img.huacai.one/huacai-blog/075917ac4f1a0848b63adf6cf78b6662.C8F0DF93-F8F6-444B-B4C3-AF685C25806F_1_105_c.webp)
3年过去了，价格似乎没啥变化，真没想到价格那么坚挺。



# 越想越生气

早上起来，越想越生气，我钱也不是大风刮来的，怎么说都是两千多的东西，并且椅子在搬家前我还特意清理过！  
于是直接私聊房东（直接说事，不带情绪）。


![image.png](https://img.huacai.one/huacai-blog/f74ea33008bfdd473b0766b93b545454.image.webp)

房东一直都没回复我的私信。

晚上下班，我已经去到了高铁站，房东还是没回微信，我干脆直接打语音给房东（没接，后面回拨了我）。

没有跟房东直接发生冲突，只是很直接的说出我的诉求，我想要拿回我的椅子。

房东说，椅子已经给收废品的人拿走。

我说，那就直接给我收废品的人的电话，我直接跟他沟通。 

# 和收废品的人沟通

于是，我就直接打电话收废品的人。

对方态度并不怎么友好。

我说，椅子在你那里吗？

收废品的人说，这东西拆了，已经卖掉了。

我说，那卖了多少钱？

收废品的人说，卖了十几块钱。

我说，两千多块的东西，也有几十斤，就卖十几块？

收废品的人说，对，废品又不什么值钱。

我说，我不信，我要报警

收废品的人说，报警就报警，关我吊事，我又不是偷的



# 报警

说实话，我还从来没有报过警。甚至不知道流程是怎么样的。

直接打110就行？要不要加区号？

我应该怎么样跟警察说这个事情？

报警真的有用吗？

顿时，一堆问题在脑海里面涌出。

但不试过怎么知道呢？不妨经历一次，即使没什么用，但至少也了解报警流程呢。

经过了几分钟的忐忑，在高铁站的候车室，我拨通了人生的第一次110.


![image.png](https://img.huacai.one/huacai-blog/cec0c7990b1792f9368c945e40913603.image.webp)

万万没想到，接通后居然说，报警请按1？？？

按下1之后，后面信号不太好，还直接断开了。。

于是第二次拨通110，这次没有语音提示，是一个小姐姐接电话。

我直接说了我的事情

“我说，价值两千多的椅子，放在隔壁房间，直接被人清理了。”

小姐姐说，隔壁房间是你租的吗？

我说，不是，我东西太多，就临时放在那里

小姐姐说，报一下具体的地址

我说，balabala....

小姐姐说，报警已经帮你登记了，请留意电话

没几分钟，派出所的民警就打电话过来了。  

民警说，是你报的警吗？

我说，是的，你应该知道我的报警的内容吧

民警说，知道。

我说，今天周五了，我正在高铁站，准备开始深圳，等周一处理可以吗？

民警说，好，等周一如果问题再打我这个电话（私人手机号）


# 房东慌了


刚挂了民警的电话，还没来得及思考下周怎么跟民警说，这时房东就打了微信电话。

房东说，这点事情至于报警吗？

我说，两千多的椅子，也不是小数目，是两百多我可能就算了。

房东说，两千多也没多少。那个收废品的人已经说了，他刚刚确实脾气不好，是不对。椅子没卖掉，是把椅子给了楼下保安，放在负一楼。

我说，OK，具体哪个保安，怎么样拿回我的椅子

房东说，我先找找；你东西放在那里好几天，也没跟我说，我完全有权利随便处理（其实房东知道是我东西，而不是之前电话里面说的以为是上一个租客的）


![image.png](https://img.huacai.one/huacai-blog/aab9d68c6d7360371f31bfe66371a2bd.image.webp)

# 总结

整个流程下来，事情已经很清晰。

原来，房东是想私吞我的椅子，让收废品的人演一场戏。

但万万没想到，我拒绝当老实人，选择报警硬刚。

最后房东怂了，无奈把椅子给我送回来。



# 建议

- 遇到事情不要慌，尽可能收集证据，包括但不限于微信聊天截图

- 感觉要发生纠纷时，所有电话记得录音

- 避免正面硬刚，达到自己目的即可。（这次就不跟房东证明硬刚，而是选择拿收废品的人开刀。不然以后拿回椅子，关系也会弄得很僵硬）

我经历人生第一次报警

从左上角可以发现，使用的是gpt4-plugins模型  
从下角可以看到，我的Plus是已经过期了  
那也就是意味着，没有Plus也能用gpt4模型啦！！！  
你觉得这算是漏洞吗？



![image.png](https://img.huacai.one/huacai-blog/46d1ec131043cd8272e1978d6f482cee.image.webp)
（感叹一下：相同的问题，gpt4和gpt3.5差距还是相当明显
）  
已经开通Plus是显示这样：

![image.png](https://img.huacai.one/huacai-blog/14ba0c277d3c9e02400c9db2845e305d.image.webp)

另外补充一下：我是有ChatGPT plugin开发者权限  

![image.png](https://img.huacai.one/huacai-blog/b3c04753f8978aab0e575a7f013ed348.image.webp)

申请plugin开发者权限，整体耗时了一个月多点。  
从图中可以看到，我是申请了3次的。  
如果你已经是plus，并且想成为开发者（薅羊毛，免费用gpt4），可以去 https://openai.com/waitlist/plugins


如果你已经成为plugin开发者，可以看看我的这个项目，打造一款属于自己的插件 https://github.com/lihuacai168/chatgpt_plugin_starter

ChatGPT Bug？免费用GPT4

# 1、端午节
明天就是端午节了，刚好有三天的小长假可以休息，趁这个机会总结一下最近找工作的情况和入职新公司的感受。



先说点开心的，收到这个邮件，我还是挺诧异。

没想到995这么卷的公司，节假日居然提前3h下班？


![image-20230621193153680](https://img.huacai.one/image-20230621193153680.webp)


 另外一个点，就是端午节礼物，居然发了500京东卡？

<img src="https://img.huacai.one/IMG_7564.webp" alt="IMG_7564" style="zoom: 33%;" />

因为公司日常趋近于0福利，什么零食水果下午茶统统都没有。

去找行政领取的时候，打印出来的名单居然没有我的，我还以为试用期不当人，没有呢。

最终，确认试用期员工也是可以领的。😁

# 2、体验当社牛

今天下班比较早，就顺便去给小电驴上个牌。  
在排队登记的时候，看到别人的小电驴很酷炫。  
![image.png](https://img.huacai.one/huacai-blog/39038828aed3e7668da2c54ce17f0189.image.webp)
就会发自内心地去好奇，这个车多少钱，开起来怎么样，能跑多远，balabala...  
如果是以前，可能就憋回去了。  
但是，今天我要当社牛！  
把所有好奇的东西都释放出来，这种感觉真的挺美妙的。

吃饭回来的路上，看到一只很fluffy的狗狗  
决定再当一回社牛！  
先去征求狗主人的同意，再给狗狗拍照，而不是直接就拍。  
平时的话，可能就直接拍了，或者看看就过了。  
![image.png](https://img.huacai.one/huacai-blog/af8bf5b902365baa19ec878864beb761.image.webp)

# 3、995

6月5号第一天上班，就跟我的mentor（导师）确认了公司最近的上班时间。  
嗯，没错，就是995。  
可是当时面试的时候，我记得说的是偶尔加班！  
于是就。。。第一天上班就加班到9点！   
然后之后的每一天都是如此。  
![image.png](https://img.huacai.one/huacai-blog/90a98abc3252ce7c879f73ccdfb24bf6.image.webp)
上班时间10:58，因为办理入职之后才能打卡。  
后面问行政才知道，原来入职第一天是不需要打卡。  

当晚下班回到后，整个人都emo了。  
甚至想，要不要跑路算了，这强度顶不住啊。  

不过，那也只是一时矫情罢了。  
成年人谁还没有过emo，情绪崩溃呢。  
第二天还是一如既往的起来，去挤地铁，然后卷到9点。 

背上房贷的中年人，是最容易拿捏的。  
上有老下有小，还有房贷，软肋直接拉满，屁都不敢放大声一点。  

既然必须要卷，那就只能安慰自己。  
目前这种大环境，能接住虾皮的base，还小涨，也蛮不错啦，加油干吧！  

# 4、面试找工作

## 4.1 投简历 
先来看这张图感受一下，熟悉IT行业的人一眼就能看出来，这些全是外包公司！  

![345F4BCC-514F-45E8-85D2-6163637A993F_1_102_o.jpeg](https://img.huacai.one/huacai-blog/baa31ff8a8b155c5d21dcaeb576e445a.345F4BCC-514F-45E8-85D2-6163637A993F_1_102_o.webp)

现在真正有招聘需求的自研公司并不多，很多都是挂着jd，忽悠人的。  
那有什么办法破局呢？
我想职场老鸟肯定知道：
- 内推，毕竟内部是可以直接知道是否真的有招聘需求。  

不过，很多人并没有内推渠道，那么可咋整哦？  
没关系，关注公众号，回复：交流群。  
当然，这个不是内推广告群，没有任何利益，只是提供一个渠道认识多点人。  


## 4.2 面试

如果很幸运，简历通过了，得到面试机会。  
那要怎么样去复习，在面试中怎么样更好的表现自己。  
综合之前当面试官（面试超过50人+的社招经验）和 最近半年超过60次+面试的经验。  
也算是知此知彼了，说一些写简历技巧和面试经验：
- 请认真写好一份自我介绍草稿，最好能背下来（当面试官后才发现，很多人连自我介绍都整不明白）
- 简历上的技术不是越多越好，不会的别乱写
- 项目不仅仅是你做了什么，重点是有什么收益，最好能量化
- 做好复盘，不然重复错误只会继续再犯

当然这只是一些概括性的东西，每个人的情况可能不一样。  
如果你需要修改简历，面试指导可以直接找我（付费哦）  

后续会分享整理分享一些面试实战，关注我公众号就能第一时间收到更新~~