前言

注：文中所说观点，系个人胡扯观点。观看如有不适，既可私信阿甘本人删文。

星球同学提问

halo甘哥，想问问

1⃣️双非本适合走自动驾驶的开发方向吗

2⃣️如果想去一个比较知名的车企实习，开发岗如果进不去，投系统研发怎么样。往智能座舱、网关开发、ota或者自动驾驶的中间件深耕的话，会不会35岁之后还能混口饭吃捏

（感觉算法岗招挺多的，论能力和压力感觉还是会吃不消。）

感谢甘哥！！

阿甘回答

双非本走智驾还是难度比较大， 概率极其的小。

像国内智驾比较好的公司无非就是：

卖智驾服务的公司：华为、moment、大疆还有其他等

以及车企自研的

然后针对发展，薪资，年终，福利来说，个人认为能去像这种卖智驾服务的，还是别去那些车企自研的

为什么呢，我们可以想一想。

研发智驾，需要招聘大量的人才，需要大量的研发成本。像自研的这种车企，那它的利润哪里来的，无非就是自家车的销量。

一旦自家车的销量不好，企业现金池减少，研发成本就需要降本增效了。可以理解成，就是智驾的研发成本都分摊在自家销售的每一台车上。高度依赖自己的销量，成本不能分散，有种梭哈的意味

而像华为这种卖服务的呢，不断的向各个车企打单，研发成本分撒在各个车企的销量上，这种风险就会小很多，成功的概率就很大，个人收益就会很明显。

那能不能搞智驾的，就看自己感觉这学历能进去像moment，大疆这样的公司吗

智能座舱，以及新能源整体怎么说呢。目前个人不是特别推荐的，也可能是自己以前也在里面工作过，深刻感觉到这行在逐渐走向末落的。

你可以去看看汽车的一些报告，市场渗透率几乎都不增长了，这行工程师应该目前上百万了吧，极具内卷。

你看看某来年终奖能有多少呢？今年好像某想的也不太行。

智能座舱里的网络开发方向，可以看看星球网络知识的总结，以及那个智能网络检测项目，以及安卓里网络部分代码。基本工作就是这套技术栈。

35岁能不能混口饭吃，这个想的太长远了，没有意义。先想想怎么毕业能找到一个高薪的好工作，然后在工作中怎么快速涨薪把自己的base提升上来吧

本文由mdnice多平台发布

流量统计功能文档

仓库地址:https://gitee.com/teanary/teanary_service

目录

• 功能概述
• 功能特性
• 技术架构
• 配置说明
• 使用方法
• 数据管理
• 常见问题

功能概述

流量统计功能用于统计网站前台的访问数据，包括真人访问和爬虫访问。系统会自动区分访问者类型，并记录详细的访问信息，帮助管理员了解网站的访问情况。

主要功能

• ✅ 自动统计前台访问流量
• ✅ 区分真人访问和爬虫访问
• ✅ 识别爬虫来源（Google、Bing、Baidu等）
• ✅ 缓存数据，批量写入数据库（每5分钟）
• ✅ 自动清理过期数据（默认保留90天）
• ✅ 提供统计看板和详细列表页面

功能特性

1. 智能过滤

系统会自动排除以下请求：

• ❌ 管理后台（/manager/*）
• ❌ 个人中心（/user/*）
• ❌ API 路由（/api/*）
• ❌ 静态资源（.css, .js, .jpg, .png 等）
• ❌ 非 GET 请求

2. 爬虫识别

系统能够识别以下类型的爬虫：

搜索引擎爬虫：

• Google (Googlebot)
• Bing (Bingbot)
• Baidu (Baiduspider)
• Yandex (Yandexbot)
• Yahoo (Slurp)
• DuckDuckGo (Duckduckbot)
• Sogou (Sogou)

社交媒体爬虫：

• Facebook (Facebookexternalhit)
• Twitter (Twitterbot)
• LinkedIn (Linkedinbot)
• Pinterest (Pinterestbot)

其他爬虫：

• Semrush (Semrushbot)
• Ahrefs (Ahrefsbot)
• Majestic (Mj12bot)
• Dotbot
• 以及其他通用爬虫（bot、crawler、spider等）

3. 数据记录

每条流量记录包含以下信息：

• 路径 (path): 访问的页面路径
• 方法 (method): HTTP 方法（通常为 GET）
• IP 地址 (ip): 访问者的 IP 地址
• 用户代理 (user_agent): 浏览器或爬虫的用户代理字符串
• 来源页面 (referer): 来源页面的 URL
• 语言 (locale): 访问时使用的语言代码
• 是否爬虫 (is_bot): 是否为爬虫访问
• 爬虫来源 (spider_source): 爬虫的具体来源（如 google、bing 等）
• 访问次数 (count): 同一分钟内相同路径的访问次数
• 统计时间 (stat_date): 统计日期（精确到分钟）

技术架构

数据流程

用户访问 → TrackTraffic 中间件 → 缓存数据 → 批量写入队列 → 数据库

核心组件

1. 中间件 (TrackTraffic)

   • 位置：app/Http/Middleware/TrackTraffic.php
   • 功能：拦截请求，记录流量数据到缓存

2. 批量写入任务 (BatchWriteTrafficStatsJob)

   • 位置：app/Jobs/BatchWriteTrafficStatsJob.php
   • 功能：每5分钟批量将缓存数据写入数据库

3. 数据清理命令 (CleanOldTrafficStats)

   • 位置：app/Console/Commands/CleanOldTrafficStats.php
   • 功能：清理超过指定天数的历史数据

4. 数据模型 (TrafficStatistic)

   • 位置：app/Models/TrafficStatistic.php
   • 功能：定义数据结构和查询方法

5. 管理界面

   • 统计看板：app/Filament/Manager/Pages/TrafficStatistics.php
   • 详细列表：app/Filament/Manager/Resources/TrafficStatisticResource.php

缓存机制

• 使用 Laravel Cache 存储临时流量数据
• 缓存键格式：traffic:queue:Y-m-d-H-i
• 缓存过期时间：1小时
• 每5分钟批量写入一次数据库

配置说明

1. 中间件注册

中间件已在 routes/web.php 中注册：

Route::prefix('{locale}')->middleware([
    SetLocaleAndCurrency::class, 
    \App\Http\Middleware\TrackTraffic::class
])->group(function () {
    // 前台路由
});

2. 定时任务配置

在 routes/console.php 中已配置：

// 流量统计批量写入任务（每5分钟执行一次）
Schedule::command('app:batch-write-traffic-stats --queue')
    ->everyFiveMinutes()
    ->withoutOverlapping()
    ->runInBackground();

// 流量统计数据清理任务（每天凌晨2点执行，清理90天前的数据）
Schedule::command('app:clean-old-traffic-stats')
    ->dailyAt('02:00')
    ->withoutOverlapping();

3. 数据库表结构

表名：traffic_statistics

主要字段：

• id: 主键（雪花ID）
• path: 访问路径（索引）
• method: HTTP 方法（索引）
• ip: IP 地址（索引）
• user_agent: 用户代理
• referer: 来源页面
• locale: 语言代码（索引）
• is_bot: 是否为爬虫（索引）
• spider_source: 爬虫来源（索引）
• count: 访问次数
• stat_date: 统计时间（索引，精确到分钟）

使用方法

1. 查看统计看板

1. 登录管理后台
2. 导航到 统计 → 流量统计看板

3. 可以查看：

   • 总访问量、页面浏览量、独立IP、独立页面
   • 真人访问和爬虫访问的对比
   • 热门页面 Top 20

4. 支持筛选：

   • 日期范围：今天、昨天、最近7天、最近30天、最近90天
   • 访问者类型：全部、真人访问、爬虫访问

2. 查看详细列表

1. 登录管理后台
2. 导航到 统计 → 流量明细
3. 可以查看每条访问记录的详细信息

4. 支持筛选：

   • 访问类型（真人/爬虫）
   • 爬虫来源
   • 日期范围

3. 手动触发批量写入

如果需要立即将缓存数据写入数据库，可以执行：

php artisan app:batch-write-traffic-stats

4. 手动清理数据

清理超过指定天数的数据：

# 清理90天前的数据（默认）
php artisan app:clean-old-traffic-stats

# 清理30天前的数据
php artisan app:clean-old-traffic-stats --days=30

# 清理180天前的数据
php artisan app:clean-old-traffic-stats --days=180

数据管理

数据保留策略

• 默认保留时间：90天
• 清理时间：每天凌晨2点自动执行
• 清理方式：分批删除，每批1000条记录

数据统计方法

获取指定时间范围内的统计数据

use App\Models\TrafficStatistic;
use Illuminate\Support\Carbon;

// 获取最近7天的所有数据
$startDate = Carbon::today()->subDays(6);
$endDate = Carbon::today()->endOfDay();
$stats = TrafficStatistic::getStatsByDateRange($startDate, $endDate);

// 只获取真人访问数据
$humanStats = TrafficStatistic::getStatsByDateRange($startDate, $endDate, false);

// 只获取爬虫访问数据
$botStats = TrafficStatistic::getStatsByDateRange($startDate, $endDate, true);

获取热门页面

// 获取最近7天的热门页面 Top 10
$topPages = TrafficStatistic::getTopPages($startDate, $endDate, 10);

// 只获取真人访问的热门页面
$topHumanPages = TrafficStatistic::getTopPages($startDate, $endDate, 10, false);

// 只获取爬虫访问的热门页面
$topBotPages = TrafficStatistic::getTopPages($startDate, $endDate, 10, true);

常见问题

Q1: 为什么有些访问没有被统计？

A: 系统会自动排除以下请求：

• 管理后台和个人中心的访问
• API 路由
• 静态资源文件
• 非 GET 请求

如果您的访问路径符合以上条件，将不会被统计。

Q2: 数据多久写入一次数据库？

A: 系统每5分钟自动批量写入一次。如果需要立即写入，可以手动执行 php artisan app:batch-write-traffic-stats 命令。

Q3: 如何修改数据保留时间？

A: 有两种方式：

1. 修改定时任务：编辑 routes/console.php，修改 --days 参数
2. 手动执行：执行 php artisan app:clean-old-traffic-stats --days=天数

Q4: 爬虫识别不准确怎么办？

A: 可以修改 app/Http/Middleware/TrackTraffic.php 中的 isBot() 和 getSpiderSource() 方法，添加或修改爬虫识别规则。

Q5: 如何查看缓存中的数据？

A: 可以使用 Laravel Tinker：

php artisan tinker

然后执行：

// 查看某个时间点的队列
Cache::get('traffic:queue:2026-01-17-14-30');

// 查看所有流量相关的缓存键（需要 Redis）
Redis::keys('traffic:*');

Q6: 数据量很大，会影响性能吗？

A: 系统采用了以下优化措施：

• 使用缓存暂存数据，减少数据库写入频率
• 批量写入，每5分钟写入一次
• 使用索引优化查询性能
• 自动清理过期数据，控制数据量

如果数据量仍然很大，可以考虑：

• 缩短数据保留时间
• 增加批量写入频率
• 优化数据库索引

Q7: 如何禁用流量统计？

A: 从 routes/web.php 中移除 TrackTraffic::class 中间件即可。

Q8: 可以统计其他路径吗？

A: 可以修改 app/Http/Middleware/TrackTraffic.php 中的 shouldTrack() 方法，调整过滤规则。

相关文件

• 中间件：app/Http/Middleware/TrackTraffic.php
• 批量写入任务：app/Jobs/BatchWriteTrafficStatsJob.php
• 清理命令：app/Console/Commands/CleanOldTrafficStats.php
• 数据模型：app/Models/TrafficStatistic.php
• 统计看板：app/Filament/Manager/Pages/TrafficStatistics.php
• 详细列表：app/Filament/Manager/Resources/TrafficStatisticResource.php
• 数据库迁移：database/migrations/2026_01_17_204550_create_traffic_statistics_table.php

更新日志

2026-01-17

• ✅ 初始版本发布
• ✅ 支持真人/爬虫区分
• ✅ 支持爬虫来源识别
• ✅ 自动批量写入和清理

文档版本：1.0
最后更新：2026-01-17