个人学习工作分享

FastAPI使用 SlowAPI 增加接口限流，Nginx 获取真实用户IP

学习

摘要：本文介绍了如何在FastAPI后端服务中使用SlowAPI进行接口限流，以解决小程序功能增加后可能出现的滥用问题。文章首先指出部署架构中的IP获取问题，特别是当服务通过Nginx反向代理时获取真实用户IP的挑战。接着，详细说明了如何配置FastAPI、Gunicorn和Nginx以获取正确的用户IP，并正确实施限流策略。最后总结了实施限流和获取真实IP的最佳实践，包括选择合适的限流库、正确配置服务器和代理等关键步骤。文章关键词：fastapi, python, nginx, FastAPI使用SlowAPI增加接口限流，Nginx获取真实用户IP。

为什么不推荐在 Django 的orm查询中使用 .first()查询唯一记录

学习

Django是一个流行的Python框架，其ORM（对象关系映射）简化了数据库交互。对于查询唯一记录，推荐使用.get()而不是.first()，因为.first()会引入不必要的排序操作，可能影响性能。然而，如果查询字段有索引，排序的性能开销通常可以忽略。Django的ORM允许开发者使用Python代码操作数据库，无需编写复杂的SQL语句。在使用Django的ORM进行查询时，需要注意索引的使用，因为索引可以显著提高查询性能。此外，可以在Django的settings.py中设置开启ORM查询时的SQL日志，以便性能分析和调试。

基于Reflex开发一个图片风格转换demo（1）

学习

介绍了一个基于Python的Web玩具框架Reflex，该框架允许开发者使用Python构建全栈Web应用，无需熟悉前端技术。文章详细描述了Reflex的安装、初始化项目、运行过程，并提到了该框架的优势如纯Python、简单易用、快速开发等。同时，文章还展示了使用Reflex开发一个简单的图片风格转换demo的过程，并强调了该框架对于不熟悉前端技术的Python开发者来说非常实用。

竟然这么多人用类型提示来写python！

杂的文

文章讨论了Python中的类型提示的重要性和实际应用情况。文章回顾了PEP 484提案，该提案为Python引入了静态类型检查的能力，以提高代码的可读性和可维护性。文章还分享了一项由JetBrains、Meta和Microsoft联合发起的针对Python类型系统的调查，显示有越来越多的开发者在日常工作中使用类型提示。文章最后讨论了是否要在Python项目中引入类型提示，并鼓励读者分享他们的看法和经验。

你这个django正不正宗，怎么看起来像flask？

学习

小琪和小胖尝试使用新的工具nanodjango来简化Django应用开发。nanodjango允许在一个文件中完成整个Django应用，包括模型、视图和管理后台。他们展示了如何使用nanodjango快速搭建一个计数器应用，并演示了API支持、异步视图和管理后台的便捷性。小胖和小琪对这个工具感兴趣并讨论如何使用它改进工作流程和设想新项目。几天后，他们使用nanodjango完成了一个小工具，并展示了其潜力。当需要扩展项目时，可以使用命令将其转换为完整的Django项目，保持灵活性和稳定性。这个开源工具对于Python和Django开发者来说非常有用。摘要聚焦于工具的便捷性、应用场景以及与Django框架的关系和潜力优势，旨在强调该工具与传统Django框架的区别与优势。

fast-graphrag 探索（4）- 我把模型服务干崩了！

学习

文章摘要：本文主要描述了小胖在使用fast-graphrag模型处理研报数据的过程中所遇到的问题及解决方法。文章首先介绍了小胖按照官方example调整模型参数并写入研报数据的过程，接着出现了生成数据文件过小、数据丢失的问题，通过仔细检查代码，发现了n_checkpoints参数设置不当导致的问题。然后文章描述了小胖通过限制并发量来解决本地模型中转服务挂掉的问题。最终，小胖成功解决了所有问题，实现了程序的平稳运行。文章还介绍了fast-graphrag模型的开源性质和其在处理研报数据方面的应用。

大升级！LLM应用监控、测试、优化一步到位！

学习

本文介绍了使用langfuse工具来监控、测试和优化LLM（大模型）应用的方法。文章详细描述了langfuse的功能，包括LLM可观测性、提示管理、LLM评估、数据集管理等。文章还介绍了langfuse最近的v3.0.0大版本更新，包括引入Async Worker和Redis提高系统性能，使用Clickhouse和S3/Blob Storage处理不同类型的数据等。此外，文章还展示了如何使用langfuse的云服务来追踪和管理LLM应用，包括安装sdk、使用trace功能、提示词管理等。总结部分鼓励读者分享使用langfuse的经验和想法，并欢迎大家关注公众号。关键词：python、AI、开源、好玩的项目、科技前沿、大升级、LLM应用监控优化。

腾讯云智能结构化OCR实战：从图片到结构化数据的高效转换

学习

本文介绍了作者使用腾讯云智能结构化OCR服务的实战体验。文章首先描述了作者的需求背景，即汇总多个理财子公众号发布的理财产品的数据。由于遇到一些识别不准确和费用较高的问题，作者尝试使用腾讯云的智能结构化OCR服务来解决问题。文章详细介绍了安装SDK、代码实现、验证和web部署的过程，并分享了使用腾讯云智能结构化OCR服务的体验。整体上，腾讯云智能结构化OCR服务用起来比较简单，相较于传统OCR，多了一层结构化数据的处理。文章最后欢迎大家在评论区留言分享对OCR应用的经验和看法。

微软开源的处理工具 - markitdown

学习

微软最近开源了一个Python工具markitdown，可以将各种格式的文件和office相关格式的文件转换为Markdown格式。该工具支持多种文件格式，包括PDF、PowerPoint、Word、Excel、图片、音频、HTML等。它还支持调用大模型处理图片、音视频等格式的文件数据。markitdown工具具有安装简便、支持多种转换器以及API集成等特点，能够满足非结构化数据转换、模型训练效率提高、复杂文档解析、知识管理和团队协作、数据源集成等方面的需求，助力在线文档与静态网站的构建，促进批量处理和自动化，是科技前沿的一种重要的处理工具。

fast-graphrag 探索（3）- insert

学习

摘要：本文介绍了fast-graphrag的插入流程，包括state_manager属性的介绍、GraphRAG类实例的state_manager是DefaultStateManagerService的介绍、以及插入文档到GraphRAG时的具体步骤。文章详细描述了插入过程中的关键步骤，如调用state_manager的insert_start方法、读取历史数据、过滤重复数据、提取实体和关系、执行upsert操作等。此外，文章还提到了模型应用的一些经验和看法，并鼓励读者在评论区分享自己的经验。