Stream流式编程在JDK 1.8版本中与Lambda表达式一起推出，这一特性标志着JDK 1.8成为Java历史上的又一里程碑。之前在公司接手的关于数据分析及展示需求中就会频繁地使用到Stream流式编程。今天来看一看Stream流式编程在数据分析方面的应用及原理，并且这里会再次带大家回顾一下Lambda表达式的使用。

这个暑期都在忙碌的实习中度过，自己的博客也很久没有更新过了，哈哈哈。（其实一直都有写，不过是写在了公司内网里边，由于数据安全问题不能够转出来），趁这个机会也写写这三个月的实习总结，也算是对这段实习经历的一个回顾与沉淀。

从RAID到HDFS：垂直拓展定有终点，但水平拓展没有尽头。

为了解决大量数据的计算问题，分布式计算诞生了。在MapReduce出现前其实就存在了分布式计算的模式，但是MapReduce为分布式计算实现了一套通用化的流程与规范。MapReduce是Hadoop架构下的计算层，它把任务分割成小任务并分发到集群的机器上并行执行。

某X互联网电商公司为了解决当前大量用户的售前咨询问题，需要建设一个不需要客服介入的简易电商售前机器人，用于回答用户的售前问题，并给出基本可靠的咨询回答。当前大模型如gpt、baichuan、文心等均有开放使用的OpenAPI接口，且调用费用低廉。可以基于大模型来构建简易的电商售前对话服务。本文介绍一种基于Golang + gpt-3.5-turbo构建对话服务的方案。

当前OpenAI提供了开放接口，支持通过api的方式调用LLM进行文本推理、图片生成等能力，但目前官方只提供了Python SDK。为了后续更方便集成和应用，可以采用Golang对核心推理调用接口进行封装，提供模型调用能力。

机器学习与传统的为解决特定任务、硬编码的软件程序不同，机器学习是用大量的数据来“训练”模型，通过各种算法从数据中学习如何完成任务，最后使用模型对数据进行预测。

最近在看关于机器学习的相关入门知识，在特征工程中使用了Numpy和Pandas提取样本特征和标签，后来了解到Pandas是一款基于Numpy的高级数据分析库，所以想学习下Pandas数据分析基础内容。

某X互联网电商公司为了解决当前大量用户的售前咨询问题，需要建设一个不需要客服介入的简易电商售前机器人，用于回答用户的售前问题，并给出基本可靠的咨询回答。当前大模型如gpt、baichuan、文心等均有开放使用的OpenAPI接口，且调用费用低廉。可以基于大模型来构建简易的电商售前对话服务。本文介绍一种基于Golang + gpt-3.5-turbo构建对话服务的方案。

当前OpenAI提供了开放接口，支持通过api的方式调用LLM进行文本推理、图片生成等能力，但目前官方只提供了Python SDK。为了后续更方便集成和应用，可以采用Golang对核心推理调用接口进行封装，提供模型调用能力。