庞玉栋博客
//

大数据

164 篇 · 资讯流
  2. arXiv cs.DB（数据库）

    ProcArena: A Multi-Scenario Benchmark for LLMs on Direct and Interactive PL/SQL Development from Natural Language

    Large language models (LLMs) have shown strong potential for translating natural-language (NL) requirements into PL/SQL

    原文 ↗

  4. ES 增删改查操作

    创建自定义ID增加PUT /{index}/{type}/{id} { "field": "value", ... } 自动增加ID使用post方式POST /website/blog/ { "title": "My second blog entry", "text": "Still trying this out...", "date": "2014/01/01" } 更新PUT /website/blog/123 { "title": "My first blo

  6. Collections 内建集合模块

    创建自定义ID增加PUT /{index}/{type}/{id} { "field": "value", ... } 自动增加ID使用post方式POST /website/blog/ { "title": "My second blog entry", "text": "Still trying this out...", "date": "2014/01/01" } 更新PUT /website/blog/123 { "title": "My first blo

  8. MongoDB笔记

    MongoDB简介MongoDB介绍MongoDB是面向文档的非关系型数据库，不是现在使用最普遍的关系型数据库，其放弃关系模型的原因就是为了获得更加方便的扩展、稳定容错等特性。面向文档的基本思路就是：将关系模型中的“行”的概念换成“文档（document）”模型。面向文档的模型可以将文档和数组内嵌到文档中。因此，实际中可以用一条数据表示非常复杂的结构。 MongoDB没有预定义模式：文档的键(key)和值(value)不再是固定的类型和大小，而且根据需求要添加或者删除字段变得更容易了。由于没有模

  10. 爬取斗图网表情包

    #需要安装的库：requests lxml import requests import re from lxml.html import etree import os import time #伪装头 headers = { 'referer': 'https://www.doutula.com/article/list/?page=3', 'user-agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_14_0) Apple

  12. SQLAlchemy_定义(一对一/一对多/多对多)关系

    Basic Relationship Patterns基本关系模式The imports used for each of the following sections is as follows:下列的 import 语句，应用到接下来所有的代章节中：from sqlalchemy import Table, Column, Integer, ForeignKeyfrom sqlalchemy.orm import relationshipfrom sqlalchemy.ext.declara

  14. flask-sqlalchemy 使用详解

    一. 安装$ pip install flask-sqlalchemy 二. 配置配置选项列表 :选项说明SQLALCHEMY_DATABASE_URI用于连接的数据库 URI 。例如:sqlite:////tmp/test.db 或 mysql://username:password@server/dbSQLALCHEMY_BINDS一个映射 binds 到连接 URI 的字典。更多 binds 的信息见 用 Binds 操作多个数据库 。SQLALCHEMY_ECHO如果设置为 Ture ，

  16. Flume配置文件详解

    一、source配置1、netcat的source：bind指定IP，port指定port# Describe/configure the sourcea1.sources.r1.type = netcata1.sources.r1.bind = localhosta1.sources.r1.port = 444442、读文件exec：commd中写命令，如果用tail的话记得用大写的F# Describe/configure the sourcea1.sources.r1.type = exe

  18. Flume采集数据时在HDFS上产生大量小文件的问题

    在配置flume配置文件的时候，配置了滚动时间和最大字节数，但是在写入到hdfs的时候，其实是不按滚动时间去自动滚动的。设置a1.sinks.k1.hdfs.minBlockReplicas=1。因为文件会因为所在块的复制而滚动文件。

  20. flask传递列表等到jinja2模版的时候出现'；

    {% for i in connect.d %} "{{i[0]}}", {% endfor %}# #可以使用循环读取每一条数据