zoukankan      html  css  js  c++  java
  • [python] python 读写Oracle clob类型数据的处理

    clob字段是oracle专门用于存储超长字符串的字段类型,一般varchar2只能存4000个字符串,超过4000个就存不下去了。
    如果直接使用 pandas.read_sql(sql, conn)会报错,那么如何将clob读取到python中呢? 

    1.read方法

    import cx_Oracle
    conn = cx_Oracle.connect("user/pwd@ip/db")
    cur = conn.cursor()
    # col 是clob字段
    cur.execute("select col from table")
    pram=[]
    for i in cur:
        text = i[0].read()
        pram.appen(text)
    cur.close()
    conn.close()

    2.使用DBMS_LOB.SUBSTR模块

    方法是先提取前2000个字符串,接着提取2000个字符串….,然后拼接起来。

    import cx_Oracle
    import pandas as pd
    conn = cx_Oracle.connect("user/pwd@ip/db")
    # 这里只提取前6000个字符串
    sql1 = "select DBMS_LOB.SUBSTR(col,2000,1) as col1 as fzss from table"  # 1-2000个字符串
    sql2 = "select DBMS_LOB.SUBSTR(col,4000,2001) as col2 as fzss from table"  # 2001-4000个字符串
    sql3 = "select DBMS_LOB.SUBSTR(col,6000,4001) as col3 as fzss from table"  # 2001-4000个字符串
    # 读取数据
    df1 = pd.read_sql(sql1, conn)
    df2 = pd.read_sql(sql2, conn)
    df3 = pd.read_sql(sql3, conn)
    # 有些记录不一定是很长的字符串,结果可能是None,需要填充空字符串,否则下面的拼接会出错
    df1 = df1.fillna('')
    df2 = df2.fillna('')
    df3 = df3.fillna('')
    # 将它们拼接起来,放在tmp字段上
    df1['TMP'] = df1.loc['COL1']+df2.loc['COL2']+df3.loc['COL3']

    3.将字符串写入clob字段

    方法和将字符串导入varchar2字段是一样的,不需要特殊设置。 比如:

    id='123'
    clob='a'*2**20  # 重复2的20次方次
    param=[id, colb]
    sql = "insert into table (id,colb) values(:1, :2)"
    cursor.execute(sql, param)
    conn.commit()



  • 相关阅读:
    财务自由之路--笔记
    Spring Cloud微服务笔记(一)微服务与云概念
    Java8新特性----Stream
    Docker操作笔记(四)使用网络
    Docker操作笔记(三)数据管理
    Docker操作笔记(二)容器
    Docker操作笔记(一)使用镜像
    信息化领域热词分类分析及解释
    假期第二周总结
    假期第一周总结
  • 原文地址:https://www.cnblogs.com/wynlfd/p/11053315.html
Copyright © 2011-2022 走看看