«csv» 태그된 질문

현재 Python 2.7의 .csv 파일에서 최대 1 백만 개의 행과 200 개의 열 (파일 범위는 100MB에서 1.6GB)로 데이터를 읽으려고합니다. 행이 300,000 개 미만인 파일에 대해 (매우 느리게) 수행 할 수 있지만 그 이상으로 이동하면 메모리 오류가 발생합니다. 내 코드는 다음과 같습니다. def getdata(filename, criteria): data=[] for criterion in criteria: data.append(getstuff(filename, …

107 python  python-2.7  file  csv 

현재이 질문은 Q & A 형식에 적합하지 않습니다. 사실, 참고 문헌 또는 전문 지식이 답변을 뒷받침 할 것으로 기대하지만이 질문은 토론, 논쟁, 여론 조사 또는 확장 된 토론을 유도 할 가능성이 높습니다. 이 질문이 개선되고 다시 열릴 수 있다고 생각 되면 도움말 센터 를 방문하여 안내를 받으세요. 휴일 칠년 전에 …

106 c#  vb.net  file  csv  import 

CSV 파일에서 20000 행의 일부 데이터를 Mysql로 ​​가져오고 있습니다. CSV의 열은 MySQL 테이블의 열과 순서가 다릅니다. Mysql 테이블 열에 해당하는 열을 자동으로 할당하는 방법은 무엇입니까? 내가 실행할 때 LOAD DATA INFILE'abc.csv' INTO TABLE abc 이 쿼리는 모든 데이터를 첫 번째 열에 추가합니다. 데이터를 Mysql로 ​​가져 오기위한 자동 구문을 제안하십시오.

106 mysql  csv  import  load-data-infile 

누군가 fgetcsv를 사용하여 CSV 파일에서 배열을 만드는 코드를 친절하게 제공 할 수 있습니까? 다음 코드를 사용하여 간단한 CSV 파일에서 배열을 만들었지 만 내 필드 중 하나에 주소와 같은 쉼표가 여러 개있는 경우 제대로 작동하지 않습니다. $lines =file('CSV Address.csv'); foreach($lines as $data) { list($name[],$address[],$status[]) = explode(',',$data); } * 또한 str_getcsv는 내 …

106 php  arrays  csv 

CSV 파일이 있고 Python을 사용하여이 파일을 sqlite3 데이터베이스로 대량 가져오고 싶습니다. 명령은 ".import ....."입니다. 하지만 이렇게 작동 할 수없는 것 같습니다. 누구든지 sqlite3에서 수행하는 방법에 대한 예제를 줄 수 있습니까? 만일을 대비하여 창문을 사용하고 있습니다. 감사

106 python  database  csv  sqlite 

주어진 2,1016,7 / 31 / 2008 14 : 22, Geoff Dalgas, 6 / 5 / 2011 22:21, http://stackoverflow.com , "Corvallis, OR", 7679,351,81, b437f461b3fd27387c5d8ab47a293d35,34 C #을 사용하여 위의 정보를 다음과 같이 문자열로 분할하는 방법 : 2 1016 7/31/2008 14:22 Geoff Dalgas 6/5/2011 22:21 http://stackoverflow.com Corvallis, OR 7679 351 81 b437f461b3fd27387c5d8ab47a293d35 34 …

105 c#  .net  csv 

jq를 사용하여 얕은 객체 배열을 인코딩하는 임의의 JSON을 어떻게 CSV로 변환 할 수 있습니까? 이 사이트에는 필드를 하드 코딩하는 특정 데이터 모델을 다루는 많은 Q & A가 있지만,이 질문에 대한 답변은 JSON이 주어 졌을 때 작동해야합니다. 단, 스칼라 속성이있는 객체의 배열이라는 제한이 있습니다 (딥 / 복합 / 이를 평평하게 만드는 …

105 json  csv  jq 

Windows 명령 줄에서 XLS 파일을 CSV 파일로 어떻게 변환 할 수 있습니까? 컴퓨터에 Microsoft Office 2000이 설치되어 있습니다. Microsoft Office를 사용할 수없는 경우 OpenOffice를 설치할 수 있습니다.

104 windows  excel  csv 

제품 배열을 CSV 파일로 변환하려고하는데 계획이 없을 것 같습니다. CSV 파일은 한 줄로되어 있으며 다음은 내 코드입니다. for($i=0;$i<count($prods);$i++) { $sql = "SELECT * FROM products WHERE id = '".$prods[$i]."'"; $result = $mysqli->query($sql); $info = $result->fetch_array(); } $header = ''; for($i=0;$i<count($info);$i++) { $row = $info[$i]; $line = ''; for($b=0;$b<count($row);$b++) { $value …

104 php  csv 

다음 코드를 사용하여 일부 CSV 파일로 작업하고 있습니다. reader = csv.reader(open(filepath, "rU")) try: for row in reader: print 'Row read successfully!', row except csv.Error, e: sys.exit('file %s, line %d: %s' % (filename, reader.line_num, e)) 그리고 하나의 파일에서이 오류가 발생합니다. file my.csv, line 1: line contains NULL byte 어떡해? Google은 .csv로 …

102 python  csv 

http 요청을 통해 액세스되고 서버에서 쉼표로 구분 된 형식으로 다시 전송되는 데이터가 있습니다. 다음 코드가 있습니다. site= 'www.example.com' hdr = {'User-Agent': 'Mozilla/5.0'} req = urllib2.Request(site,headers=hdr) page = urllib2.urlopen(req) soup = BeautifulSoup(page) soup = soup.get_text() text=str(soup) 텍스트의 내용은 다음과 같습니다. april,2,5,7 may,3,5,8 june,4,7,3 july,5,6,9 이 데이터를 CSV 파일에 어떻게 저장할 수 …

102 python  string  file  csv  io 

일부 CSV 데이터를 읽기 위해 pandas 라이브러리를 사용하고 있습니다. 내 데이터에서 특정 열에는 문자열이 포함되어 있습니다. 문자열 "nan"은 빈 문자열과 마찬가지로 가능한 값입니다. 팬더가 "nan"을 문자열로 읽도록 만들었지 만 빈 값을 NaN으로 읽지 않도록하는 방법을 알아낼 수 없습니다. 다음은 샘플 데이터 및 출력입니다. One,Two,Three a,1,one b,2,two ,3,three d,4,nan e,5,five nan,6, …

101 python  csv  pandas 

미리 줄의 길이를 모르고 파일 read_csv의 첫 n줄만 읽는 데 사용하는 기본 제공 방법이 있습니까? 읽는 데 오랜 시간이 걸리는 대용량 파일이 있는데, 샘플을 얻기 위해 첫 번째 줄 (예 : 20 줄) 만 사용하고 싶을 때도 있습니다 (전체 내용을로드하고 헤드를 차지하는 것을 선호하지 않음). 총 줄 수를 알고 있다면 …

100 python  pandas  csv  dataframe 

MongoDB 컬렉션의 모든 레코드를 .csv파일로 내보내는 방법은 무엇입니까? mongoexport --host localhost --db dbname --collection name --type=csv > test.csv 내 보내야하는 필드의 이름을 지정하라는 메시지가 표시됩니다. 필드 이름을 지정하지 않고 모든 필드를 내보낼 수 있습니까?

100 mongodb  csv  schemaless  database 

브라우저에서 JSON 데이터를 여는 링크가 있지만 안타깝게도 읽는 방법에 대한 단서가 없습니다. 이 데이터를 CSV 형식의 JavaScript를 사용하여 변환하고 JavaScript 파일에 저장하는 방법이 있습니까? 데이터는 다음과 같습니다. { "count": 2, "items": [{ "title": "Apple iPhone 4S Sale Cancelled in Beijing Amid Chaos (Design You Trust)", "description": "Advertise here with BSA …

99 javascript  json  csv