c******u 发帖数: 105 | 1 1.5G其实够了,毕竟还有虚拟内存吗,有Cache也不会有太多硬盘读取。但是运行时候jvm的memory估计要调高。分开文件最后再merge我觉得很好。安全又直白。 |
|
C*******n 发帖数: 56 | 2 用unix命令,如果不行,让DB帮忙,还是不行,想自己写段程序,用外排序.
但注意,最好使用java.nio中的MappedByteBuffer来读取文件,以前,用标准java IO在
400M的文本文件查找关键字段,大概用4分钟的时间(普通笔记本,512内存),换了用NIO,
同样的代码,好像不到半分钟就可以了. |
|
|
t******p 发帖数: 810 | 4 想弄个程序 可以事实读取数据 做一些数据处理。还要一些好的界面设计。
请问 有好的编程软件推荐码?
matlab? java? c#?
Thank you! |
|
q**********9 发帖数: 711 | 5 很难看是什么意思啊?
我还要从别的文件读入数学表达式,这些表达式都是用这些实际变量名的,
非常需要读入文件的时侯能直接以这写实际变量名来存储数据.
先一个包子奉上 |
|
c***a 发帖数: 251 | 6 【 以下文字转载自 Java 讨论区 】
【 原文由 cocoa 所发表 】
怎么会这样呢?错误是这样的
java.sq.SQLException: Communication failure during handshake.
Is there a server:info9.vub.ac.be:3306?
前面的数据读的好好的.读到一半,就上面那样了。而且我的数据库放在info9.vub.ac.be
请教 |
|
S*****0 发帖数: 538 | 7 Sql Sever数据MDF文件?如果这样的话,只能在SQL Server下用了。 |
|
|
n****e 发帖数: 1403 | 9 Is the nosql just wrapping the SQL inside some other similar language such
as HQL(Hibernate Query language)? Or, it is totally new strategy for query
language?
Thanks |
|
y****w 发帖数: 3747 | 10 google "big data"
另外,如果只分析两个月,5M行这么简单的数据也不是什么大事儿。怎么方便怎么来就行了。
data |
|
a9 发帖数: 21638 | 11 关键你是要怎么用这些数据。
不想好怎么用就想怎么存取是没有意义的。
csv不见的不好。 |
|
g***l 发帖数: 18555 | 12 新工作很忙,大公司么,各个部门各司其职,搞软件开发,公司很看重
这个项目,将来可能就靠它打垮竞争对手了,现在的那个烂软件居然也
能独霸市场,真是佩服。搞软件,WEB的,没有DATA MODEL,BUSINESS
REQUIRETMENT还没有弄出来,软件初级版今年就要拿出来,大家只好
用ENTITY FRAMEWORK,那至少也得有个LOGICAL MODEL,一起进来的
WEB DEVELOPER确实很牛,我刚牵了个头,他就自己搞出个MODEL,大家
商量了一下,稍作修改就PRESENT给ARCHITECTURE和BUSINESS去了,
也没提出多少异议,我这个DATABASE DEVELOPER饭碗就被人给抢了.
俗话说得好,IF YOU CAN BEAT HIM, JOIN HIM。我准备怂恿那个WEB
DEVELOPER兼做ARCHITECT,你比我能干,我给做SUPPORT,不过人确实
牛,我想到的细节,他都想到了。大公司要依靠COMMUNICATION,就一
个小MODEL,要PRESENT给BA,PROJECT MANAGER,ARCHITECT TEAM,BUSINES... 阅读全帖 |
|
P********R 发帖数: 1691 | 13 谢谢!
就是这样做的,但好象trigger自动产生的新的detail不能在INSERT的时候读取。
在trigger里用了:
SELECT NVL(MAX(detail), 0) + 1
INTO v_Newdetail
FROM ORDERITEMS
WHERE orderid = v_Orderid;
:new.detail = v_Newdetail;
,
insert |
|
j****n 发帖数: 107 | 14 一个dropdownlist,从数据库读取数据动态生成list item.
出现这样一个问题,无论选择了哪一个item,list.SelectedValue永远
等于排在第一的那个item值。
这是可能什么问题造成的?查了一遍又一遍,就是看不出错在哪里了。
哪位牛人来帮我看一下啊?同样的code在其它文件里都跑得好好的。
生成list的code如下:
DropDownList.Items.Clear();
foreach ( ListItem myItem in myListItems)
DropDownList.Items.Add(new ListItem(myItem.Text, myItem.Value));
DropDownList.SelectedIndex = -1;
多谢多谢! |
|
b********2 发帖数: 855 | 15 我用ASPX生产了RSS文件,然后用FEEDBUNNER读取数据,然后最终生成了以下这个东西
http://feeds.feedburner.com/Dealsnova-Today-Deal
我想请问下,如果我打开上面这个LINK,页面里的内容,是存放在哪里的啊。是我每次
打开这个LINK,
它就读一次我的ASPX文件,还是说他把我的内容放在他们的服务器上了?FEEDBUNNER的
原理我没时间
爱你去弄明白了,就来请教各位大牛了,多谢。 |
|
t******p 发帖数: 810 | 16 【 以下文字转载自 CS 讨论区 】
发信人: temptemp (werere), 信区: CS
标 题: 请推荐一个编程软件 对于事实数据处理
发信站: BBS 未名空间站 (Mon Jun 13 12:27:06 2011, 美东)
想弄个程序 可以事实读取数据 做一些数据处理。还要一些好的界面设计。
请问 有好的编程软件推荐码?
matlab? java? c#?
Thank you! |
|
r****y 发帖数: 26819 | 17 1, 需要embed字体,有麻烦一点的解决办法。google可以找到。
2,本地文件存储,这不是Flash的专长,Flash只管post一个XML的数据,可以另做web
service 来完成写文件的工作。 |
|
h******s 发帖数: 65 | 18 硬盘盒是好的。硬盘确实坏了,因为读取时声音异常。速度比较慢。
用盒子盘符都看不见。用连接器能看见,也能慢速读数据。 |
|
|
l**i 发帖数: 19 | 20 照著做了,可是testdisk好像檢測不到那個drive。列出了系統槃C,還有一格512B的不
知道是什麽的drive。按照testdisk的instruction嘗試檢測這個512B的東西,什麽都沒
發現。
請問高手還有其他什麽辦法麽?數據還有機會恢復麽?
謝謝啦! |
|
|
d******a 发帖数: 32122 | 22 D盘的大概没问题,因为不专属某个用户
问题是系统目录里管理员账户中my documents里边那些文件能找到吗?
笔记本是Vista, 未曾加密 |
|
|
e********h 发帖数: 694 | 24 我开启番茄固件自带的ftp server后,内网的机器联ftp服务器没问题,可是从实验室
的机器就联不上。
我发现外网连接时,登陆没问题,问题出在登陆后,服务器新开了一个端口,然后
filezilla没办法从那个新端口读取数据。
我google了一下,于是设置了ftp 新开端口的最大,最小值,然后把192.168.1.1的这
些端口全部port forward了,可是仍然不起作用。
求高人指点。
以下贴个filezilla的log
Status: Connecting to xx.xx.xx.xx:2020...
Status: Connection established, waiting for welcome message...
Response: 220 (vsFTPd 2.3.4)
Command: USER czhang
Response: 331 Please specify the password.
Command: PASS *******
Response: 230 Login successful.
Command: ... 阅读全帖 |
|
c******y 发帖数: 3269 | 25 The comparison should be among Thinkpad, Dell Latitude/Precision, and HP
Elitebook, since comparing Thinkpad with low-end HP/Dell makes no sense.
1、超群的可靠性。这个有人说HP和Dell的高端机也能达到,但是现在联想用6、700的
价格达到1200-1500高端机的水准,我认为这是非常了不起的
~~~~~~~~~~~~
Dell Latitude line has improved since D630, which keeps it as reliable as
Thinkpad, so does HP Elitebook line
With regard to the price, Dell Latitude is more consumer-friendly compare to
HP, the same QPR as Thinkpad line
2、超安静的风扇和散热。我用其他品牌的机器不太多,但是TP的风扇绝对是最安静之
一,我办... 阅读全帖 |
|
c***a 发帖数: 251 | 26 怎么会这样呢?错误是这样的
java.sq.SQLException: Communication failure during handshake.
Is there a server:info9.vub.ac.be:3306?
前面的数据读的好好的.读到一半,就上面那样了。而且我的数据库放在info9.vub.ac.be
请教 |
|
f*****g 发帖数: 31 | 27
It the problem reproduceable?
前面的数据读的好好的.读到一半,就上面那样了。而且我的数据库放在info9.vub.ac.be |
|
|
f*****g 发帖数: 31 | 29
Then you should have a speicfic exception message like "too many
connections" or "maximum of connections reached"...
前面的数据读的好好的.读到一半,就上面那样了。而且我的数据库放在info9.vub.ac.be |
|
|
x****u 发帖数: 44466 | 31 当年我用过mac下的ext3驱动,感觉如果都是开源的话,应该可靠性差不多。不过
windows和ext3的文件系统里面有很多不对应的东西,也就是限于放数据使用才安全。 |
|
d*******e 发帖数: 1649 | 32 solved by x.lstrip("[").rstrip("]").split(", ")
thanks for the attention! |
|
|
R****a 发帖数: 199 | 34 Python 没有试过。在Perl中至少可以写一个regular expression把这种pattern拿出来。 |
|
s******r 发帖数: 21 | 35
Here is my solution. It is not necessarily the simplest one.
I use f.seek(-60, ios::end) here, assuming:
1. the data file is in Text Format;
2. the last 2nd number is always within the last 60 bytes of the data file.
The last 2nd element in the vector v is what you want, then.
#include
#include
#include
#include
using namespace std;
int main(void){
ifstream f("1.data");
f.seekg(-60, ios::end);
vector v((istream_iterator(f)), istream_itera |
|
x*****u 发帖数: 3419 | 36 感谢! 但感觉这个-60不好把握,多了少了都成问题。
用getline应该更稳妥一点。
1 // istringstream::str
2 #include
3 #include
4 #include
5 #include
6 using namespace std;
7
8 int main () {
9
10 double val;
11
12 string file_name("Tnve.dat");
13 ifstream infile(file_name.c_str(),ios::in);
14 istringstream iss;
15 string strvalues,sv;
16
|
|
l*********i 发帖数: 483 | 37 试试这样行不行:
for line in myfile:
line_data=line.split()
line_data_0=int(line_data[0])
line_data_1=int(line_data[1])
... |
|
d*******8 发帖数: 3182 | 38 try the following:
lstLineNum = []
lstLine = []
lstTraffic = []
for linenum, line in enumerate(open('traffic.txt')):
..for num in line.strip().split('\t'):
....try:
......a = int(num)
....except:
......print "Not a munber"
....lstLine.append(a)
....lstLineNum.append(linenum)
..lstTraffic.append(lstLine)
dicTraffic = dict(zip(tulple(lstLineNum), lstTraffic)) |
|
r****t 发帖数: 10904 | 39 scipy 里面的load_data用适当的参数控制格式,很灵活,你这样的txt file直接读成
array,就是一行解决。 |
|
r****t 发帖数: 10904 | 40 用scipy, 2行搞定:
from scipy.io import read_array
data = read_array(file("myfile.txt"))
用matplotlib, 2行搞定:
from pylab import load
read = load("myfile.txt")
用numpy也是2行。 |
|
d*******e 发帖数: 1649 | 41 solved by using .lstrip("[").rstrip("]")
thanks for the attention! |
|
g*****g 发帖数: 34805 | 42 I used java/HtmlUnit to do this job before. Though you can do it
any any language I think.
purposes. |
|
s******o 发帖数: 2233 | 43 find out what interface your broker provides
purposes. |
|